A-Parser - парсер для профессионалов SEO

Добавлен парсер SE::QIP - парсер search.qip.ru, в нем выдача яндекса, парсит быстрее чем сам яндекс, меньше банит, а так же собирает до 5000 результатов с одного запроса

Добавлена поддержка выбора времени серпа(т.е. выбор времени когда проиндексирован результат) для гугла и яху, что позволяет например проверить сколько попало страниц в индекс за определенное время(час, день, неделя, и т.д.)

Поправлено большое число ошибок, спасибо вам, пользователям, за тестирование и сообщения о багах!

Подробнее тут: 0.9.38 и 0.9.57

Версия 0.9.16

[h2]Новые парсеры[/h2]

• Net::DNS - парсер резолвит домены в IP адреса
• SE::Google::SafeBrowsing - проверка домена в блеклисте гугла(подпись harm в выдачи)
• SE::Google::Position - проверка позиции домена по ключевому слову в гугле

[h2]Новые возможности[/h2]

• Подстановка найденных ключевых слов в качестве запросов для парсера SE::Yandex::WordStat, аналогично как сделанно для SE::Google::Suggests
• Поддержка страниц для парсера Net::HTTP, теперь можно делать полноценные парсеры поисковых систем и т.п., пример для aol.com:...

Версия 0.9.4

Новый парсер Net::HTTP - просто скачивает указанную страницу и предоставляет следующие результаты:

• {code} - код ответа
• {reason} - описание ответа
• {headers} - хёдеры
• {data} - контент(страница)

Новый парсер HTML::LinkExtractor - собирает внутренние и внешние ссылки с указанной страницы, может ходить до определенного уровня по внутренним страницам сайта. С этим парсером можно составить карту сайта или собрать все внешние ссылки.

Еще один новый парсер - SE::Bing::LangDetect, позволяет определить язык сайта.

Самое важное улучшение - опция Parse custom result:

• Позволяет применить регулярное выражение к любому результату любого парсера и сохранять новый результат с именованными макросами
• Может парсить как простые результаты, так и массивы...

Версия 0.9

Новые возможности с фильтрацией результатов:



Можно фильтровать по любому результату всех парсеров, вот основные примеры использования:

• фильтровать ссылки с гугла по вхождению строки
• фильтровать в резалт домены только с определенным PR
• фильтровать кейворды Yandex WordStat только с определенным числом показов

Новая опция - парсить только уникальные запросы, очень хорошо сочитается с опциями использующими автоматические подстановки для парсинга всех возможных результатов, например:
SE::Google::Suggests - парсер подсказок с гугла + опция Parse to level: 10(парсить до 10 уровня) + Query format: {query} {a:zzzz} (подстановка дополнительных символов), парсим запрос cigarettes - получаем 106846 кея по сигаретам.

Новый макрос в имени файла результата:


Например парсим сниппеты по запросам viagra, cialis, levitra, результат по каждому кею будет сохранен в отдельный файл.

Остальные изменения можно посмотреть здесь:...

Версия 0.8.109
Начнем по порядку заходя в интерфейс сначала Вас попросят ввести пароль, по дефолту - пустой.

Для всех тех кому надо быстро добавлять типовые задания, кто не хочет копаться в настройках или просто лень - создан новый интерфейс добавления заданий(предыдущий никуда не делся, он для тех кто хочет большего). В данном интерфейсе добавление задания максимально упрощено, достаточно выбрать что парсить и указать запросы, и при надобности изменить кое какие опции - и опа, задание уже готово



По поводу парсера подсказок гугла - добавлена возможность автоматической подстановки уже найденных кеев. Теперь достаточно указать один кей и уровень до которого собирать и парсер автоматом вытянет все кеи с огромной скоростью.
И напоследок - включена возможность одновременного выполнения нескольких заданий в очереди.

Подробности тут: 0.8.109