A-Parser - парсер для профессионалов SEO

Большое количество исправлений, доводим парсер до идеального состояния!

А так же плановые фиксы в связи с изменением выдачи для SE::Google и SE::Yandex.

В следующих версиях ожидается новый HTTP движок, который не попал в текущую версию в связи с продолжительным тестированием.

Подробнее тут: 0.9.166

Добавлен парсер SE::QIP - парсер search.qip.ru, в нем выдача яндекса, парсит быстрее чем сам яндекс, меньше банит, а так же собирает до 5000 результатов с одного запроса

Добавлена поддержка выбора времени серпа(т.е. выбор времени когда проиндексирован результат) для гугла и яху, что позволяет например проверить сколько попало страниц в индекс за определенное время(час, день, неделя, и т.д.)

Поправлено большое число ошибок, спасибо вам, пользователям, за тестирование и сообщения о багах!

Подробнее тут: 0.9.38 и 0.9.57

Версия 0.9.16

[h2]Новые парсеры[/h2]

• Net::DNS - парсер резолвит домены в IP адреса
• SE::Google::SafeBrowsing - проверка домена в блеклисте гугла(подпись harm в выдачи)
• SE::Google::Position - проверка позиции домена по ключевому слову в гугле

[h2]Новые возможности[/h2]

• Подстановка найденных ключевых слов в качестве запросов для парсера SE::Yandex::WordStat, аналогично как сделанно для SE::Google::Suggests
• Поддержка страниц для парсера Net::HTTP, теперь можно делать полноценные парсеры поисковых систем и т.п., пример для aol.com:...

Версия 0.9.4

Новый парсер Net::HTTP - просто скачивает указанную страницу и предоставляет следующие результаты:

• {code} - код ответа
• {reason} - описание ответа
• {headers} - хёдеры
• {data} - контент(страница)

Новый парсер HTML::LinkExtractor - собирает внутренние и внешние ссылки с указанной страницы, может ходить до определенного уровня по внутренним страницам сайта. С этим парсером можно составить карту сайта или собрать все внешние ссылки.

Еще один новый парсер - SE::Bing::LangDetect, позволяет определить язык сайта.

Самое важное улучшение - опция Parse custom result:

• Позволяет применить регулярное выражение к любому результату любого парсера и сохранять новый результат с именованными макросами
• Может парсить как простые результаты, так и массивы...

Версия 0.9

Новые возможности с фильтрацией результатов:



Можно фильтровать по любому результату всех парсеров, вот основные примеры использования:

• фильтровать ссылки с гугла по вхождению строки
• фильтровать в резалт домены только с определенным PR
• фильтровать кейворды Yandex WordStat только с определенным числом показов

Новая опция - парсить только уникальные запросы, очень хорошо сочитается с опциями использующими автоматические подстановки для парсинга всех возможных результатов, например:
SE::Google::Suggests - парсер подсказок с гугла + опция Parse to level: 10(парсить до 10 уровня) + Query format: {query} {a:zzzz} (подстановка дополнительных символов), парсим запрос cigarettes - получаем 106846 кея по сигаретам.

Новый макрос в имени файла результата:


Например парсим сниппеты по запросам viagra, cialis, levitra, результат по каждому кею будет сохранен в отдельный файл.

Остальные изменения можно посмотреть здесь:...