A-Parser - парсер для профессионалов SEO

Денис Бартаев рассказывает, как в несколько кликов создать парсер любой поисковой системы на примере Rambler.ru. Мы получим всю необходимую информацию: ссылки, анкоры, сниппеты, число результатов, связанные ключевые слова и проверку на опечатку в запросе.



В уроке рассмотрены

• Использование XPath для создания кастомного парсера
• Обход капчи без использования Antigate
• Использование Template toolkit для форматирования результата
• Объединение результатов парсинга в массив объектов с полями, связанными по индексу

Подписывайтесь на наш канал!

Оставляйте в комментариях свои идеи и пожелания для будущих видео

Улучшения

• Теперь для парсеров Net::HTTP, HTML::TextExtractor, HTML::LinkExtractor, Rank::CMS кэшируются одинаковые HTTP запросы при использовании любой комбинации из этих парсеров в одном задании, что исключает выполнение повторных запросов к одному URL, как следствие растет скорость, уменьшается нагрузка на целевые сайты
• Добавлена опция Max connections per host позволяющая ограничить максимальное число одновременных подключений к одному домену/IP
• Добавлена опция Global proxy ban позволяющая расшарить статистику по бану проксей между заданиями
• В парсере HTML::TextExtractor улучшено отображение табличных данных и списков
• В парсере SE::Yandex::WordStat добавлена возможность указать минимальную частотность для добавления запроса на вложенный парсинг
• В парсере SE::Yandex добавлена опция Parse all results позволяющая автоматически...

В период с 10.06.2016 по 14.06.2016 саппорт будет не доступен. В связи с этим на данный период просьба задавать вопросы на форуме, по особо критическим вопросам можно писать администратору по контактам отсюда: Поддержка.
В остальное время тех поддержка работает по обычному графику: с 10 до 20 МСК по будним дням.

Улучшения

• В парсере Net::Whois добавлен парсинг названия регистратора домена

Исправления в связи с изменениями в выдачи

• SE::YouTube, SE::AOL, SE::Dogpile, SE::Yandex

Исправления

• Исправлено падение при использовании JavaScript(tools.js) на Windows, также исправлена некорректная работа на Linux
• Исправлена проблема с логином на некоторых аккаунтах Яндекса
• Исправлено определение ранка в парсере Rank::Alexa для доменов с www.
• Исправлена работа с некоторыми доменными зонами в парсере Net::Whois, а также отображение статуса для некоторых зон
• Исправлено падение Rank::CMS при использовании опции -nofork
• Исправлены проблемы в работе нового прокси чекера: отключение чекера при изменении настроек, переопределение чекера в задании, а также проблема с отображением в некоторых...

Денис Бартаев рассказывает, как собрать отзывы о компании в необходимом регионе:

• Парсинг отзывов с популярного сервиса
• Работа с парсером Net::HTTP, переход по сайту в глубину
• Использование конструкторов запросов и результатов
• Получение нескольких элементов контента одним регулярным выражением
• Работа с асинхронными запросами в A-Parser
• Просмотр результата в табличном виде в Excel

Подписывайтесь на наш канал!

Оставляйте в комментариях свои идеи и пожелания для будущих видео