A-Parser - парсер для профессионалов SEO

В этом видеоуроке мы изучим один из инструментов для работы с запросами - макросы подстановок. С их помощью можно значительно увеличивать количество запросов, листать страницы и многое другое.


В уроке рассмотрено:

• макрос {num} на примерах прохода по страницам и перебора координат в парсере Google maps
• макрос {az} на примере парсинга с inurl: для увеличения кол-ва запросов и соответственно результатов
• макрос {each} на примере парсинга подсказок для генерации словосочетаний

Полезные ссылки:

• https://a-parser.com/wiki/query-format/#Макросы-подстановок - документация по макросам подстановок
• https://a-parser.com/resources/336/ - пресет по перебору координат в Maps::Google
• https://a-parser.com/resources/340/ - пресет для прохода по страницам
• https://a-parser.com/resources/341/ - пресет для парсинга с inurl:...

33-й сборник рецептов, в котором мы будем собирать данные из Google maps в указанной местности, спарсим блок вопросов и ответов в поиске Гугла и научимся использовать файлы целиком в качестве запросов. Поехали!

Сбор всех организаций в определенной местности
Начиная с версии 1.2.482 в A-Parser появились парсеры карт Google и Яндекс. Принцип работы обоих одинаков - в настройках указываются координаты точки и зум, парсер собирает результаты поиска по ключевым словам в этой точке и области вокруг нее, ограниченной зумом. Но если стоит задача собрать данные, например, со всего города, то для ее решения нужно указывать диапазон координат и "заставить" парсер пройтись по ним. Как это сделать, а также пример пресета - все это показано по ссылке выше.

Парсер собирающий вопросы и ответы из выдачи Google
Google по некоторым запросам показывает в поисковой выдаче блок вопросов и...

Улучшения

• Движок v8 обновлен до версии 7.5, помимо увеличения скорости есть множество улучшений в поддержке новых возможностей языка JavaScript
• В SE::Yandex в массив $ads добавлена переменная $visiblelink, в которой содержится видимая ссылка
• В Rank::Bukvarix::Domain добавлена переменная $totalcount которая содержит количество результатов
• В SE::Yahoo добавлена опция Not found is error, указывающая, считать ли отсутствие результатов ошибкой

Исправления в связи с изменениями в выдаче

• Исправлен парсинг $title в Shop::Yandex::Market
• В SE::Google::Modern исправлен парсинг видео в мобильной выдаче
• В Maps::Yandex исправлен парсинг рейтингов
• Исправлена проверка получаемого контента в SE::Yahoo
• SE::DuckDuckGo, Shop::Amazon,...

В этом видеоуроке будет показано, как настроить периодическую проверку окончания срока регистрации доменов, и получать уведомления в телеграм, если он меньше заданного количества дней.



В уроке рассмотрено:

• использование tools.js для написания собственных функций
• работа с шаблонизатором Template Toolkit
• проверка доменов через WHOIS
• цепочки заданий
• отправка сообщений в Telegram с помощью бота

Полезные ссылки:

• https://a-parser.com/threads/4316/ - статья о создании бота и группы для получения уведомлений в Telegram
• https://a-parser.com/resources/304/ - видеоурок по созданию Телеграм канала на базе A-Parser
• https://a-parser.com/resources/287/ - готовые для импорта пресеты
• https://core.telegram.org/bots/api - документация по Telegram Bot API

Оставляйте комментарии и подписывайтесь на...

Улучшения

• Новые парсеры:
  • Maps::Google - по ключевым словам собирает различные данные об организациях в заданных координатах
  • Maps::Yandex - по ключевым словам собирает различные данные об организациях в заданных координатах
  • Rank::Bukvarix::Domain - сбор ключевых слов по домену
  • Rank::Bukvarix::Keyword - сбор ключевых слов по ключевому слову
• Удалены 4 неактуальных парсера: Rank::SEMrush::Keyword, SE::QIP, SE::QIP::Position, Rank::MegaIndex
• Улучшена работа SE::AOL
• JS парсеры: для this.request добавлена опция data_as_buffer, которая определяет возвращать data как строку(String) или объект Buffer

Исправления в связи с изменениями в выдаче

• В SE::Google::Modern исправлена работа с рекаптчами, исправлен парсинг сниппетов, а также исправлен парсинг мобильной...