A-Parser - парсер для профессионалов SEO

В этом видео уроке рассмотрен способ создания пресета для анализа сайта в глубину.



В уроке рассмотрено:

• Парсинг в глубину (уровень) сайта относительно страницы запроса при помощи функции "Парсить до уровня"
• Получение title (с очисткой от HTML сущностей)
• Получение таких параметров как:
  • кол-во предыдущих редиректов
  • код ответа сервера
  • кол-во внешних ссылок

Полезные ссылки:

• https://a-parser.com/resources/357/ - готовый пресет в Каталоге
• https://a-parser.com/resources/356/ - подробное описание по созданию настроек для парсинга в глубину сайта
• https://a-parser.com/wiki/advanced-options/#parse-all-results - документация по функции "Парсить до уровня"

Оставляйте комментарии и подписывайтесь на наш канал на YouTube!

...

Улучшения

• В SE::Google::ByImage добавлена поддержка рекаптч, а также улучшена работа в целом
• В SE::Yandex добавлена возможность одновременной работы авторазгадывания каптч и антигейта
• В Rank::Ahrefs добавлена возможность выбора типа домена
• Полностью переписан SE::Yandex::SQI, изменен набор собираемых данных
• Реализован бан прокси в SE::DuckDuckGo::Images
• В Net::Whois добавлен парсинг даты освобождения домена
• Оптимизирована работа с прокси при использовании большого числа попыток
• Улучшена работа функции Bypass Cloudflare
• Добавлен tools.aparser.version(), позволяющий получить информацию о версии A-Parser

Исправления в связи с изменениями в выдаче

• В мобильной верстке SE::Google::Modern исправлен парсинг новостей, а также исправлен парсинг ссылок и анкоров в desktop выдаче
• В SE::Yandex...

9-й сборник статей. В нем мы разберемся, как делать пресеты для анализа всех страниц сайта, научимся парсить все ссылки сайта из индекса ПС и будем проверять существование запросов. Поехали!

Создание пресета для анализа страниц сайта
Анализ страниц на сайте - это один из самых популярных кейсов использования А-Парсера. При этом можно собирать очень много различных параметров, начиная от проверки доступности и заканчивая поиском определенных слов на странице.
О том, как сделать простой анализатор сайта и пойдет речь в этой статье.

Парсинг разными способами максимум результатов из индекса поисковых систем
Парсинг из индекса поисковых систем всех страниц сайта - это еще один популярный кейс для A-Parser. ПС ограничивают кол-во результатов по одному запросу, поэтому нужно как-то обходить это ограничение. Как это сделать - описано в нашей статье....

В этом видео уроке рассмотрен способ сбора данных об организациях в указанной местности из Google Maps, используя встроенный парсер Гугл карт. Также показано как определить необходимые координаты на карте и задать их в парсере.



В уроке рассмотрено:

• Парсинг карт Google с использованием Maps::Google
• Пример получения координат для использования в макросах подстановок
• Работа с макросами подстановок при наличии отрицательных чисел
• Импорт результата в Excel

Полезные ссылки:

• Готовый пресет в Каталоге
• Описание парсера Maps::Google
• Документация по макросам подстановок

Оставляйте комментарии и...

Улучшения

• Добавлен новый парсер Rank::Ahrefs
• Добавлен инструмент $tools.CSVline для простого создания CSV файлов
• В связи с тестированием Гуглом новой верстки в поисковике, добавлена ее поддержка в SE::Google::Modern
• В SE::Google::Modern в массив $serp добавлена переменная $amp, которая показывает, поддерживает ли страница AMP
• В SE::Yandex в $serp.$i.label добавлена поддержка Турбо страниц, а также добавлен сбор типов меток сайтов
• В Net::HTTP улучшена работа с редиректами, добавлена опция Follow common redirects
• Теперь в Util::ReCaptcha2 можно указать хост для используемого сервиса разгадывания, а также в Provider url можно указывать адреса через запятую (актуально для XEvil и CapMonster), парсер будет использовать каждый из них в случайном порядке
• Увеличено количество результатов в парсерах...