Получение страниц сайта и проверка индексации в Google и Яндекс 1.0

Получение всех страниц сайта и проверка индексации в Google и Яндекс

  1. Support Юра
    Минимальная версия A-Parser:
    1.2.40
    Пресет есть продолжением и усовершенствованием этого решение, в более качественном виде. Для сбора адресов страниц сайта, используется парсер HTML::LinkExtractor HTML::LinkExtractor. На вход адрес сайта (сайтов) с которых планируется собирать адреса страниц:
    Через свойство "Parse to level" - указываем глубину для сбора ссылок на страницы:
    [​IMG]
    После этого, проверяем индексацию Google и Яндекс, настройки запросов и формат результатов, идентичные этому решению:
    [​IMG]
    Единственное отличие в том, что для парсера Яндекс, используется "Anti Gate" для обхода капчи. Если Anti Gate не нужен, его можно убрать - пресет будет работать.