Парсинг рекламы с Yandex 1.0.0

Пресет разбирает блок рекламы в поисковой выдачи Yandex и сохраняет результат в формате json.

1. В качестве запросов указываем слова (фразы) для поиска.
2. Используем антигейт для обхода капчи.
3. Используем свойство "Pages count" для указания количества страниц поиска.
4. Указываем начальный и конечный текст, для формирование результатов.
5. В результат выводим:
   • запрос;
   • позицию в браузере;
   • страницу на которой появляется реклама;
   • домен рекламы;
6. Результат структурируем с помощью шаблонизатора.
7. Результаты парсинга сохраняем в файл, который имеет структуру формата json.

Результат:

Код:

[
   {
      "купить часы в Москве" : {
         "top" : {
            "1" : "marketsmart.ru"
         },
         "bottom" : {
            "1" : "bit.ly",
            "2" : "lelocle.ru"
         }
      }
   },
   {
      "купить ноутбук в Москве" : {
         "top" : {
            "1" : "mediamarkt.ru"
         },
         "bottom" : {
            "1" : "nb100.ru",
            "2" : "remont-note.ru"
         }
      }
   },
   {
      "ветеринар Владивосток" : {
         "bottom" : {
            "1" : "veterinar-vl.ru",
            "2" : "veterinar-vl.ru"
         }
      }
   },
   {}
]

Нажмите, чтобы раскрыть...