Хотел бы собрать себе базу сайтов с быстророботом.
Как настроить скрипт чтобы софт собирал сайты с поисковой системы , где есть быстроробот.
Например:
http://yandex.ru/yandsearch?lr=10313&text=новости новороссии сейчас
Мы видим фразу 7 часов назад .
Если же сайт публикую интересную новость она попадает в индекс быстрее ,чем ждать апргейт яндекса .
Нужно собрать все сайты у которых присутствует данное название и не только 7 часов , а допустим 1 час или 15 минут назад .
Как настроить скрипт чтобы софт собирал сайты с поисковой системы , где есть быстроробот.
Например:
http://yandex.ru/yandsearch?lr=10313&text=новости новороссии сейчас
Мы видим фразу 7 часов назад .
Если же сайт публикую интересную новость она попадает в индекс быстрее ,чем ждать апргейт яндекса .
Нужно собрать все сайты у которых присутствует данное название и не только 7 часов , а допустим 1 час или 15 минут назад .