Пользователь Support Юра разместил новый ресурс:
Парсинг всех страниц сайта - Парсинг всех страниц сайта с индекса Google
Узнать больше об этом ресурсе...
Парсинг всех страниц сайта - Парсинг всех страниц сайта с индекса Google
Пресет собирает ссылки на все страницы сайта с поисковой выдачи Google.
Посмотреть вложение 494
В запросе указываем адрес сайта, ссылки на который будет собирать парсер.
Для получения всех возможных результатов поиска, указываем опцию "Parse all results" и число страниц ставим на максимальное количество.
В результатах парсинга указываем опцию "Уникальность по строке", для исключения повторов.
Для обхода Google-каптчи, возможно, понадобится использовать антигейт.
Результат парсинга...
Узнать больше об этом ресурсе...