Такое дело, что иногда прокси использовать не вариант, а у меня есть capmonster. Я могу начать парсить без прокси со своего ип десятки тысяч запросов? Это как-то повлияет на мой ип с точки зрения гугла?
лучше настроить парсить в небольшое число потоков существует вероятность что через какое то время IP уйдет в бан на какое то время(поиск гугла не будет доступен совсем)
так и делаю, правда 35% ошибок и скорость 37/422. Это просто названия фильмов. Если вдруг добавлю inurl/site и прочее, то хоть капмостер, хоть нет, 99% ошибок)
по ним давно гугл ни че толком не дает, попробуй дисконнект.me парсить, тут есть где то пресет готовый.
надо посмотреть логи парсинга, если там преобладает 403 ошибка - это вина паблик проксей, т.е. гугл даже каптчу не показывает
Это да, я заметил. Но по идее ж "com_k2" и inurl:com_k2 будет одно и тоже, если результаты фильтровать еще регуляркой, ну и потом почистить.
