Странность при парсинге

kolya757

A-Parser Enterprise License
A-Parser Enterprise
Добрый день!
Парсю сайт
Сначало пытаюсь собрать ссылки при помощи парсера HTML::LinkExtractor , но пишет что прокси попадают в бан, хотя раньше этот парсер на этом сайте работал, но при этом на этих же проксях с этогоже сайта собирается контент через парсер Net::HTTP, просто ссылки добавляю руками.
Подскажите в чем может быть загвостка при сборе ссылок HTML::LinkExtractor?
 
Последнее редактирование:
обычно нужно конфиги и пресеты смотреть и сравнивать, на вскидку request delay, user agent и т.п.
 
Назад
Верх