Всем привет.
Парсер
Net::HTTP, версия 1.1.608
После прохождения нескольких тысяч запросов, парсинг просто останавливается. Именно останавливается, не вылетает. Перестараются делаться запросы. Все стоит на месте. После ребута парсинг начинается, но буквально после 2-10к запросов снова встает на месте.
Прокси awmproxy.com безлемит.
Парсер стоит на дедике. Windows Server 2008 R2
Куда смотреть?
Up: Снял галку "Уникальные запросы" пока не останавливался. Думаю в этом дело, так как запросов оч.много. В любом случае оставлю на несколько часов, посмотрю не остановится ли.
Парсер
Net::HTTP, версия 1.1.608
После прохождения нескольких тысяч запросов, парсинг просто останавливается. Именно останавливается, не вылетает. Перестараются делаться запросы. Все стоит на месте. После ребута парсинг начинается, но буквально после 2-10к запросов снова встает на месте.
Прокси awmproxy.com безлемит.
Парсер стоит на дедике. Windows Server 2008 R2
Куда смотреть?
Up: Снял галку "Уникальные запросы" пока не останавливался. Думаю в этом дело, так как запросов оч.много. В любом случае оставлю на несколько часов, посмотрю не остановится ли.
Последнее редактирование: