1. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

SE::Yandex::SQI падает скорость парсинга

Тема в разделе "Техническая поддержка", создана пользователем seowin555, 24 июл 2019.

  1. seowin555

    seowin555 A-Parser Pro License
    A-Parser Pro

    Регистрация:
    29 сен 2016
    Сообщения:
    187
    Симпатии:
    37
    Добрый день!
    Задача такая, нужно определить икс для 60к сайтов.
    При парсинге через SE::Yandex::SQI почему-то сильно падает скорость паринга, парсинг делаю через прокси, пробовал играться с потоками, брать еще два вида проксей, все равно так.
    Сначала скорость парсинга нормальная, потом сильно падает, чуть ли не до нуля.
    Подскажите, почему так может быть?
     
  2. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.546
    Симпатии:
    2.163
    Добрый день.
    Нужно анализировать лог задания, скорее всего банятся прокси и увеличивается количество попыток, за счет чего снижается скорость.
     

Поделиться этой страницей