1. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Улучшение Неудачные запросы

Тема в разделе "Закрытые без версии", создана пользователем Force68, 26 май 2013.

  1. Force68

    Force68 A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 фев 2013
    Сообщения:
    175
    Симпатии:
    49
    Возможно ли добавить такую функцию в настройки - чтоб при завершении задания,
    парсер повторно обработал запросы попавшие в "неудачные запросы"?
     
  2. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.337
    Симпатии:
    1.795
    Конкретно при завершении задания это делать бессмыслено:
    неудачные запросы появляются когда количество попыток спарсить запрос превышает настройку Request retries
    т.е. зачастую необходимо просто увеличить этот параметр, например для парсера SE::Google и плохих проксях можно смело ставить 200-300

    так же неудачные запросы можно выводить в файл результата:
    Код:
    {query}: {success}\n
    если запрос неудачный то success будет 0
     
    Force68 нравится это.
  3. Force68

    Force68 A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 фев 2013
    Сообщения:
    175
    Симпатии:
    49
    Спасибо!
     

Поделиться этой страницей