1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление
Файлы cookie Telegram чат

Улучшение Неудачные запросы

Тема в разделе "Закрытые без версии", создана пользователем Force68, 26 май 2013.

  1. Force68

    Force68 A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 фев 2013
    Сообщения:
    175
    Симпатии:
    49
    Возможно ли добавить такую функцию в настройки - чтоб при завершении задания,
    парсер повторно обработал запросы попавшие в "неудачные запросы"?
     
    #1 Force68, 26 май 2013
  2. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    Конкретно при завершении задания это делать бессмыслено:
    неудачные запросы появляются когда количество попыток спарсить запрос превышает настройку Request retries
    т.е. зачастую необходимо просто увеличить этот параметр, например для парсера SE::Google и плохих проксях можно смело ставить 200-300

    так же неудачные запросы можно выводить в файл результата:
    Код:
    {query}: {success}\n
    если запрос неудачный то success будет 0
     
    #2 Forbidden, 26 май 2013
    Force68 нравится это.
  3. Force68

    Force68 A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 фев 2013
    Сообщения:
    175
    Симпатии:
    49
    Спасибо!
     
    #3 Force68, 26 май 2013
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)

Поделиться этой страницей