1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление
Файлы cookie Telegram чат

Proxy ban time для Net::HTTP

Тема в разделе "Техническая поддержка", создана пользователем John, 5 дек 2013.

  1. John

    John A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 ноя 2013
    Сообщения:
    48
    Симпатии:
    8
    Некоторые веб-сервисы имеют ограничение на количество запросов с одного IP: xtool, spywords, ahrefs, ашмановский анализатор тематики страницы и т.п. - список можно долго продолжать.

    В каком случае Апарсер считает, что прокси надо забанить на proxy ban time?
    Можно ли как-то сказать, что если на странице при 200 ответе не срабатывает регулярка Check content - то прокси надо забанить?
     
    #1 John, 5 дек 2013
  2. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    Сейчас при не соответсвии регекса или кода ответа прокся банится на время Proxy ban time
     
    #2 Forbidden, 5 дек 2013
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)

Поделиться этой страницей