1. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Настройки капмонстера

Тема в разделе "Техническая поддержка", создана пользователем danni dannovich, 27 мар 2016.

  1. danni dannovich

    danni dannovich A-Parser Pro License
    A-Parser Pro

    Регистрация:
    15 янв 2015
    Сообщения:
    59
    Симпатии:
    2
    Такой вопрос - делаю парсинг в 1к потоков, а капмонстер имеет 20 потоков. Какие настройки лучше ставить, чтобы капмонстер успевал распознать все капчи? (В том плане - больше попыток, больше интервалы?) Со скрином всех этих настроек, если можно.
     
  2. btr

    btr A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    11 фев 2013
    Сообщения:
    198
    Симпатии:
    116
    смотря что ты парсишь, нужно ручками подбирать.
     
  3. danni dannovich

    danni dannovich A-Parser Pro License
    A-Parser Pro

    Регистрация:
    15 янв 2015
    Сообщения:
    59
    Симпатии:
    2
    гугл. Ночью поставил парситься, утром смотрю на капмонстер - на всех капчах ошибки(неизвестный тип вроде бы), и "Недостаток потоков:1700" за ночь набежало и сейчас(после перезагрузки) тоже растет. Просто хочется, чтобы если потоки капмостера заняты - апарсер ждал.
    Вот за 3 минуты +300 недостаток потоков.
    В соседней теме человек писал "пришлось поменять настройки к капмостеру в апарсере, чтобы апарсер его не досил.", я спросил как, но уже неделю нет ответа)
     
  4. btr

    btr A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    11 фев 2013
    Сообщения:
    198
    Симпатии:
    116
    капмонстр очень плохо гадает капчу гугла =(
    многое зависит еще и от прокси которые юзаешь, факторов много.
    Чем хуже прокси, тем меньше ставь потоков в апарсере.
    1000 потоков помойму даже на чистейших прокси это очень много, юзай до 500 потоков, ставь сначала 100 потоков, смотри как себя ведет капмонстр, потом повышай, опять смотри и тд
     
  5. danni dannovich

    danni dannovich A-Parser Pro License
    A-Parser Pro

    Регистрация:
    15 янв 2015
    Сообщения:
    59
    Симпатии:
    2
    с ним лучше, чем без него. Гнать в антигейт 500к+ капч как-то не прикольно)
     
  6. btr

    btr A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    11 фев 2013
    Сообщения:
    198
    Симпатии:
    116
    ~10к каптч гадает он у меня в сутки, так что готовся, дней 50 парсить =)
     

Поделиться этой страницей