1. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Много неудачных запросов

Тема в разделе "Техническая поддержка", создана пользователем Alpha, 15 мар 2016.

  1. Alpha

    Alpha A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 ноя 2015
    Сообщения:
    5
    Симпатии:
    0
    Здравствуйте, подскажите в чем дело, при парсинге выдачи гугла больше половины результатов уходят в неудачные ? прокси покупные на 50 потоков паршу в 35, до смены версии парсило хорошо. число попыток 40.
     

    Вложения:

    • screen1.png
      screen1.png
      Размер файла:
      48,4 КБ
      Просмотров:
      20
  2. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.547
    Симпатии:
    2.164
    Включите ведение лога задания - там будет видна причина неудачных запросов. Скорее всего - это каптчи.
     
  3. Alpha

    Alpha A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 ноя 2015
    Сообщения:
    5
    Симпатии:
    0
    При тестовом прогоне вылазиет много каптчи, что с этим можно сделать? или прокси стали хуже?
     
  4. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.547
    Симпатии:
    2.164
    Видимо Гугл начал сильнее банить прокси, или обновил черные списки IP - ситуция с парсингом этой ПС значительно ухудшилась на любых прокси несколько недель назад.
    Увеличьте кол-во попыток и/или используйте Антигейт.
     
  5. DeLaKroiX

    DeLaKroiX A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 дек 2015
    Сообщения:
    267
    Симпатии:
    96
    скорее гугл стал умнее... примерно с середины прошлого месяца начались проблемы с его парсингом
     
  6. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.337
    Симпатии:
    1.795
    я не заметил изменений в гугле, бывают периоды когда одни прокси хуже других, это скорее всего связано с интенсивностью парсинга через них
    вот пример других прокси(nosok.org), которые стоят на демо версии:

    [​IMG]

    Парсинг на дефолт настройках и 10 попытках
     
  7. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.337
    Симпатии:
    1.795
    Сейчас на наших проксях ситуация гораздо лучше:

    [​IMG]

    дефолт настройки и 50 попыток
     
  8. Alpha

    Alpha A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 ноя 2015
    Сообщения:
    5
    Симпатии:
    0
    По прежнему куча неудачных, с антикапчей тоже ошибки какие то как в этой теме http://en.a-parser.com/threads/2184/

    PS названия скринов не верные там без антикапчи а не без прокси))
     

    Вложения:

  9. DeLaKroiX

    DeLaKroiX A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 дек 2015
    Сообщения:
    267
    Симпатии:
    96
    по поводу первого - обновись на последнюю бету, гугл капчу сменил. по поводу второго - не в гугле дело, а с проксями что-то не так. мож айпишку не выставил нужную, или ещё чего, у меня такие ошибки бывают, когда прокся не успевает ответить вовремя или не работает, но это на пабликах, на покупных не знаю конкретно в чём может быть проблема.
     
    Support нравится это.
  10. Alpha

    Alpha A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 ноя 2015
    Сообщения:
    5
    Симпатии:
    0
    Спасибо с капчей начал работать, а вот ошибка вылазиет постоянно.
     

    Вложения:

    • oshibka.png
      oshibka.png
      Размер файла:
      102,1 КБ
      Просмотров:
      9
  11. relay

    relay A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    22 июл 2013
    Сообщения:
    157
    Симпатии:
    103
    Proxy error: read error
    прокси смотри
     
  12. Alpha

    Alpha A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 ноя 2015
    Сообщения:
    5
    Симпатии:
    0
    Вроде все нормализовалось, уменьшил количество потоков до 40(не знаю только в этом ли было дело), ну переход на бету точно помог, всем спасибо.
     
  13. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.337
    Симпатии:
    1.795
    Судя по скрину превышается лимит потоков прокси по тарифу, это может быть например из за включенной проверки в проксичекере или при запуске нескольких заданий. Лучше всего выставить в "Настройках - Общие - Общий лимит потоков" такой же лимит как по тарифу прокси, и после этого перезапустить задание(пауза\старт)
     

Поделиться этой страницей