1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление
Файлы cookie Telegram чат

Не получается спарсить выдачу (проблема в прокси?)

Тема в разделе "Техническая поддержка", создана пользователем benone, 7 апр 2014.

  1. benone

    benone A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    5 апр 2014
    Сообщения:
    47
    Симпатии:
    2
    Всем привет!

    Купил сегодня парсер, пытаюсь настроить. Помогите, пожалуйста!

    1. Добавил прокси http://work.a-poster.info/prx/perm_socks.txt
    Пишет что живых много

    2. Настроил Antigate, работает нормально

    3. Пытаюсь запустить парсер SE::Yandex "Pages Count use Proxy"
    Для 100 урлов с inurl

    Из 100 запросов, 94 неудачных.

    В чем может быть проблема?

    Спасибо!
     
    #1 benone, 7 апр 2014
  2. benone

    benone A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    5 апр 2014
    Сообщения:
    47
    Симпатии:
    2
    Вопрос решен. Просто увеличил кол-во реквестов + прокси.
     
    #2 benone, 8 апр 2014
  3. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    проблема скорее всего в переборе потоков, надо учитывать потоки прокси чекера и всех запущеных заданий
    для тарифа на 20 потоков лучше всего отключить проверку прокси - No check proxy в настройках чекера
    и использовать только одно активное задание в 20 потоков
     
    #3 Forbidden, 8 апр 2014
  4. benone

    benone A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    5 апр 2014
    Сообщения:
    47
    Симпатии:
    2
    Насколько я понимаю, для всех списков прокси можно использовать только единый проксичекер?

    Я просто добавил прокси еще из одного источника. Как в таком случае быть?
     
    #4 benone, 8 апр 2014
  5. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    не рекомендуется миксовать списки с ограничем по потокам и без
     
    #5 Forbidden, 8 апр 2014
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)

Поделиться этой страницей