1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Скорость парсинга пс Яндекс.

Тема в разделе "Техническая поддержка", создана пользователем Piro, 2 апр 2015.

  1. Piro

    Piro A-Parser Pro License
    A-Parser Pro

    Регистрация:
    16 мар 2015
    Сообщения:
    23
    Симпатии:
    0
    Очень тяжело парсится , по сравнением с гооглем .
    Мне стало интересно у меня у одного такое или у всех ?
    Иногда приходится подождать 2-3 минуты чтобы он только начал парсить и то в 10/10 скорость , хотя я поставил 1000 потоков.
     
  2. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    яндекс гораздо сильнее банит, нужны качественные прокси и\или подключать антигейт
     
  3. Piro

    Piro A-Parser Pro License
    A-Parser Pro

    Регистрация:
    16 мар 2015
    Сообщения:
    23
    Симпатии:
    0
    Подключал и антигей и выбирал прокси под яндекс без в вода капчи всё равно пробив очень мал .
     
  4. Piro

    Piro A-Parser Pro License
    A-Parser Pro

    Регистрация:
    16 мар 2015
    Сообщения:
    23
    Симпатии:
    0
    Капчу жрёт много и сразу при 1000 потоков а результат 0
     
  5. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    увеличь попытки(Request retries)

    Пример парсинга в 300 потоков, 100 попыток, все настройки по умолчанию(без антигейта), прокси от A-Parser'a:
    [​IMG]

    Пример парсинга в 100 потоков(демо версия парсера), 100 попыток, прокси от nosok.org:
    [​IMG]
     
  6. Piro

    Piro A-Parser Pro License
    A-Parser Pro

    Регистрация:
    16 мар 2015
    Сообщения:
    23
    Симпатии:
    0
    Я использую данный сервер прокси http://best-proxies.ru/ , выбрал яндекс без капчи .
    (Request retries) всегда стоит 200
     
  7. Sobesednic

    Sobesednic A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    12 сен 2014
    Сообщения:
    44
    Симпатии:
    14
    Это паблик прокси
     
  8. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    дауж, покупать паблик прокси это надо уметь :)
     
  9. Piro

    Piro A-Parser Pro License
    A-Parser Pro

    Регистрация:
    16 мар 2015
    Сообщения:
    23
    Симпатии:
    0
    Я же не знал что они паблик , к тому же я с их помошью с гоогле собрал 3,000,000 сайтов .
    За 1 день .
     

Поделиться этой страницей