1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Грусть пичаль, тоска, уныние,

Тема в разделе "Техническая поддержка", создана пользователем colman, 24 мар 2018.

  1. colman

    colman A-Parser Pro License
    A-Parser Pro

    Регистрация:
    14 июн 2012
    Сообщения:
    5
    Симпатии:
    1
    неудачных запросов :332038 45.6%
    Результатов уник/всего:

    неудачных запросов :33953 38.5%

    неудачных запросов :3156503 83.7%

    вобщем парсер очень печально прасит гугл, прокси авм за 100 баксов (Вам доступно 13103 прокси из 13683)
    , кто подскажет как и что сейчас парсить чтобы собирать нормальные базы, потому что это вообще неочем ,паршу без опреаторов
     
  2. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    AWM прокси банят парсинг google после 100к запросов, у них это в правилах написано:
     
  3. colman

    colman A-Parser Pro License
    A-Parser Pro

    Регистрация:
    14 июн 2012
    Сообщения:
    5
    Симпатии:
    1
    и где брать прокси? (отдавать 500 баксов в месяц на просси тоже не вариант) ваши тоже самое, так же все в бане были.
     
  4. autoparts.db

    autoparts.db A-Parser Pro License
    A-Parser Pro

    Регистрация:
    17 мар 2018
    Сообщения:
    37
    Симпатии:
    11
    Обучите парсер работать с web проксями, к примеру с glype(http://getproxi.es/glype-proxies/).
    Я когда-то парсил гугл через них и вполне неплохо.
     
  5. colman

    colman A-Parser Pro License
    A-Parser Pro

    Регистрация:
    14 июн 2012
    Сообщения:
    5
    Симпатии:
    1
    когда то и я парсил, неплохо было на проксях форбиддена, а сейчас вообще ничего не моуг спарсить толком, а уж на бесплатных проксях можно даже и не пробывать они все в бане у гугла
     
  6. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.348
    Симпатии:
    2.097
    Свежий замер:
    [​IMG]
    Наши прокси, 300 потоков, 50 попыток, 1 страница, 10 результатов
     
  7. signup

    signup A-Parser Pro License
    A-Parser Pro

    Регистрация:
    2 апр 2013
    Сообщения:
    15
    Симпатии:
    2
    Аналогичная проблема с проксями. Раньше все было нормально, сейчас гугл парсить стало практически невозможно из-за бана проксей. В итоге вообще на парсинг гугла пришлось забить.
     
  8. colman

    colman A-Parser Pro License
    A-Parser Pro

    Регистрация:
    14 июн 2012
    Сообщения:
    5
    Симпатии:
    1
    да это вообще не показатель, что вы хотели этим продемонстрировать?, что он может собирать всё подряд?)по сравнению с тем что было раньше он его вообще не парсит и близко не выпаршивает прежних результатов.Неудачных запросов по 60 процентов.
     
  9. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    Показатель, и вполне четкий - конкретный замер скорости на наших прокси, скорость в 300 потоков 1880 запросов в минуту - это отличный показатель

    Для неудачных запросов есть универсальное решение - увеличить Request retries, пора уже запомнить :)
     

Поделиться этой страницей