1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2200+ и мы растем!
    Скрыть объявление
Файлы cookie Telegram чат

Как обходите блокировки.

Тема в разделе "Делимся опытом", создана пользователем alzasr, 21 июн 2017.

  1. alzasr

    alzasr New Member

    Регистрация:
    21 июн 2017
    Сообщения:
    3
    Симпатии:
    0
    Есть задача написать парсер гугла и яндекса. Нашел ваш парсер и готов рассмотреть вопрос приобретения лицензии. Но по прошлому опыту, у поисковиков есть ограничения на количество запросов с одно ip. Как осуществляется обход ограничений? Не получится, что я куплю органиченно работающее ПО?
     
    #1 alzasr, 21 июн 2017
  2. alzasr

    alzasr New Member

    Регистрация:
    21 июн 2017
    Сообщения:
    3
    Симпатии:
    0
    Как понял из документации, для этого используется прокси. Т.е. помимо приобретения вашего продукта нужно приобрести (либо найти бесплатные, а значит скорее всего в черном списке) несколько прокси.
     
    #2 alzasr, 21 июн 2017
  3. relay

    relay A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    22 июл 2013
    Сообщения:
    151
    Симпатии:
    101
    прокси можно купить из личного кабинета, в зависимости от количества потоков, цена за месяц составит от 35 до 120$
     
    #3 relay, 21 июн 2017
  4. alzasr

    alzasr New Member

    Регистрация:
    21 июн 2017
    Сообщения:
    3
    Симпатии:
    0
    Спасибо.
     
    #4 alzasr, 21 июн 2017
  5. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.100
    Симпатии:
    2.036
    Добрый день.
    Да, ПС используют различные способы защиты от парсинга: каптчи, бан по IP и т.п. В А-Парсере для обхода данных ограничений используется множество различных методов: прокси и их перебор, разгадывание каптч, а так же собственные наработки, которые не разглашаются. Например, в парсере Гугла можно включить отображение только цифровой каптчи, которая, как известно, легче (и дешевле) разгадывается. Так же в составе А-Парсера есть парсер Гугла, в котором вообще не выдаются каптчи: https://a-parser.com/threads/3387/. Таким образом мы прилагаем максимум усилий, чтобы наш софт работал максимально эффективно. И если происходят изменения в выдаче каких-то сервисов, обновления парсера выпускаются в кратчайшие сроки, поэтому "ограниченно работающее ПО" - это не про нас :)
    Относительно проксей. При покупке лицензии, в зависимости от ее типа, предоставляются бонусные прокси, более детально здесь: https://a-parser.com/wiki/versions-and-licences/
     
    #5 Support, 21 июн 2017
    rumos, vipuncle, btr и 2 другим нравится это.
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)

Поделиться этой страницей