1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление
Файлы cookie Telegram чат

Как отдавать куки

Тема в разделе "Техническая поддержка", создана пользователем element.4seo, 25 дек 2015.

  1. element.4seo

    element.4seo New Member

    Регистрация:
    28 мар 2015
    Сообщения:
    13
    Симпатии:
    1
    Доброго всем времени суток, помогите пжл спарсить 1 сайт

    При незначительном парсинге появляеться защита, которая проверяет наличие куки, если их нет, тогда нужно ввести капчу
    Тестил в зеннопостере GET запросом:

    1) Если в настройки запроса не добавлять куки - http://take.ms/oIvBY тогда в ответ получаем такой код (просьба ввести капчу)

    Код:
    <html style="height:100%"><head><META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW"><meta name="format-detection" content="telephone=no"><meta name="viewport" content="initial-scale=1.0"><meta http-equiv="X-UA-Compatible" content="IE=edge,chrome=1"></head><body style="margin:0px;height:100%"><iframe src="/_Incapsula_Resource?CWUDNSAI=24&xinfo=8-191342732-0 0NNY RT(1451060463757 264) q(0 -1 -1 -1) r(0 -1) B12(4,316,0)&incident_id=221001100476839104-1549683260506572520&edet=12&cinfo=04000000" frameborder=0 width="100%" height="100%" marginheight="0px" marginwidth="0px">Request unsuccessful. Incapsula incident ID: 221001100476839104-1549683260506572520</iframe></body></html>
    2) Если добавляю куки - http://take.ms/McUTJ , тогда получаю нормальный ответ, с кодом страницы

    Но в апарсере такой трюк с куками не проходит, вставляю те же куки что и в зенно, отдает каптчу - http://take.ms/yHaPT

    Подскажите что я делаю не так, и как решить эту проблему. Спасибо
     
    #1 element.4seo, 25 дек 2015
    Последнее редактирование модератором: 26 дек 2015
  2. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.372
    Симпатии:
    2.102
    Добрый вечер.
    Может проблема не только в куках, а еще и в заголовках? Или юзерагент нужно подставлять... Напишите о каком сайте идет речь, тогда можно будет его проанализировать.

    P.S. На втором скрине вы точно куки подставляете?
     
    #2 Support, 25 дек 2015
  3. element.4seo

    element.4seo New Member

    Регистрация:
    28 мар 2015
    Сообщения:
    13
    Симпатии:
    1
    да, скопироваи с зенно и вставил апарсер, там формат совпадает, но сегодня запустил в апарсере опять, несколько часов парсило нормально, потом появилась эта защита, попробовал отправить get запрос с zenno с куками - норм, без - защита - https://monosnap.com/file/64y1vcdO7jfd1o52ho3IKDzY3dqA11

    Я так понял там временая блокировка когда на сайт посылается много запросов

    Адрес сайта могу скинуть в личку, скажите куда кидать
     
    #3 element.4seo, 27 дек 2015
  4. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.372
    Симпатии:
    2.102
    Либо здесь на форуме в личку (клик на имени - Начать переписку), либо по одному из контактов тех поддержки: http://a-parser.com/pages/support/
     
    #4 Support, 28 дек 2015
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)

Поделиться этой страницей