1. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Как уменьшить потребление трафика при парсинге гугла?

Тема в разделе "Техническая поддержка", создана пользователем sergeda, 27 окт 2016.

  1. sergeda

    sergeda A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    22 май 2013
    Сообщения:
    193
    Симпатии:
    23
    Есть прокси где платить нужно за трафик. Запустил парсинг гугла в 50 потоков за пару часов съел гигабайт трафика. Вроде бы у гугла сайт легкий а так жрет. Можно ли какими-то настройками уменьшить потребление трафика? Может отключить картинки? Мобильную версию использовать? Еще что-то?
     
  2. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.337
    Симпатии:
    1.795
    Картинки конечно же не грузятся, контент в gzip сжимается, ну и к слову говоря там сайт не легкий совсем :)
     
  3. sergeda

    sergeda A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    22 май 2013
    Сообщения:
    193
    Симпатии:
    23
    Понял. Жаль что ничего сделать нельзя. Спасибо за ответ
     

Поделиться этой страницей