1. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

API перезапуск парсера

Тема в разделе "Техническая поддержка", создана пользователем wildaks, 19 май 2014.

  1. wildaks

    wildaks A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    12 ноя 2012
    Сообщения:
    38
    Симпатии:
    8
    Можно ли добавить в API Python автоматический перезапуск a-parser в случае падения? У самого не получается дописать.
     
  2. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.337
    Симпатии:
    1.794
    если парсер падает то к нему уже не подключиться по API, значит данная проблема никак не относится к апи
    надо решать источник проблемы падения, либо запускать парсер по крону
     
  3. wildaks

    wildaks A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    12 ноя 2012
    Сообщения:
    38
    Симпатии:
    8
    Это понятно, но ведь можно перезапустить a-parser через командную строку.
    Источник никак решить не могу, что винде, что на CentOs при парсинге ПС в большое кол-во потоков с большим файлом(100 000 ключей, речь даже не о миллионах) на вход парсер падает, решить более менее удалось только если подавать на вход файлы порциями, но при этом выдается существенно больше капчей, так как капчи выдаются только на 1-е запросы. В течении такого парсинга парсер может падать несколько раз, когда ставишь парсинг на ночь это критично, т.к. не возможно возобновить парсинг.
     
  4. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.337
    Симпатии:
    1.794
    если есть проблемы с падением стоит обратиться ко мне(icq, skype)

    конечно можно, только к апи это никак не относиться
     

Поделиться этой страницей