1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление
Файлы cookie Telegram чат

зависает намертво

Тема в разделе "Техническая поддержка лицензии Enterprise", создана пользователем all3xpress, 15 июн 2019.

  1. all3xpress

    all3xpress A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    10 фев 2019
    Сообщения:
    21
    Симпатии:
    1
    примерно каждые 300 запросов, зависает, оставлял на ночь не просралось

    помогает убить процесс и запустить занова, через примерно 300 запросов снова зависает

    в логах такое


    Jun 15 11:31:18.09348 [master] A-Parser v1.2.507-linux-x64 started, tasks: 1 / 0, memory total: 48278 MB, available: 33240 MB
    Jun 15 11:31:18.32322 [master] starting task #1 threads: 500
    Jun 15 11:31:19.89353 [master] starting task #2 threads: 100
    Jun 15 11:31:21.47975 [master] task 2 error Some error
    unknow holder task_2 at build/core.to_build.pl line 4610.
    Jun 15 11:31:21.61743 [master] loading before not loaded iterator
    Jun 15 11:31:26.75701 [master] starting task #2 threads: 100
    Use of uninitialized value in numeric ge (>=) at build/core.to_build.pl line 51521.
    Use of uninitialized value in numeric eq (==) at build/core.to_build.pl line 13315.
    Use of uninitialized value in numeric eq (==) at build/core.to_build.pl line 13315.
    Use of uninitialized value in numeric eq (==) at build/core.to_build.pl line 13315.
    Use of uninitialized value in numeric eq (==) at build/core.to_build.pl line 13315.
    Use of uninitialized value in numeric eq (==) at build/core.to_build.pl line 13315.
    Use of uninitialized value in numeric eq (==) at build/core.to_build.pl line 13315.
    Use of uninitialized value in numeric eq (==) at build/core.to_build.pl line 13315.
    Use of uninitialized value in numeric eq (==) at build/core.to_build.pl line 13315.
    Use of uninitialized value in numeric eq (==) at build/core.to_build.pl line 13315.
    Use of uninitialized value in numeric eq (==) at build/core.to_build.pl line 13315.
    Jun 15 11:32:03.72498 [master] task 2 completed
     

    Вложения:

    #1 all3xpress, 15 июн 2019
  2. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.372
    Симпатии:
    2.102
    Добрый день.
    Нужен весь лог парсера и пресет, на котором возникает проблема.
     
    #2 Support, 17 июн 2019
  3. all3xpress

    all3xpress A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    10 фев 2019
    Сообщения:
    21
    Симпатии:
    1
    удалось исправить удалением акков яндекса, их было 16мб файл.


    еще вопрос как удалять старые таски, они копятся в папке, начинает тормозить.
    было бы неплохо хранить только за неделю например, а так в папке 100к фалов ну такое
     
    #3 all3xpress, 17 июн 2019
  4. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.372
    Симпатии:
    2.102
    Если активных заданий нет, то завершите процесс парсера и удалите
    config/queue.db
    config/unique/*
    config/tasks/*
    logs/*

    Тем самым вы очистите всю очередь завершенных заданий, базы уникализаций, файлы заданий и их логи.
     
    #4 Support, 17 июн 2019
  5. all3xpress

    all3xpress A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    10 фев 2019
    Сообщения:
    21
    Симпатии:
    1

    это понятно почему бы не запилить автоочистку?
     
    #5 all3xpress, 17 июн 2019
  6. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.372
    Симпатии:
    2.102
    В Очереди задач есть кнопка Очистить очередь, но как правило, процесс может занять длительное время, особенно при больших кол-вах заданий, поэтому проще удалить вручную, как написано выше.
    Вы можете предложить такой функционал в разделе Задачи
    Также, в Редакторе заданий есть опция "Удалить задание по завершению" - с ее помощью можно удалять задания сразу, не накапливая их.
     
    #6 Support, 17 июн 2019
  7. all3xpress

    all3xpress A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    10 фев 2019
    Сообщения:
    21
    Симпатии:
    1
    #7 all3xpress, 17 июн 2019
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)

Поделиться этой страницей