1. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Висят задачи

Тема в разделе "Техническая поддержка", создана пользователем Al, 30 окт 2016.

  1. Al

    Al A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 окт 2014
    Сообщения:
    28
    Симпатии:
    10
    x64 версия a-parsera, актуальная (на текущий момент 72)
    ubuntu 16.04 x64
    запускаю через api 10 заданий, - иногда часть заданий выполняется, но часть подвисают, - просто висят в активных (не знаю сколько по времени, похоже - пока не удалишь их)
    Сами парсеры (тестировал на 2-х) написаны вашим специалистом, и тут я на 99% уверен что все ок, - потому что, ну потому что более опытного и компетентного человека я еще не встречал.

    Лог

    Код:
    Oct 29 15:50:05.6727 Restart from WebUI
    OK, BYE!  |  at (eval 389) line 1.
    Oct 29 15:50:06.67792 [Worker/29792] end called, pid 29792
    Oct 29 15:50:06.67774 [Template of 29777] exit called, pid 29778
    Oct 29 15:50:09.61811 Start ProxyChecker proxy_gld_full
    Oct 29 15:50:09.62076 Start ProxyChecker proxy
    Oct 29 15:50:11.00919 A-Parser v1.1.672-linux-x64 started, tasks: 9 / 1314, memory total: 3934 MB, available: 1954 MB
    Oct 29 15:50:11.25067 starting task #1319 threads: 1
    Oct 29 15:50:11.58387 starting task #1323 threads: 1
    Oct 29 15:50:11.78441 starting task #1324 threads: 1
    Oct 29 15:50:11.98416 starting task #1325 threads: 1
    Oct 29 15:50:12.30369 starting task #1326 threads: 1
    Oct 29 15:50:12.59351 starting task #1327 threads: 1
    Oct 29 15:50:12.88301 starting task #1328 threads: 1
    Oct 29 15:50:13.09312 starting task #1329 threads: 1
    Oct 29 15:50:13.29596 starting task #1330 threads: 20
    Oct 29 15:50:15.43992 loading before not loaded iterator
    Oct 29 15:50:15.6277 loading before not loaded iterator
    Oct 29 15:50:15.79176 loading before not loaded iterator
    Oct 29 15:50:15.93721 loading before not loaded iterator
    Oct 29 15:50:16.23077 loading before not loaded iterator
    Oct 29 15:50:16.37153 loading before not loaded iterator
    Oct 29 15:50:16.51183 loading before not loaded iterator
    Oct 29 15:50:16.6619 loading before not loaded iterator
    Oct 29 15:50:16.81529 loading before not loaded iterator
    Oct 29 15:50:17.92241 task 1326 completed
    DBI db handle 0xae53f10 has uncleared implementors data at build/core.to_build.pl line 18704.
        dbih_clearcom (dbh 0xae53f10, com 0xa6c6a80, imp DBD::SQLite::db):
           FLAGS 0x100113: COMSET IMPSET Warn PrintError PrintWarn
           PARENT DBI::dr=HASH(0x6266650)
           KIDS 0 (0 Active)
    Oct 29 15:50:17.96544 task 1324 completed
    DBI db handle 0xae31d30 has uncleared implementors data at build/core.to_build.pl line 18704.
        dbih_clearcom (dbh 0xae31d30, com 0x7eef720, imp DBD::SQLite::db):
           FLAGS 0x100113: COMSET IMPSET Warn PrintError PrintWarn
           PARENT DBI::dr=HASH(0x6266650)
           KIDS 0 (0 Active)
    Oct 29 15:50:17.00288 task 1323 completed
    DBI db handle 0xae22c40 has uncleared implementors data at build/core.to_build.pl line 18704.
        dbih_clearcom (dbh 0xae22c40, com 0xa6c6540, imp DBD::SQLite::db):
           FLAGS 0x100113: COMSET IMPSET Warn PrintError PrintWarn
           PARENT DBI::dr=HASH(0x6266650)
           KIDS 0 (0 Active)
    Oct 29 15:50:18.06612 task 1330 completed
    DBI db handle 0xae0fb30 has uncleared implementors data at build/core.to_build.pl line 18704.
        dbih_clearcom (dbh 0xae0fb30, com 0x7eefe20, imp DBD::SQLite::db):
           FLAGS 0x100113: COMSET IMPSET Warn PrintError PrintWarn
           PARENT DBI::dr=HASH(0x6266650)
           KIDS 0 (0 Active)
    Oct 29 15:50:18.88242 task 1329 completed
    DBI db handle 0xae85230 has uncleared implementors data at build/core.to_build.pl line 18704.
        dbih_clearcom (dbh 0xae85230, com 0xa6c7340, imp DBD::SQLite::db):
           FLAGS 0x100113: COMSET IMPSET Warn PrintError PrintWarn
           PARENT DBI::dr=HASH(0x6266650)
           KIDS 0 (0 Active)
    Oct 29 15:50:18.91534 task 1327 completed
    DBI db handle 0xae63010 has uncleared implementors data at build/core.to_build.pl line 18704.
        dbih_clearcom (dbh 0xae63010, com 0xa6c7ea0, imp DBD::SQLite::db):
           FLAGS 0x100113: COMSET IMPSET Warn PrintError PrintWarn
           PARENT DBI::dr=HASH(0x6266650)
           KIDS 0 (0 Active)
    
    Кстати, это вообще нормально, что лог забит подобными записями? Недавно поставил новый рекорд, - лог в 1 гб - это вообще как? Может я что-то НЕ ТАК делаю, раз за пару лет и с тремя лицензиями у меня такая х....

    С прокси все ок, их более 300 и они нормальные.
     
    #1 Al, 30 окт 2016
    Последнее редактирование модератором: 30 окт 2016
  2. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.337
    Симпатии:
    1.795
    Лог вполне нормальный, надо задания смотреть
     
  3. malexoid

    malexoid A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    7 сен 2015
    Сообщения:
    256
    Симпатии:
    60
    Тоже поставил 64бит версию и появились странные проблемы - задачи порой выполнялись очень медленно или висели, CPU загружен был на 100%, но он и с 32 бит версией был загружен на 100%, но задачи вертелись.
    Ощущение такое, что 64бит версия более прожорливая в плане CPU. Сейчас откатился на 32бит версию, посмотрю недельку.
     

Поделиться этой страницей