Висят задачи

  • Автор темы Автор темы Al
  • Дата начала Дата начала

Al

A-Parser Enterprise License
A-Parser Enterprise
x64 версия a-parsera, актуальная (на текущий момент 72)
ubuntu 16.04 x64
запускаю через api 10 заданий, - иногда часть заданий выполняется, но часть подвисают, - просто висят в активных (не знаю сколько по времени, похоже - пока не удалишь их)
Сами парсеры (тестировал на 2-х) написаны вашим специалистом, и тут я на 99% уверен что все ок, - потому что, ну потому что более опытного и компетентного человека я еще не встречал.

Лог

Код:
Oct 29 15:50:05.6727 Restart from WebUI
OK, BYE!  |  at (eval 389) line 1.
Oct 29 15:50:06.67792 [Worker/29792] end called, pid 29792
Oct 29 15:50:06.67774 [Template of 29777] exit called, pid 29778
Oct 29 15:50:09.61811 Start ProxyChecker proxy_gld_full
Oct 29 15:50:09.62076 Start ProxyChecker proxy
Oct 29 15:50:11.00919 A-Parser v1.1.672-linux-x64 started, tasks: 9 / 1314, memory total: 3934 MB, available: 1954 MB
Oct 29 15:50:11.25067 starting task #1319 threads: 1
Oct 29 15:50:11.58387 starting task #1323 threads: 1
Oct 29 15:50:11.78441 starting task #1324 threads: 1
Oct 29 15:50:11.98416 starting task #1325 threads: 1
Oct 29 15:50:12.30369 starting task #1326 threads: 1
Oct 29 15:50:12.59351 starting task #1327 threads: 1
Oct 29 15:50:12.88301 starting task #1328 threads: 1
Oct 29 15:50:13.09312 starting task #1329 threads: 1
Oct 29 15:50:13.29596 starting task #1330 threads: 20
Oct 29 15:50:15.43992 loading before not loaded iterator
Oct 29 15:50:15.6277 loading before not loaded iterator
Oct 29 15:50:15.79176 loading before not loaded iterator
Oct 29 15:50:15.93721 loading before not loaded iterator
Oct 29 15:50:16.23077 loading before not loaded iterator
Oct 29 15:50:16.37153 loading before not loaded iterator
Oct 29 15:50:16.51183 loading before not loaded iterator
Oct 29 15:50:16.6619 loading before not loaded iterator
Oct 29 15:50:16.81529 loading before not loaded iterator
Oct 29 15:50:17.92241 task 1326 completed
DBI db handle 0xae53f10 has uncleared implementors data at build/core.to_build.pl line 18704.
    dbih_clearcom (dbh 0xae53f10, com 0xa6c6a80, imp DBD::SQLite::db):
       FLAGS 0x100113: COMSET IMPSET Warn PrintError PrintWarn
       PARENT DBI::dr=HASH(0x6266650)
       KIDS 0 (0 Active)
Oct 29 15:50:17.96544 task 1324 completed
DBI db handle 0xae31d30 has uncleared implementors data at build/core.to_build.pl line 18704.
    dbih_clearcom (dbh 0xae31d30, com 0x7eef720, imp DBD::SQLite::db):
       FLAGS 0x100113: COMSET IMPSET Warn PrintError PrintWarn
       PARENT DBI::dr=HASH(0x6266650)
       KIDS 0 (0 Active)
Oct 29 15:50:17.00288 task 1323 completed
DBI db handle 0xae22c40 has uncleared implementors data at build/core.to_build.pl line 18704.
    dbih_clearcom (dbh 0xae22c40, com 0xa6c6540, imp DBD::SQLite::db):
       FLAGS 0x100113: COMSET IMPSET Warn PrintError PrintWarn
       PARENT DBI::dr=HASH(0x6266650)
       KIDS 0 (0 Active)
Oct 29 15:50:18.06612 task 1330 completed
DBI db handle 0xae0fb30 has uncleared implementors data at build/core.to_build.pl line 18704.
    dbih_clearcom (dbh 0xae0fb30, com 0x7eefe20, imp DBD::SQLite::db):
       FLAGS 0x100113: COMSET IMPSET Warn PrintError PrintWarn
       PARENT DBI::dr=HASH(0x6266650)
       KIDS 0 (0 Active)
Oct 29 15:50:18.88242 task 1329 completed
DBI db handle 0xae85230 has uncleared implementors data at build/core.to_build.pl line 18704.
    dbih_clearcom (dbh 0xae85230, com 0xa6c7340, imp DBD::SQLite::db):
       FLAGS 0x100113: COMSET IMPSET Warn PrintError PrintWarn
       PARENT DBI::dr=HASH(0x6266650)
       KIDS 0 (0 Active)
Oct 29 15:50:18.91534 task 1327 completed
DBI db handle 0xae63010 has uncleared implementors data at build/core.to_build.pl line 18704.
    dbih_clearcom (dbh 0xae63010, com 0xa6c7ea0, imp DBD::SQLite::db):
       FLAGS 0x100113: COMSET IMPSET Warn PrintError PrintWarn
       PARENT DBI::dr=HASH(0x6266650)
       KIDS 0 (0 Active)

Кстати, это вообще нормально, что лог забит подобными записями? Недавно поставил новый рекорд, - лог в 1 гб - это вообще как? Может я что-то НЕ ТАК делаю, раз за пару лет и с тремя лицензиями у меня такая х....

С прокси все ок, их более 300 и они нормальные.
 
Последнее редактирование модератором:
Тоже поставил 64бит версию и появились странные проблемы - задачи порой выполнялись очень медленно или висели, CPU загружен был на 100%, но он и с 32 бит версией был загружен на 100%, но задачи вертелись.
Ощущение такое, что 64бит версия более прожорливая в плане CPU. Сейчас откатился на 32бит версию, посмотрю недельку.
 
Назад
Верх