Данный вопрос уже всплывал на этом форуме (проблема такого характера у людей была), но толкового ответа я на него так и не нашел...
Итак, работающий парсер по прошествии определенного времени убивается ядром линукса, выпадает из дерева процессов, при этом парсер в браузере зависает и требует перезагрузки (F5).
Имеем:
• версия ОС Ubuntu 14.04 1 гб памяти
• весрия парсера 1.1.453
• включено 2 задания по 20 потоков каждый
• используется прокси
• тюнинг потоков произведен
• пробовал запускать командой ./aparser -nofork, всеравно вырубается
•
ну как решить проблему?
Итак, работающий парсер по прошествии определенного времени убивается ядром линукса, выпадает из дерева процессов, при этом парсер в браузере зависает и требует перезагрузки (F5).
Имеем:
• версия ОС Ubuntu 14.04 1 гб памяти
• весрия парсера 1.1.453
• включено 2 задания по 20 потоков каждый
• используется прокси
• тюнинг потоков произведен
• пробовал запускать командой ./aparser -nofork, всеравно вырубается
•
Mar 20 12:03:44.98766 [Master] end called, pid 3752
tls: destroy before close at build/core.to_build.pl line 5130, <$__ANONIO__> line 330409 during global destruction.
tls: destroy before close at build/core.to_build.pl line 5130, <$__ANONIO__> line 330409 during global destruction.
tls: destroy before close at build/core.to_build.pl line 5130, <$__ANONIO__> line 330409 during global destruction.
tls: destroy before close at build/core.to_build.pl line 5130, <$__ANONIO__> line 330409 during global destruction.
Mar 20 12:03:44.99692 cannot commit database HashDB_config/tasks/7_uncompleted.db config/tasks/7_uncompleted.db
tls: destroy before close at build/core.to_build.pl line 5130, <$__ANONIO__> line 330409 during global destruction.
Mar 20 12:03:45.00295 cannot commit database HashDB_config/tasks/6_uncompleted.db config/tasks/6_uncompleted.db
tls: destroy before close at build/core.to_build.pl line 5130 during global destruction.
tls: destroy before close at build/core.to_build.pl line 5130 during global destruction.
tls: destroy before close at build/core.to_build.pl line 5130, <$__ANONIO__> line 330409 during global destruction.
tls: destroy before close at build/core.to_build.pl line 5130, <$__ANONIO__> line 330409 during global destruction.
tls: destroy before close at build/core.to_build.pl line 5130, <$__ANONIO__> line 330409 during global destruction.
tls: destroy before close at build/core.to_build.pl line 5130, <$__ANONIO__> line 330409 during global destruction.
Mar 20 12:03:44.99692 cannot commit database HashDB_config/tasks/7_uncompleted.db config/tasks/7_uncompleted.db
tls: destroy before close at build/core.to_build.pl line 5130, <$__ANONIO__> line 330409 during global destruction.
Mar 20 12:03:45.00295 cannot commit database HashDB_config/tasks/6_uncompleted.db config/tasks/6_uncompleted.db
tls: destroy before close at build/core.to_build.pl line 5130 during global destruction.
tls: destroy before close at build/core.to_build.pl line 5130 during global destruction.
ну как решить проблему?