Пресет Парсинг количества страниц сайта в индексе Google 1.0

[Support Денис]

Пользователь Support Денис разместил новый ресурс:

Парсинг количества страниц сайта в индексе Google - Парсинг количества страниц сайта в индексе Google

Данный пресет получает в качестве запроса домен сайта и использует оператор Google site.В результат выводит домен и количество страниц сайта в индексе Google.

Узнать больше об этом ресурсе...

 

[-Alexx-]

добрый день. подскажите, пожалуйста, пресет рабочий? при тестировании в результате выдает "a-parser.com - none"

 

[Support Денис]

Здравствуйте. Что пишет в логе задания ?.

 

[-Alexx-]

16/09 14:40:16
GET(5): https://www.google.com/search?ie=utf-8&oe=utf-8&hl=en&q=site:a-parser.com&num=100 - 302 (0.4 KB)
16/09 14:40:16
Google show captcha
16/09 14:40:16
Parse response: 2
16/09 14:40:16
Use proxy http://51.255.55.144:26685
16/09 14:40:20
GET(6): https://www.google.com/search?ie=utf-8&oe=utf-8&hl=en&q=site:a-parser.com&num=100 - 302 (0.4 KB)
16/09 14:40:20
Google show captcha
16/09 14:40:20
Parse response: 2
16/09 14:40:20
Use proxy http://51.255.55.144:24665
16/09 14:40:22
GET(7): https://www.google.com/search?ie=utf-8&oe=utf-8&hl=en&q=site:a-parser.com&num=100 - 302 (0.4 KB)
16/09 14:40:22
Google show captcha
16/09 14:40:22
Parse response: 2
16/09 14:40:22
Use proxy http://51.255.55.144:27825
16/09 14:40:24
GET(8): https://www.google.com/search?ie=utf-8&oe=utf-8&hl=en&q=site:a-parser.com&num=100 - 302 (0.4 KB)
16/09 14:40:24
Google show captcha
16/09 14:40:24
Parse response: 2
16/09 14:40:24
Use proxy http://51.255.55.144:30907
16/09 14:40:28
GET(9): https://www.google.com/search?ie=utf-8&oe=utf-8&hl=en&q=site:a-parser.com&num=100 - 302 Found (0 KB)
16/09 14:40:28
Google show captcha
16/09 14:40:28
Parse response: 2
16/09 14:40:28
Use proxy http://51.255.55.144:29862
16/09 14:40:32
GET(10): https://www.google.com/search?ie=utf-8&oe=utf-8&hl=en&q=site:a-parser.com&num=100 - 302 (0.4 KB)
16/09 14:40:32
Google show captcha
16/09 14:40:32
Parse response: 2
16/09 14:40:32
Thread complete work

 

[Support Денис]

Или увеличьте кол-во попыток до 100 минимум. А лучше используйте SE::Google::Modern + Util::ReCaptcha2 . Пример настройки есть по этой ссылке

 

[-Alexx-]

ясно, спасибо

 

[Alex_work]

Настроила у себя этот парсер, всё работает, тест прошел успешно, НО очень долго запускается сама таска, всё время перезапускает таску и выдает Some Error. С интернетом всё ок, не понимаю в чем проблема

 

[Support Artur]

Здравствуйте!

Какая версия парсера ?
Что пишет в логе задания ?
Сколько попыток прокси стоит ?

 

[Alex_work]

Версия
1.2.1033

В логе вот что:
Oct 29 16:37:07.95675 [master] starting task #77 threads: 50
Some panic error at build/core.to_build.pl line 13142.
Oct 29 16:37:09.01966 [master] task 77 error Some error
unknow holder task_77 at build/core.to_build.pl line 5865.
Oct 29 16:37:10.46238 [master] starting task #77 threads: 50
Some panic error at build/core.to_build.pl line 13142.
Oct 29 16:37:11.46537 [master] task 77 error Some error
unknow holder task_77 at build/core.to_build.pl line 5865.
Oct 29 16:37:13.96232 [master] starting task #77 threads: 50
Some panic error at build/core.to_build.pl line 13142.
Oct 29 16:37:14.97718 [master] task 77 error Some error
unknow holder task_77 at build/core.to_build.pl line 5865.
Oct 29 16:37:16.44623 [master] starting task #77 threads: 50
Some panic error at build/core.to_build.pl line 13142.
Oct 29 16:37:17.49183 [master] task 77 error Some error
unknow holder task_77 at build/core.to_build.pl line 5865.
Взяли с общего лога, потому что не дает лог задания псомотреть

Попыток 300

 

[Support Artur]

... НО очень долго запускается сама таска, всё время перезапускает таску и выдает Some Error

Запускается таск или все время Some error пишет ?
Если запускается, сделайте скрин

 

[Alex_work]

Запускается таск или все время Some error пишет ?
Если запускается, сделайте скрин

таск часа 3-4 пытается запустится, пишет Some error, и потом спустя такое время или больше запускается в работу

 

[Support Artur]

Вчера в битриксе Вам ответил, что неправильно настроены прокси

 

[Alex_work]

Можете посмотреть на самом а-парсере? скинем доступы

 

[Alex_work]

Пытались настроить прокси - все равно не помогает

 

[Support]

@Alex_work если проблема еще актуальна - напишите по одному из контактов поддержки: https://a-parser.com/pages/support/