Парсер Получение категорий сайтов из Google 1.0.9

[Support]

Пользователь Support разместил новый ресурс:

Получение категорий сайтов из Google - Определение категорий сайтов по версии Google

• В качестве источника используется ресурс https://testmysite.withgoogle.com
• Для разгадывания рекаптчи обязательно нужен настроенный пресет рекаптчи

Узнать больше об этом ресурсе...

 

[Vvtex]

"Need set client key!
Jun-20_13-51-48.txt"
Подскажите как прикрутить, чтобы работало?

 

[Support]

Need set client key!

Скорее всего у вас не настроен или не указан пресет для Util::ReCaptcha2.

 

[fri-lancer]

Тема конечно хорошая, но рекапча убивает всю скорость.
А других вариантов проверки тематики сайта случайно нету?
P/S
https://bar-navig.yandex.ru/u?show=31&url=https://google.ru
Сам спросил и сам ответил
Но к сожалению яндекс не всегда показывает тематику

 

[Vvtex]

пресет можно настроить, что бы ещё данные выводились?

 

[fri-lancer]

Как же быть если нужно сотни тысяч сайтов проверить?

 

[Support Юра]

Какие именно данные нужно выводить, можете более подробно объяснить и если можно с примерами?

 

[Vvtex]

Какие именно данные нужно выводить, можете более подробно объяснить и если можно с примерами?

Принял, лучше сразу в платную поддержку писать.))
А так не секрет, интересуют отчёты которые по почте отправляются. Кстати, выскакивает ограничение на отправку раз в час на один эл.адрес...

 

[Support Юра]

Принял, лучше сразу в платную поддержку писать.))
А так не секрет, интересуют отчёты которые по почте отправляются. Кстати, выскакивает ограничение на отправку раз в час на один эл.адрес...

Если Вам нужно индивидуальные данные собирать - тогда конечно в платную поддержку лучше, если же данные будут полезны другим пользователям - предложение рассмотрят и будет создана задача на доработку парсера.

 

[Vvtex]

Если Вам нужно индивидуальные данные собирать - тогда конечно в платную поддержку лучше, если же данные будут полезны другим пользователям - предложение рассмотрят и будет создана задача на доработку парсера.

Всё у вас ровно в пресете, как по мне удобнее будет немного поменять,
results_format: '$query ; $category\\n',

 

[fri-lancer]

А как кстати на русском получить название категории?

 

[Support Денис]

Подскажите, проверка статуса от Status(1): CAPCHA_NOT_READY до Status(14): OK почему 5 секунд и возможно поменять на другие цифры, мне удобнее 70 секунд поставить - возможно лучше 30 секунд.
Как поменять 5 секунд проверки на 30 секунд проверки?

Здравствуйте.
В настройках Util::ReCaptcha2 переопределите эту опцию

 

[Support]

А как кстати на русском получить название категории?

Пользователь Support обновил ресурс Получение категорий сайтов из Google новой записью:

Обновление 1.0.9

• добавлен выбор языка
• добавлен вывод локализированной категории
• мелкие правки

Узнать больше об этом обновлении...

 

[Support]

Добрый день.
В целом - есть $tools.ua.random(), но зачем это в данном парсере?

 

[Vvtex]

Добрый день.
В целом - есть $tools.ua.random(), но зачем это в данном парсере?

Скорее всего Вы правы Гуглу будет всё ровно какой user-agent, тем более прокси бесплатные (пробив 50/50).

 

[Support]

В данном парсере рекаптча будет всегда для каждого запроса, вне зависимости от юзерагента или прокси, т.к. она всегда запрашивается на источнике.
Поэтому, если цель смены юзерагента - уменьшение кол-ва рекаптч, то это ничего не даст.

 

[Vvtex]

Сервис обновился, новый адрес https://www.thinkwithgoogle.com/intl/en-gb/feature/testmysite
Будет возможность обновить пресет?

 

[Support]

Будет возможность обновить пресет?

По возможности обновим.

Каталог открыт для всех, поэтому вы также можете сделать новый парсер и поделиться им

 

[relay]

Сервис обновился, новый адрес https://www.thinkwithgoogle.com/intl/en-gb/feature/testmysite
Будет возможность обновить пресет?

категории сайта не вижу, убрали ее?

 

[Vvtex]

категории сайта не вижу, убрали ее?

Тоже не нашёл категорий сайта, которые раньше выдавал гугл.
Там интересно вот что,

1. Optimise pages on your site
Get custom fixes to make each page on your site faster
В строке "enter another page on your site" можно чекать скорость страниц сайта. Получается оценивание
PAGE SPEED
~ 0.6 seconds (+RATING)

2. Benchmark your site speed against your competitors. (страна и 3G/4G)
Сравните скорость вашего сайта с конкурентами, жаль только домен конкурента
Т.е. становится достаточно понятно почему гугл отдаёт приоритет страницы (концепция чем лучше и быстрее страница). Один из механизмов ранжирования скорость страницы.

3. Evaluate the impact a faster site can have on your business.
Оцените влияние более быстрого сайта на ваш бизнес. Это интересный инструмент подойдёт для доклада директору, почему стоит покупать новое оборудование. ИМХО. Ещё для чего интересно было бы узнать. Воспринял этот тест приблизительным

В итоге не пачками сайты чекать на категории с помощью этого пресета это не актуально (категорий нет). А анализировать свой сайт по каждой странице с возможностью сравнивать с конкурентами.

З.Ы.
Get your report
Отправка однотипных отчётов ещё и на разные почты это уже чересчур.