Улучшения
- Node.js обновлен до версии 15.14.0
- Добавлена возможность разгадывать Google ReCaptcha v3 в виде нового парсера
Util::ReCaptcha3 - В
SE::Yandex, а также в некоторых других парсерах Яндекса реализована обработка новой Smart captcha - В
Rank::MajesticSEO добавлен режим парсинга через Chrome - В
SE::DuckDuckGo актуализированы языки и регионы - В
SE::Google::Cache добавлена возможность использовать сервисы разгадывания рекаптч - В
SE::YouTube добавлен сбор ссылок на канал - Актуализирован список языков в
DeepL::Translator - Теперь в
SE::Bing при обнаружении бана, прокси банится парсером вместо простой смены - В
Shop::Amazon обновлен юзер-агент, за счет чего выросла производительность
Исправления в связи с изменениями в выдаче
- Множество адаптаций
SE::Google и SE::Yandex к изменениям в верстке страниц с выдачей - Исправлен постоянный бан запросов в SE::Google::Cache и SE::Bing
- Исправлен проход по пагинации в SE::DuckDuckGo
- В SE::Youtube исправлен подсчет кол-ва результатов и определение существования следующей страницы
- Исправлена работа с каптчей в Shop::Amazon
- Исправлена разбивка на блоки больших запросов в
SE::Yandex::Translate - Исправлены SE::Bing,
SE::MailRu, 
SE::MailRu::Position, 
SE::Google::Compromised, Rank::MajesticSEO, 
Rank::KeysSo, 
SE::Yandex::Direct, 
SecurityTrails::IP, 
Net::Whois, 
SE::Bing::Translator, SE::DuckDuckGo, 
Social::Instagram::Profile, 
Shop::Yandex::Market, 
Rank::Ahrefs::KeywordGenerator, 
Rank::Ahrefs::KeywordDifficulty, 
SE::Seznam, Shop::Amazon, 
Rank::Linkpad
Исправления
- Исправлен баг в
HTML::LinkExtractor, из-за которого парсинг по запросу останавливался с ошибкой - В
Rank::MOZ исправлено отсутствие повторных попыток, а также изменена логика определения неудачных запросов - Исправлена ошибка проверки прокси, если в пароле был символ "*"
- Исправлен баг, из-за которого при использовании шаблонизатора в Additional headers переставал работать Check content
- Исправлена логика проверки результатов в
SE::Bing::Images - Исправлена работа XPath
- Исправлена утечка памяти: при длительной работе процесс node.js постепенно заполнял всю доступную оперативную память
- Исправлена работа с прокси на некоторых сайтах, баг появился в одной из предыдущих бета-версий
Последнее редактирование: