Улучшения
- Полностью переработан парсер
Rank::CMS, теперь он определяет движок сайта на основе большой и качественной базы признаков Wappalyzer, также появилась возможность выбрать категорию или конкретные движки для распознавания - Появилась возможность сохранять результаты одного задания в разные файлы, с выбором формата результата для каждого файла, к примеру при парсинге Гугла можно сохранять ссылки в один файл и сниппеты в другой
- Добавлена возможность использовать шаблоны в параметрах Extra query string и User Agent
- В шаблонах теперь можно использовать инструменты, которые доступны через переменную $tools, первый инструмент - выбор произвольного User Agent: $tools.ua.random(), список агентов хранится в файле files/tools/user-agents.txt
- Улучшен парсер
Net::DNS при работе через прокси - В API появилась возможность запрашивать статус сразу нескольких заданий
- В API появилась возможность скачивать файл результата
- Парсер
SE::AOL теперь позволяет выбрать US, UK, FR или DE выдачу - В парсере
Rank::Ahrefs теперь дополнительно парсятся параметры URL Rank и Ahrefs Domain Rank
- Исправлен парсер
SE::YouTube в связи с изменением в выдачи - Исправлен парсинг с блогов в парсере
SE::Google в связи с изменением в выдачи - Исправлена ошибка при которой парсер мог вылететь если в качестве запроса передать очень длинный URL