Вопросы и ответы из выдачи Google 3.2.1

Исправлены ошибки, возникающие при запросе "¿Cómo abrir un archivo TMP?" и аналогичных.

Исправлены регулярные выражения

Исправлены регулярные выражения.

Для работы пресета необходимо установить модуль html-entities-decode.
«npm i html-entities-decode»

Данное обновление подытоживает ряд исправлений и доработок, выполненных в последнее время.

Изменения

• Доработан парсинг вопросов. Теперь кол-во результатов по одному запросу может быть теоретически неограниченным.
• Добавлена опция Mode и два режима парсинга:
  • By count (по кол-ву результатов)
    В опции Questions count необходимо задать желаемое кол-во результатов. Парсинг происходит в "однопоточном" режиме, т.е. новые запросы не добавляются в очередь, а последовательно выполняются. Как только будет собрано необходимое кол-во результатов, парсер прекратит работу.
  • To level (до уровня)
    Необходимо переопределить опцию Парсить до уровня. Если опция не определена, будет выполняться только один запрос. Как работает: парсер переходит на страницу с вопросами, затем начинает "нажимать" на них, получая дополнительные. Каждая итерация – новый уровень. Доп. вопросы, полученные на нулевом уровне, будут обработаны на первом и т.д.
• Добавлена опция Unescape and remove tags и очистка результатов:
  
  • Decode (unescape)
    Декодирует результат.
  • Remove date
    Стирает даты из результатов.
  • Remove tags
    Очищает от тегов.
• Добавлена уникализация по тексту вопроса и фильтр для отсеивания некорректных результатов.

Еще больше результатов.

Пресет был полностью переписан. Добавлена опция Parse to level (Парсить до уровня) для прохода в глубину. Результатов стало гораздо больше.

Парсер собирал лишнюю информацию. Были исправлены регулярные выражения.

Парсер собирал ненужную информацию.

Изменен SE::Google::Modern на SE::Google
Добавлена поддержка парсинга в глубину

Исправлена работа с кириллицей