Перейти к основному содержимому

SE::Quora - парсер выдачи Quora

SE::Quora

Обзор парсера

SE::QuoraSE::Quora - парсер поисковой выдачи Quora.

Собирает результаты из одноимённого сервиса.

Вы можете использовать автоматическое размножение запросов, подстановку подзапросов из файлов, перебор цифро-буквенных комбинаций и списков для получения максимально возможного количества результатов.

Функционал A-Parser позволяет сохранять настройки парсинга парсера SE::Quora для дальнейшего использования (пресеты), задавать расписание парсинга и многое другое.

Сохранение результатов возможно в том виде и структуре которая вам необходима, благодаря встроенному мощному шаблонизатору Template Toolkit который позволяет применять дополнительную логику к результатам и выводить данные в различных форматах, включая JSON, SQL и CSV.

Собираемые данные

У Quora существует 6 типов результатов: Questions, Answers, Posts, Profiles, Topics и Spaces. У каждого типа набор данных отличаются, поэтому в парсере каждый тип записывается в свой отдельный массив. В зависимости от типа собираются:

  • Ссылка на вопрос, текст вопроса, кол-во ответов и дата
  • Автор ответа, текст ответа, ссылки на медиа в ответе, дата и время ответа, кол-во голосов, просмотров и сколько раз поделились ответом
  • Ссылка на пост, заголовок поста, текст поста, ссылки на медиа в посте, имя и ссылка на профиль автора, дата и время публикации, кол-во голосов, просмотров и сколько раз поделились
  • и другие данные, зависящие от типа результата

Возможности

  • Выбор нужного типа результата или парсинг всех сразу
  • Выбор времени результатов

Варианты использования

  • Любые сценарии, где нужно получать данные из Quora

Запросы

В качестве запросов необходимо указывать ключевые слова, например:

test

Варианты вывода результатов

A-Parser поддерживает гибкое форматирование результатов благодаря встроенному шаблонизатору Template Toolkit, что позволяет ему выводить результаты в произвольной форме, а также в структуированной, например CSV или JSON

Вывод по умолчанию

Формат результата:

$questions.format('$question\n')

Пример результата:

What is the best free online IQ test?
What is software testing?
How reliable is the DNA testing offered by sites like Ancestry.com or 23andMe?
How can I pass a urine drug test for meth?
How do you know if you're really smart without taking an IQ test?
Which is the best test series for CAT?
How reliable are online IQ tests?
Is software testing a good career choice?
What is the best test series for the GATE examination?
What is the best way to get my IQ checked online?
...

Возможные настройки

ПараметрЗначение по умолчаниюОписание
Pages count5Количество страниц выдачи
Results typeQuestionsТип результатов
Results timeAll timeВремя результатов