Парсер статей из Веб-Архива (Archive.org / Wayback Machine)

Парсер Парсер статей из Веб-Архива (Archive.org / Wayback Machine) 0.6.2

Доступно владельцам лицензии

Support Alexey

Moderator
Команда форума
A-Parser Pro
Support Alexey разместил(а) новый ресурс:

Парсер статей из Веб-Архива (Archive.org / Wayback Machine) - Парсер статей из Веб-Архива (Archive.org / Wayback Machine)

Парсер JS::WaybackCDX выгружает исторические статьи из Веб-Архива (Archive.org) через быстрый CDX Server API, скачивает чистый HTML без скриптов и тулбаров архива (режим id_) и очищает текст через Mozilla Readability с автоматическим сохранением в Markdown-файлы (.md) с YAML Frontmatter и JSONL.

wayback-screeshot.png


Собираемые данные:
  • Заголовок статьи (title)
  • Автор (byline)
  • Название сайта (siteName)...

Посмотреть страницу этого ресурса...
 
Назад
Верх