Проект парсинга внутренних и внешних ссылок

  • Автор темы Автор темы BESHENEI
  • Дата начала Дата начала

BESHENEI

A-Parser Pro License
A-Parser Pro
Добрый день, АДМИН
Прошу помочь в реализации проекта.
Проблематика в следующем, пробовала десктопный софт линкоскоп, кзену, скрименфрог тоже не помог, все эти программки хороши на малых объёмах до 200000 линков, далее сущий ад, с расширением базы ссылок падает производительность, вплоть даже до зависания и не возможности сохранить проект. Задача в следующем прочекать сайт с количеством в 400000 страниц на линки как внутренние так и внешнии. Далее построить файл отчёта в виде диаграммы, нечто похожую вот на эту

site-visual-structure.png


Кстати это софт тоже не справился.
Тоесть нужна не просто карта сайта, а визуальная карта перелинковки.
Помогите пожалуйста создать проект для А-парсера, только он может помочь.
 
Добрый день.
Для данных целей существует HTML::LinkExtractor HTML::LinkExtractor.
Но, А-парсер выводит результаты только в текстовом виде. Визуальной карты не получится.
 
Назад
Верх