Сборник рецептов #5: ссылки из JS, паблик прокси и карта сайта

Тема в разделе "Новости", создана пользователем Support, 16 июн 2015.

  1. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    1.623
    Симпатии:
    1.208
    5-й выпуск сборника рецептов. Здесь мы научимся парсить ссылки из страниц, где их подгружает JS-скрипт, будем собирать паблик прокси и составлять карту сайта.

    Подгрузка ссылок через JS
    Есть очень много сайтов, где контент загружается специальным скриптом (AJAX). К примеру, это может быть поиск на сайте. И как спарсить с таких сайтов информацию? Ведь если посмотреть код страницы в браузере - то, к примеру, ссылки там есть, а парсер их не видит... Решение есть, и оно довольно не сложное. Как это сделать - по ссылке выше.
    [​IMG]

    Сборщик паблик прокси: как лучше и насколько это эффективно
    Всем известно, что в интернете есть очень много сайтов, где выкладывают публичные прокси (что это на Википедии). Если возникает необходимость в использовании таких прокси - появляется проблема в их сборе, при этом, естественно нужны только живые. Наверное так же известно, что используя А-Парсер, можно их собирать. А вот как это делать и насколько это эффективно - читайте по ссылке выше.
    [​IMG]

    Карта сайта с помощью A-Parser
    Карта сайта простыми словами - это XML-файл, который помогает поисковикам лучше индексировать сайт. Некоторые SEOшники считают ее отсутствие грубейшей ошибкой. Существует очень много сервисов и инструментов для создания таких карт, ну а мы попробуем создать ее с помощью A-Parser. Что из этого получится, и как это делать - читайте по ссылке выше.
    [​IMG]

    Предыдущие сборники:
     
    #1 Support, 16 июн 2015
    Последнее редактирование: 28 фев 2016
    loveseo, vipdenya и List нравится это.

Поделиться этой страницей