A-Parser - парсер для профессионалов SEO

В A-Parser 1.1.811 добавлено 6 новых встроенных парсеров - Амазон, Яндекс.Маркет, Рамблер, IxQuick, добавление ссылки в индекс Bing, расширенный парсер Moz(OpenSiteExplorer). Добавляйте идеи для новых парсеров на нашем форуме и мы их обязательно реализуем

Помимо встроенных парсеров вы можете создавать свои собственные парсеры на языке JavaScript - используя всю мощь многопоточности A-Parser'а, а также производительность движка V8 и преимущества ES6.

Для владельцев CapMonster и XEvil - напоминаем что A-Parser можно подключить к этим программам из коробки, тем самым колоссально повысив скорость парсинга во многих парсерах

Улучшения

• Новый парсер Shop::Amazon - парсит выдачу https://www.amazon.com по ключевому слову,...

В A-Parser 1.1.790 появился новый экспорт, который позволяет экспортировать сразу несколько заданий, настройки парсеров, JavaScript парсеры, а также tools.js:



Улучшения

• Новый экспорт заданий
• В JavaScript парсерах добавлена возможность указать иконку парсера
• В JavaScript парсерах добавлен функционал для работы с CAPTCHA
• Добавлено автоматическое версионирование JavaScript парсеров
• В хедерах ответа теперь указан заголовок Proxy с которым был сделан запрос
• В JavaScript парсерах добавлен параметр attempt для this.request, позволяющий вручную управлять механизмом попыток
• В JavaScript парсерах добавлен функционал управления прокси
• В парсере Check::BackLink улучшена обработка nofollow

Исправления в связи с изменениями в выдачи

• SE::DuckDuckGo, SE::Ask, SE::AOL, Rank::MajesticSEO...

Улучшения

• В парсер SE::Bing добавлена возможность выбора языка результатов поиска
• Во всех полях конфигурации каждого парсера теперь есть возможность использовать шаблонизатор, тем самым позволяя использовать запрос или его часть как значение конфига, а также добавлять произвольную логику(пример - использование переменного DNS сервера)
• В JavaScript парсерах добавлена возможность установки одиночного cookie(this.cookies.set)
• В парсере SE::Yandex::WordStat уменьшено потребление каптчи

Исправления в связи с изменениями в выдачи

• SE::Google - исправлена работа с антигейтом
• В парсере SE::Google исправлен парсинг объявлений, а также пропуск первого результата поиска в редких случаях
• В парсере SE::Yandex исправлен сбор сниппетов
• SE::AOL, SE::Bing::Images

...

В версии 1.1.743 выпущено множество исправлений для JavaScript парсеров, а также добавлены новые примеры: определение языка страницы через Яндекс переводчик и сбор текстовки по ключевому слову одним заданием(на выбор через Google или Яндекс)

Улучшения

• В JavaScript парсерах добавлена возможность создавать новые запросы(this.query.add)
• В парсере SE::Yahoo теперь определяется бан прокси по IP
• Добавлен параметр, позволяющий A-Parser'у работать с файлами запросов и результатов вне рабочего каталога

Исправления в связи с изменениями в выдаче

• SE::Yandex - парсил только первую страницу выдачи
• SE::Google::Trends - использовал все попытки если по ключевому слову не было данных

Исправления

• Исправлена работа опции Max threads per proxy(максимальное число потоков на одну прокси)
• В парсере...

В этом видео вы узнаете как собрать тысячи и миллионы профилей в социальной сети ВКонтакте:


В уроке рассмотрены:

• Создание парсера профилей соцсети ВКонтакте: имя, город, телефон, семейной положение, время последнего захода и ссылку на аватар(фотографию)
• Использование регулярных выражений для фильтрации данных результата
• Использование конструктора результатов для модификации результатов
• Использование Cookies в запросах

Подписывайтесь на наш канал, ставьте лайки и оставляйте в комментариях пожелания для следующих уроков!