A-Parser - парсер для профессионалов SEO

Улучшения

• Новый парсер Rank::SimilarWeb - парсит сервис http://similarweb.com, собирает множество параметров, включая ранк домена, трафик, распределение трафика по источникам и странам
• Новый парсер Rank::MegaIndex - парсит сервис https://megaindex.com, собирает число трафика по органике и рекламным запросам, а также различную информацию о беклинках и индексации сайта
• Новый парсер Rank::SEMrush::Keyword - собирает трафик, конкуренцию и другие параметры по ключевому слову в сервисе http://semrush.com
• В парсере SE::Google добавлена возможность выбора языка интерфейса гугла, актуально для точного снятия позиций
• В настройках антигейта добавлена опция Report bad captchas - отключив которую можно сэкономить время на запрос о неправильной каптче, актуально для CapMonster и XEvil
• Удалены 5 устаревших парсеров: SE::Google::pR - сервис больше не...

В A-Parser 1.1.811 добавлено 6 новых встроенных парсеров - Амазон, Яндекс.Маркет, Рамблер, IxQuick, добавление ссылки в индекс Bing, расширенный парсер Moz(OpenSiteExplorer). Добавляйте идеи для новых парсеров на нашем форуме и мы их обязательно реализуем

Помимо встроенных парсеров вы можете создавать свои собственные парсеры на языке JavaScript - используя всю мощь многопоточности A-Parser'а, а также производительность движка V8 и преимущества ES6.

Для владельцев CapMonster и XEvil - напоминаем что A-Parser можно подключить к этим программам из коробки, тем самым колоссально повысив скорость парсинга во многих парсерах

Улучшения

• Новый парсер Shop::Amazon - парсит выдачу https://www.amazon.com по ключевому слову,...

В A-Parser 1.1.790 появился новый экспорт, который позволяет экспортировать сразу несколько заданий, настройки парсеров, JavaScript парсеры, а также tools.js:



Улучшения

• Новый экспорт заданий
• В JavaScript парсерах добавлена возможность указать иконку парсера
• В JavaScript парсерах добавлен функционал для работы с CAPTCHA
• Добавлено автоматическое версионирование JavaScript парсеров
• В хедерах ответа теперь указан заголовок Proxy с которым был сделан запрос
• В JavaScript парсерах добавлен параметр attempt для this.request, позволяющий вручную управлять механизмом попыток
• В JavaScript парсерах добавлен функционал управления прокси
• В парсере Check::BackLink улучшена обработка nofollow

Исправления в связи с изменениями в выдачи

• SE::DuckDuckGo, SE::Ask, SE::AOL, Rank::MajesticSEO...

Улучшения

• В парсер SE::Bing добавлена возможность выбора языка результатов поиска
• Во всех полях конфигурации каждого парсера теперь есть возможность использовать шаблонизатор, тем самым позволяя использовать запрос или его часть как значение конфига, а также добавлять произвольную логику(пример - использование переменного DNS сервера)
• В JavaScript парсерах добавлена возможность установки одиночного cookie(this.cookies.set)
• В парсере SE::Yandex::WordStat уменьшено потребление каптчи

Исправления в связи с изменениями в выдачи

• SE::Google - исправлена работа с антигейтом
• В парсере SE::Google исправлен парсинг объявлений, а также пропуск первого результата поиска в редких случаях
• В парсере SE::Yandex исправлен сбор сниппетов
• SE::AOL, SE::Bing::Images

...

В версии 1.1.743 выпущено множество исправлений для JavaScript парсеров, а также добавлены новые примеры: определение языка страницы через Яндекс переводчик и сбор текстовки по ключевому слову одним заданием(на выбор через Google или Яндекс)

Улучшения

• В JavaScript парсерах добавлена возможность создавать новые запросы(this.query.add)
• В парсере SE::Yahoo теперь определяется бан прокси по IP
• Добавлен параметр, позволяющий A-Parser'у работать с файлами запросов и результатов вне рабочего каталога

Исправления в связи с изменениями в выдаче

• SE::Yandex - парсил только первую страницу выдачи
• SE::Google::Trends - использовал все попытки если по ключевому слову не было данных

Исправления

• Исправлена работа опции Max threads per proxy(максимальное число потоков на одну прокси)
• В парсере...