A-Parser - парсер для профессионалов SEO

апр
20
by Forbidden at 13:39
(273 Просмотров / 4 Симпатии)
2 Комментарии
Улучшения
  • Новый парсер Rank::SimilarWeb Rank::SimilarWeb - парсит сервис http://similarweb.com, собирает множество параметров, включая ранк домена, трафик, распределение трафика по источникам и странам
  • Новый парсер Rank::MegaIndex Rank::MegaIndex - парсит сервис https://megaindex.com, собирает число трафика по органике и рекламным запросам, а также различную информацию о беклинках и индексации сайта
  • Новый парсер Rank::SEMrush::Keyword Rank::SEMrush::Keyword - собирает трафик, конкуренцию и другие параметры по ключевому слову в сервисе http://semrush.com
  • В парсере SE::Google SE::Google добавлена возможность выбора языка интерфейса гугла, актуально для точного снятия позиций
  • В настройках антигейта добавлена опция Report bad captchas - отключив которую можно сэкономить время на запрос о неправильной каптче, актуально для CapMonster и XEvil
  • Удалены 5 устаревших парсеров: SE::Google::pR SE::Google::pR - сервис больше не...
апр
06
by Forbidden at 08:31
(492 Просмотров / 10 Симпатии)
8 Комментарии
В A-Parser 1.1.811 добавлено 6 новых встроенных парсеров - Амазон, Яндекс.Маркет, Рамблер, IxQuick, добавление ссылки в индекс Bing, расширенный парсер Moz(OpenSiteExplorer). Добавляйте идеи для новых парсеров на нашем форуме и мы их обязательно реализуем

Помимо встроенных парсеров вы можете создавать свои собственные парсеры на языке JavaScript - используя всю мощь многопоточности A-Parser'а, а также производительность движка V8 и преимущества ES6.

Для владельцев CapMonster и XEvil - напоминаем что A-Parser можно подключить к этим программам из коробки, тем самым колоссально повысив скорость парсинга во многих парсерах

Улучшения
мар
27
by Forbidden at 08:34
(339 Просмотров / 7 Симпатии)
0 Комментарии
В A-Parser 1.1.790 появился новый экспорт, который позволяет экспортировать сразу несколько заданий, настройки парсеров, JavaScript парсеры, а также tools.js:

[​IMG]

Улучшения
  • Новый экспорт заданий
  • В JavaScript парсерах добавлена возможность указать иконку парсера
  • В JavaScript парсерах добавлен функционал для работы с CAPTCHA
  • Добавлено автоматическое версионирование JavaScript парсеров
  • В хедерах ответа теперь указан заголовок Proxy с которым был сделан запрос
  • В JavaScript парсерах добавлен параметр attempt для this.request, позволяющий вручную управлять механизмом попыток
  • В JavaScript парсерах добавлен функционал управления прокси
  • В парсере Check::BackLink Check::BackLink улучшена обработка nofollow
Исправления в связи с изменениями в выдачи
фев
27
by Forbidden at 08:25
(420 Просмотров / 3 Симпатии)
2 Комментарии


Улучшения

  • В парсер SE::Bing SE::Bing добавлена возможность выбора языка результатов поиска
  • Во всех полях конфигурации каждого парсера теперь есть возможность использовать шаблонизатор, тем самым позволяя использовать запрос или его часть как значение конфига, а также добавлять произвольную логику(пример - использование переменного DNS сервера)
  • В JavaScript парсерах добавлена возможность установки одиночного cookie(this.cookies.set)
  • В парсере SE::Yandex::WordStat SE::Yandex::WordStat уменьшено потребление каптчи
Исправления в связи с изменениями в выдачи
  • SE::Google SE::Google - исправлена работа с антигейтом
  • В парсере SE::Google SE::Google исправлен парсинг объявлений, а также пропуск первого результата поиска в редких случаях
  • В парсере SE::Yandex SE::Yandex исправлен сбор сниппетов
  • SE::AOL SE::AOL, SE::Bing::Images SE::Bing::Images
...
фев
08
by Forbidden at 09:48
(464 Просмотров / 5 Симпатии)
0 Комментарии
В версии 1.1.743 выпущено множество исправлений для JavaScript парсеров, а также добавлены новые примеры: определение языка страницы через Яндекс переводчик и сбор текстовки по ключевому слову одним заданием(на выбор через Google или Яндекс)

Улучшения
  • В JavaScript парсерах добавлена возможность создавать новые запросы(this.query.add)
  • В парсере SE::Yahoo SE::Yahoo теперь определяется бан прокси по IP
  • Добавлен параметр, позволяющий A-Parser'у работать с файлами запросов и результатов вне рабочего каталога
Исправления в связи с изменениями в выдаче
  • SE::Yandex SE::Yandex - парсил только первую страницу выдачи
  • SE::Google::Trends SE::Google::Trends - использовал все попытки если по ключевому слову не было данных
Исправления
  • Исправлена работа опции Max threads per proxy(максимальное число потоков на одну прокси)
  • В парсере...