1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

A-Parser - парсер для профессионалов SEO

мар
27
by Forbidden at 08:34
(2.664 Просмотров / 7 Симпатии)
0 Комментарии
В A-Parser 1.1.790 появился новый экспорт, который позволяет экспортировать сразу несколько заданий, настройки парсеров, JavaScript парсеры, а также tools.js:

[​IMG]

Улучшения
  • Новый экспорт заданий
  • В JavaScript парсерах добавлена возможность указать иконку парсера
  • В JavaScript парсерах добавлен функционал для работы с CAPTCHA
  • Добавлено автоматическое версионирование JavaScript парсеров
  • В хедерах ответа теперь указан заголовок Proxy с которым был сделан запрос
  • В JavaScript парсерах добавлен параметр attempt для this.request, позволяющий вручную управлять механизмом попыток
  • В JavaScript парсерах добавлен функционал управления прокси
  • В парсере Check::BackLink Check::BackLink улучшена обработка nofollow
Исправления в связи с изменениями в выдачи
фев
27
by Forbidden at 08:25
(2.914 Просмотров / 3 Симпатии)
2 Комментарии


Улучшения

  • В парсер SE::Bing SE::Bing добавлена возможность выбора языка результатов поиска
  • Во всех полях конфигурации каждого парсера теперь есть возможность использовать шаблонизатор, тем самым позволяя использовать запрос или его часть как значение конфига, а также добавлять произвольную логику(пример - использование переменного DNS сервера)
  • В JavaScript парсерах добавлена возможность установки одиночного cookie(this.cookies.set)
  • В парсере SE::Yandex::WordStat SE::Yandex::WordStat уменьшено потребление каптчи
Исправления в связи с изменениями в выдачи
  • SE::Google SE::Google - исправлена работа с антигейтом
  • В парсере SE::Google SE::Google исправлен парсинг объявлений, а также пропуск первого результата поиска в редких случаях
  • В парсере SE::Yandex SE::Yandex исправлен сбор сниппетов
  • SE::AOL SE::AOL, SE::Bing::Images SE::Bing::Images
...
фев
08
by Forbidden at 09:48
(2.633 Просмотров / 5 Симпатии)
0 Комментарии
В версии 1.1.743 выпущено множество исправлений для JavaScript парсеров, а также добавлены новые примеры: определение языка страницы через Яндекс переводчик и сбор текстовки по ключевому слову одним заданием(на выбор через Google или Яндекс)

Улучшения
  • В JavaScript парсерах добавлена возможность создавать новые запросы(this.query.add)
  • В парсере SE::Yahoo SE::Yahoo теперь определяется бан прокси по IP
  • Добавлен параметр, позволяющий A-Parser'у работать с файлами запросов и результатов вне рабочего каталога
Исправления в связи с изменениями в выдаче
  • SE::Yandex SE::Yandex - парсил только первую страницу выдачи
  • SE::Google::Trends SE::Google::Trends - использовал все попытки если по ключевому слову не было данных
Исправления
  • Исправлена работа опции Max threads per proxy(максимальное число потоков на одну прокси)
  • В парсере...
фев
01
by Forbidden at 09:58
(1.605 Просмотров / 4 Симпатии)
0 Комментарии
В этом видео вы узнаете как собрать тысячи и миллионы профилей в социальной сети ВКонтакте:


В уроке рассмотрены:
  • Создание парсера профилей соцсети ВКонтакте: имя, город, телефон, семейной положение, время последнего захода и ссылку на аватар(фотографию)
  • Использование регулярных выражений для фильтрации данных результата
  • Использование конструктора результатов для модификации результатов
  • Использование Cookies в запросах

Подписывайтесь на наш канал, ставьте лайки и оставляйте в комментариях пожелания для следующих уроков!
янв
16
by Forbidden at 10:37
(2.319 Просмотров / 1 Симпатии)
0 Комментарии
Улучшения
  • В планировщик добавлена возможность ежемесячного запуска заданий, с возможностью выбрать определенный день месяца
  • В планировщике теперь можно указать уникальность задания, если задание активно в очереди то при попытке его запуска через планировщик оно будет отложено до следующего запуска
  • Файл логов задания теперь удаляется одновременно с удалением задания
  • В тестовом парсинге улучшен дебагер и предпросмотр HTML кода
Исправления в связи с изменениями в выдачи

Исправления
  • В парсере Net::Whois Net::Whois исправлен парсинг дат для множества доменных зон
  • Функция добавления ! перед каждым словом(для снятия частотности по WordStat) в некоторых случаях работала некорректно
  • Исправлена ошибка при работе прокси с использованием...