-
Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!Скрыть объявление
A-Parser - парсер для профессионалов SEO
сен
06
Новый метод уникализации DataBase - не использует оперативную память, 100% точность. Убраны старые методы Dynamic, DynamicHash, 16-64mb как неактуальные, подробности тут
Реализовано лимитирование потоков, в случае превышения потоков в задании парсер выдаст ошибку и не запустит задание. На Windows лимит установлен в 2000 потоков, на Linux в 10000(или меньше если ulimit -n меньше)
Исправлена обработка каптчи в парсере SE::Yandex. Также теперь можно указать регион поиска в цифровом формате через Extra query string, возможность выбора региона из списка сохраняется
В API добавлена возможность переопределить настройки пресета в методах oneRequest и bulkRequest. Добавлен новый метод getParserPreset - позволяет изучить доступные настройки для каждого парсера. Обновлен модуль AParser.pm
Добавлен парсер новой поисковой системы
...
Реализовано лимитирование потоков, в случае превышения потоков в задании парсер выдаст ошибку и не запустит задание. На Windows лимит установлен в 2000 потоков, на Linux в 10000(или меньше если ulimit -n меньше)
Исправлена обработка каптчи в парсере SE::Yandex. Также теперь можно указать регион поиска в цифровом формате через Extra query string, возможность выбора региона из списка сохраняется
В API добавлена возможность переопределить настройки пресета в методах oneRequest и bulkRequest. Добавлен новый метод getParserPreset - позволяет изучить доступные настройки для каждого парсера. Обновлен модуль AParser.pm
Добавлен парсер новой поисковой системы
![[IMG]](proxy.php?image=http%3A%2F%2Fa-parser.com%2Fimg%2Fparsers%2Fduckduckgo.png&hash=a27cdb9785389a01db172659fc6e0e25)
авг
26
Расширение API:
SE::Yandex::WordStat::ByDate полностью исправлены после последних обновлений Яндекса. Средняя скорость проверки теперь составляет 5000 кейвордов в минуту без использования антигейта.
В парсеры
SE::Bing::Suggest и
SE::Yahoo::Suggest добавлена опция
Parse to level позволяющая автоматически подставлять найденые подсказки опять в запросы, тем самым происходит парсинг вглубь до 10 уровней...
- Новый метод info - получение информации о PID, версии парсера и количества заданий в очереди
- Новый метод getTaskConf - получение полных настроек задания по его ID
- AParser.pm - Perl модуль, реализует текущее API
![[IMG]](proxy.php?image=http%3A%2F%2Fa-parser.com%2Fimg%2Fparsers%2Fyandex-wordstat-date.png&hash=bb269c1436a04d7238851907e067a537)
В парсеры
![[IMG]](proxy.php?image=http%3A%2F%2Fa-parser.com%2Fimg%2Fparsers%2Fbing-suggest.png&hash=0740ea2cd394565fc08e17739bc47a59)
![[IMG]](proxy.php?image=http%3A%2F%2Fa-parser.com%2Fimg%2Fparsers%2Fyahoo-suggest.png&hash=245628e6b90b3bf1aefdde7e6cf64840)
![[IMG]](proxy.php?image=http%3A%2F%2Fa-parser.com%2Fimg%2Fparsers%2Fparse-all.png&hash=b80d26a96c050086afce0f9d96a85bba)
авг
17
Вновь исправлен SE::Yandex::WordStat в связи с изменением в выдаче, также возвращена поддержка работы с антигейтом и теперь автоматически сохраняются хорошие сессии для экономии прокси и каптч
Улучшения в Extract Top Domain(в Query Builders, Results Builders и в уникализации результатов) - теперь парсер корректно определяет все региональные поддомены вида *.org.ru, *.co.uk и др.
Обновлен список языков для всех парсеров гугла
SE::Google::*
Исправления:
Улучшения в Extract Top Domain(в Query Builders, Results Builders и в уникализации результатов) - теперь парсер корректно определяет все региональные поддомены вида *.org.ru, *.co.uk и др.
Обновлен список языков для всех парсеров гугла
![[IMG]](proxy.php?image=http%3A%2F%2Fa-parser.com%2Fimg%2Fparsers%2Fgoogle.png&hash=66dbce114a85a7277e247078fe6abd35)
Исправления:
- В парсере
HTML::LinkExtractor некорректно обрабатывались ссылки mailto: и javascript:, также теперь по умолчанию этот парсер не переходит по редиректам
- В парсере
SE::Bing исправлена ошибка при которой A-Parser мог падать в некоторых случаях
- Исправлено зависание при парсинге
SE::Baidu
- В...
авг
10
Исправление парсера SE::Yandex::WordStat - Яндекс целиком изменил сервис и мы одни из первых исправили парсер ![Smile :) :)](styles/default/xenforo/clear.png)
Версия с поддержкой каптчи выйдет немного позже.
Также исправлен парсинг ссылок объявлений в парсере
SE::Yandex
Подробнее тут: 1.0.95
![Smile :) :)](styles/default/xenforo/clear.png)
Версия с поддержкой каптчи выйдет немного позже.
Также исправлен парсинг ссылок объявлений в парсере
![[IMG]](proxy.php?image=http%3A%2F%2Fa-parser.com%2Fimg%2Fparsers%2Fyandex.png&hash=a78b2284f21b4c4a12ca27900ae39250)
Подробнее тут: 1.0.95
авг
08
В период с 08.08.2013 по 13.08.2013 саппорт будет доступен ограниченное количество времени, просьба основную часть вопросов задавать на форуме.
Яндекс изменил сервис WordStat, в следствии чего парсер перестал его парсить. В новой версии уже все исправлено, она появится ориентировочно через 2-3 дня.
Яндекс изменил сервис WordStat, в следствии чего парсер перестал его парсить. В новой версии уже все исправлено, она появится ориентировочно через 2-3 дня.
Страница 61 из 69