1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

А-Парсер и Пандора!

Тема в разделе "Трёп", создана пользователем Topper, 23 апр 2015.

Статус темы:
Закрыта.
  1. Sobesednic

    Sobesednic A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    12 сен 2014
    Сообщения:
    44
    Симпатии:
    14
    последняя версия? у меня такое было на более ранней версии
     
  2. creck

    creck A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    18 апр 2014
    Сообщения:
    46
    Симпатии:
    7
    Да, последняя версия. На прошлой такого не было.
     
  3. Sobesednic

    Sobesednic A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    12 сен 2014
    Сообщения:
    44
    Симпатии:
    14
    тогда когда у меня ступорилось Топ отлавливал баг по логам
     
  4. creck

    creck A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    18 апр 2014
    Сообщения:
    46
    Симпатии:
    7
    Спасибо, завтра напишу в тикет
     
  5. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Дарова!

    В LAP 2.5.5 добавлена индикация общего прогресса по заданиям.
    Теперь кроме проресса текущей пачки будет видно сколько пачек всего спаршено.
    Расширено логгирование ошибок
    Доработки юзермакросов
    Прочие багофиксы
    Скочать

    Прошу потестить
     
    Антон, List, btr и ещё 1-му нравится это.
  6. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Как загрузить пресеты из LAP.

    Вот кнопка импорта:

    [​IMG]

    Для каждого пресета из примеров:

    [​IMG]

    нужно сделать импорт в апарсер.

    На импортированные пресеты ссылки из LAP стоят вот тут:

    [​IMG]

    По дефолту они уже готовы к работе.
     
  7. btr

    btr A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    11 фев 2013
    Сообщения:
    198
    Симпатии:
    116
    престеы поменялись? после обновления нужно что то перенастраивать?
     
  8. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Нет, просто у меня спрашивал один пандорианец чего куда вставлять по пресетам
     
  9. zbest

    zbest A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    10 фев 2013
    Сообщения:
    36
    Симпатии:
    5
    Приветствую
    Есть пандора + апарсер, без LAP.

    При парсе по дефолт пресетов LAPа, апарсер сохраняет результаты всех кеев (например картинок) в 1 файл.
    Есть у пандоры макрос который выводит результат по конкретному кею с 1 файла?
     
  10. Anatoliy

    Anatoliy A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    22 май 2016
    Сообщения:
    48
    Симпатии:
    10
    нет такого.
    LAP работает по иному принципу...
     
  11. zbest

    zbest A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    10 фев 2013
    Сообщения:
    36
    Симпатии:
    5
    Об этом по подробнее пожалуйста.
     
  12. Anatoliy

    Anatoliy A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    22 май 2016
    Сообщения:
    48
    Симпатии:
    10
    Это уже к Topper, ветка форума как раз касается плагина LAP, а у вас его нет.....
     
  13. btr

    btr A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    11 фев 2013
    Сообщения:
    198
    Симпатии:
    116
    LAP берет файл с апарсера, чистит текст, и сохраняет его в папку.
    В папке создаются подпапки по алфавиту, в них уже текстовые файлы с именем ключа, потом LAP с помощью юзермакросов передает все это дело в пандору.
    так что без LAP тут ни как, либо кодить свои поделки, либо заказывать поделки на стороне, либо покупать LAP.
     
    Anatoliy и zbest нравится это.
  14. zbest

    zbest A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    10 фев 2013
    Сообщения:
    36
    Симпатии:
    5
    Прежде чем покупать софт, разумно поинтересоваться, не так ли?

    Благодарю за ответ.
     
  15. Хаким

    Хаким A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    5 май 2016
    Сообщения:
    16
    Симпатии:
    3
    Покажите кто нибудь свои настройки ЛАПы , пипец а то у меня дор на 3к сраниц генериться 12 часов !!!!!!!!!!!! 12 КАРЛ !!!
    Ошибок при парсинге нет кеи нормальные (ВЧ СЧ)
     
  16. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Он генерится 12 часов или парсится 12 часов?
    Нужно локализовать проблему.
    Насчет настроек - попробуй все сбросить и залить по новой: пресеты/юзер-макросы
    Еще проверь что антикапча подключена, прокси если от апарсера, то выключи их чек и поставь порядок: HTTP,SOCKS, не наоборот, или просто HTTP, соксов там почти нет
    Если парсинг долгий то лучше всего спросить ТП апарсера в скайпе - показать долгое задание
     
  17. dslash

    dslash A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    2 ноя 2015
    Сообщения:
    34
    Симпатии:
    3
    От колличества и качества проксей еще зависит... К примеру у меня на 100 потоках за сутки около 30.000 ключей спаршивает (текст). Ну т.е. считай на 300 потоках будет 90.000... Один раз спарсил, потом базу локально юзаешь... (На А-парсеровских проксях.)

    Хочется правда, что бы был выбор между парсингом гугла и парсингом бинга для текста. Насколько мне известно в бинге и прокси то особо не нужны. Затраты на прокси можно сократить. ;)
     
  18. Хаким

    Хаким A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    5 май 2016
    Сообщения:
    16
    Симпатии:
    3
    У проксей порядок: HTTP,SOCKS.
    Да прокси от апарсера .
    Антикаптчу только не юзал.
    Сам дорген у меня работает быстро дор на 100к например генерит за минуты 3 но это с готовой текстовкой .
    вот еще этот момент объясни плиз в ЛАПе- Дробить на пачки . На пачки чег ? зачем ? у меня стояла 1000.
    потоков стоит меньше чем их на самом деле . создать под ключ "видео" галка стоит .
    Все остальное рандомное .
    Если просто апарсером паршу то скорость парсинга дикая НО не в связке с ЛАП :(
    И эта проблема у меня уже давно . Просто не юзал ЛАП больше ...до этого момента .
    +ну за парсинг Бинга гугл сейчас не вариант норм парсить под доры.
     
  19. Антон

    Антон A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    7 июл 2013
    Сообщения:
    31
    Симпатии:
    9
    Так в чем проблема? Отредактируй в А-Парсере пресет getlinks, выставив Бинг вместо Гугла, и радуйся.

    Это настройка количества ключевиков для одного задания в А-Парсере. Если 1000, то сначала из пс парсятся ссылки для 1000 кеев, потом с этих ссылок текст дергается. Потом следующие 1000 кеев в пс за ссылками и т.д.
     
    #359 Антон, 28 окт 2016
    Последнее редактирование: 28 окт 2016
  20. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    это неверно, все прокси одинаково поддерживают оба протокола
     
Статус темы:
Закрыта.

Поделиться этой страницей