1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление
Файлы cookie Telegram чат

А-Парсер и Пандора!

Тема в разделе "Трёп", создана пользователем Topper, 23 апр 2015.

Статус темы:
Закрыта.
Страница 2 из 22
  1. kashim

    kashim A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 апр 2015
    Сообщения:
    36
    Симпатии:
    12
    Topper, сделай, пожалуйста, фикс для этого:
    [​IMG]
    Появляется частенько при запуске.
     
    #21 kashim, 2 май 2015
  2. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Хорошо, переделаю авторизацию на прямую, без резолвинга имени.
    Как временное решение можно прописать в hosts прямой адрес 77.221.130.18 для pandoraboxx.ru
     
    #22 Topper, 2 май 2015
    kashim нравится это.
  3. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Ап LinkAParser 1.2
    Авторизация устойчива к проблемам сети
    Фильтрация результатов улучшена, понимает строки вида "Прикольные" в результтах парсинга а-парсера и отсеивает их.
    Исправлена ошибка в макросах APFREETEXT и APTEXT
    Обновлена инструкция

    Перескачайте LinkAParser.zip и linkaparserplugs.zip
     
    #23 Topper, 4 май 2015
    List, kashim и Force68 нравится это.
  4. Force68

    Force68 A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 фев 2013
    Сообщения:
    175
    Симпатии:
    49
    Отцы, а как техничней подключить впс на линуксе с апарсером как сетевой диск к винде, ну всмысле чтоб не вызывать в консоле сотону , нету софту какого нибудь чтоб пара кнопок и без гимороя? Что то почитал к дропбоксу мануал, нудно.
     
    #24 Force68, 4 май 2015
    kashim нравится это.
  5. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    #25 Forbidden, 4 май 2015
    StreamK, Force68, List и ещё 1-му нравится это.
  6. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    откуда такие строки? должен быть корректный utf-8
     
    #26 Forbidden, 4 май 2015
  7. Force68

    Force68 A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 фев 2013
    Сообщения:
    175
    Симпатии:
    49
    Форбиден, спасибо большое, попробую.
     
    #27 Force68, 4 май 2015
  8. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Имхо это обычный фейл автоопределения кодировки

    По запросу "Барнаул футболки" получаю ссылки из гугла:

    Барнаул футболки|http://vk.com/dgbarnaul
    Барнаул футболки|http://arbat-it.ru/content/pechat-na-futbolkah
    Барнаул футболки|http://www.altaidar.ru/fut.html
    Барнаул футболки|http://www.maximumstyle.ru/pages/v_barnaule/
    Барнаул футболки|http://ok.ru/futbolkiis
    Барнаул футболки|http://aprint22.ru/50.php
    Барнаул футболки|http://barnaul.pulscen.ru/price/330408-muzhskie-futbolki
    Барнаул футболки|http://barnaul.pulscen.ru/price/420812-pechat-na-futbolkah
    Барнаул футболки|http://price-altai.ru/topic381881.html
    Барнаул футболки|http://barnaul.tiu.ru/Futbolka-s-nadpisyu.html
    Барнаул футболки|http://rfutbolka.ru/barnaul/futbolki-majki-barnaul.php
    Барнаул футболки|https://www.avito.ru/barnaul/odezhda_obuv_aksessuary/zhenskaya_odezhda/topy_i_futbolki
    Барнаул футболки|http://www.amtees.ru/auxpage_barnaul/
    Барнаул футболки|http://maykadarom.narod.ru/barnaul-futbolki.html
    Барнаул футболки|https://docs.google.com/document/d/1zvBCOB9BAIYkXxLdU4t5A4PiPjmozuVF0KKjm7_u7sM/edit
    Барнаул футболки|https://sites.google.com/site/dostavkapovsejrossiiisng170/barnaul-futbolki
    Барнаул футболки|http://five-plus.ru/текстиль/футболки/
    Барнаул футболки|http://akvarel22.ru/
    Барнаул футболки|http://www.altai.aif.ru/society/1437113

    По одному из этих урлов приезжает текстовка через экстрактор

    Прикольные футболки в Барнауле, майки мужские и женские Спасибо, что посетили интернет-магазин Ð¿Ñ€Ð¸ÐºÐ¾Ð»ÑŒÐ½Ñ‹Ñ Ñ„ÑƒÑ‚Ð±Ð¾Ð»Ð¾Ðº и маек в Барнауле. На нашем ресурсе вы найдете широкий Ð¼Ð¾Ð´Ð½Ñ‹Ñ Ñ„ÑƒÑ‚Ð±Ð¾Ð»Ð¾Ðº с прикольными надписями для девушек и парней: для влюбленных, для детей, футболки с логотипом, для и мам, с изображением, майки под заказ.
    Доставка маек с прикольными надписями в Барнаул
    Доставка в Барнаул производится сотрудниками почты России. Посылки на сумму свыше 5 тысяч рублей отправляются с предоплатой.
    Товары произведены из 100% хлопка отличного качества.
    Новые статьи: Современные майки...
     
    #28 Topper, 4 май 2015
    Последнее редактирование: 4 май 2015
  9. kashim

    kashim A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 апр 2015
    Сообщения:
    36
    Симпатии:
    12
    #29 kashim, 4 май 2015
  10. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Там в конце статьи есть ссылка на ftpdrive.
    Ставил себе - эмулирует из ftp обычный диск
     
    #30 Topper, 4 май 2015
  11. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    пробуйте опцию Detect charset on content
     
    #31 Forbidden, 4 май 2015
    Topper нравится это.
  12. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Ап LinkAParser 1.3
    Добавлена возможность указать два разных конфига потоков для парсинга ссылок и текста
    Обновлен пресет парсинга текста: влючен детект кодировки
    Добавлена возможность расширить встроенный список чистящих текст регулярок своими собственными.
    Для этого указать собственные в файле LinkAParser.extraregex.txt. Пример присутствует.

    Перескачайте LinkAParser.zip по той же ссылке
     
    #32 Topper, 11 май 2015
    kashim, Force68 и List нравится это.
  13. Force68

    Force68 A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 фев 2013
    Сообщения:
    175
    Симпатии:
    49
    Топпер, а чего это LinkAParser у меня стартует при запуске генерации, даже если в шаблоне нет макросов для парсера? Оно не то что критично, но просто выскакивет окно LinkAParser с логом, он выдает ошибку т.к. апарсер отключен, и его приходится закрывать руками, так как генерация не начинается пока не закроешь.
     
    #33 Force68, 12 май 2015
  14. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Чтобы это сделать интеграция должна быть боле тесной. Я подумаю как это сделать.
     
    #34 Topper, 12 май 2015
  15. Force68

    Force68 A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 фев 2013
    Сообщения:
    175
    Симпатии:
    49
    Да впринципе оно и не мешает то особо.
     
    #35 Force68, 12 май 2015
  16. kashim

    kashim A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 апр 2015
    Сообщения:
    36
    Симпатии:
    12
    А можно для парсинга текста настроить отдельное от парсинга ссылок число потоков?
     
    #36 kashim, 14 май 2015
  17. Force68

    Force68 A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 фев 2013
    Сообщения:
    175
    Симпатии:
    49
    #37 Force68, 14 май 2015
    kashim и Topper нравится это.
  18. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Все верно. В версии 1.3 в поле настройки потоков можно(не обязательно) указать два конфига потоков через запятую

    [​IMG]
     
    #38 Topper, 14 май 2015
    kashim нравится это.
  19. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Ап LinkAParser 1.4

    Добавлена возможность чекнуть картинки на статус 200 ОК
    Пресет чека картинок в комплекте на закладке "примеры пресетов"

    upload_2015-5-23_18-48-22.png
     
    #39 Topper, 23 май 2015
    kashim, List, Sobesednic и ещё 1-му нравится это.
  20. Force68

    Force68 A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 фев 2013
    Сообщения:
    175
    Симпатии:
    49
    Topper, а как это работает? Допустим мы спарсили 1000 урлов картинок, которые надо вставить в код дора, при чеке "живых" оказалось только 900,
    что тогда дорген будет ставить в недостающие места, где использовался макрос?
     
    #40 Force68, 23 май 2015
Страница 2 из 22
Статус темы:
Закрыта.

Поделиться этой страницей