1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление
Файлы cookie Telegram чат

Как почистить спарсенный список

Тема в разделе "Делимся опытом", создана пользователем erdaud, 9 янв 2016.

  1. erdaud

    erdaud A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    12 июн 2012
    Сообщения:
    5
    Симпатии:
    0
    Добрый день, такая задача:
    -напарсил 25кк линков (дублей линков нет, но есть дубли доменов в них) - это файл1
    -есть свой старый список доменов 2кк - это файл2

    Нужно из файла1 (25кк линков) удалить все линки, в к-х встречаются домены (2кк) из файла2

    Вроде кто-то когда-то показывал как сделать это через Net:HTTP или мне это приснилось...

    Зараннее спасибо!
     
    #1 erdaud, 9 янв 2016
  2. DeLaKroiX

    DeLaKroiX A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 дек 2015
    Сообщения:
    267
    Симпатии:
    96
    хрум умеет, если он у тебя есть. инструменты - фильтр базы ссылок
     
    #2 DeLaKroiX, 9 янв 2016
  3. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    В A-Parser пока нет встроенного менеджера баз ссылок
     
    #3 Forbidden, 9 янв 2016
  4. Fast25

    Fast25 A-Parser Pro License
    A-Parser Pro

    Регистрация:
    5 июл 2013
    Сообщения:
    5
    Симпатии:
    0
    Планируется этот менеджер ввести? так же по размеру файлов чтоб результаты сохранялись не более 100мб допустим. потом в следующий.
     
    #4 Fast25, 21 янв 2016
  5. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    да, в задачах есть
     
    #5 Forbidden, 22 янв 2016
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)

Поделиться этой страницей