1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Видео урок: Сбор WordPress сайтов

Тема в разделе "Новости", создана пользователем Support, 18 сен 2023.

  1. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.451
    Симпатии:
    2.131
  2. Reset

    Reset A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    28 фев 2019
    Сообщения:
    22
    Симпатии:
    27
    Показанный метод работает через Ж
    сайт рассмотренный в видео находится не потому, что в исходном коде есть wp-content
    а потому что по запросу - находится вот такая страница https://schaller-automation.com/en/contact/
    а ней внезапно есть такое

    upload_2023-9-18_14-42-51.png
    А так как спарсенный результат приводится к домену, то и потом на главной странице естественно этого нету.

    пруф - https://www.google.com/search?q=int...text:/wp-content+site:schaller-automation.com
     

    Вложения:

    Twist6 нравится это.
  3. Twist6

    Twist6 A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 окт 2021
    Сообщения:
    6
    Симпатии:
    2
    Не работает intext по исходному коду.
     
  4. DimkaG

    DimkaG A-Parser Pro License
    A-Parser Pro

    Регистрация:
    23 мар 2021
    Сообщения:
    63
    Симпатии:
    20
    Всё верно, я поэтому и сказал что это только "ОДИН ИЗ" методов сбора. Практически любую базу нужно после сбора ещё проверять по различным параметрам прежде чем по ней работать. Естественно если на сайте встречается wp-content (не только в коде но и внутри текста самого сайта) то он попадает в базу. (даже текущий топик попадёт, хотя тут не wp -))) )

    Если знаете другой более качественный метод сбора - покажите, обсудим!
     
  5. DimkaG

    DimkaG A-Parser Pro License
    A-Parser Pro

    Регистрация:
    23 мар 2021
    Сообщения:
    63
    Симпатии:
    20
    только по гуглу работать будет!
     
  6. Reset

    Reset A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    28 фев 2019
    Сообщения:
    22
    Симпатии:
    27
    если только в коде - не попадает
    https://www.google.com/search?q=intext:wp-content+site:forms.byu.edu&sca_esv=571840155&sxsrf=AM9HkKmpNHU1JGJPtQds-rQG-rH6ZoOrwg:1696842844383&ei=XMQjZff8Ft6-wPAPqNiUsAE&ved=0ahUKEwj3muqX0OiBAxVeHxAIHSgsBRYQ4dUDCBA&oq=intext:wp-content+site:forms.byu.edu

    Метод знаю, потом напишу
     
  7. Adelir

    Adelir A-Parser Pro License
    A-Parser Pro

    Регистрация:
    1 дек 2022
    Сообщения:
    6
    Симпатии:
    0
    Добрый день!
    Можно ли этим пресетом парсить сайты на других CMS?
    Интересует https://horoshop.ua/
     
  8. DimkaG

    DimkaG A-Parser Pro License
    A-Parser Pro

    Регистрация:
    23 мар 2021
    Сообщения:
    63
    Симпатии:
    20
    если знаете футпринты нужной CMS то конечно можно, просто вместо wp-content подставляйте ваш футпринт и, как писал выше, это ОДИН ИЗ способов!!!
     
  9. DimkaG

    DimkaG A-Parser Pro License
    A-Parser Pro

    Регистрация:
    23 мар 2021
    Сообщения:
    63
    Симпатии:
    20
    для вашего магазина это будет к примеру: var file = '/frontend/themes/
    хотя не факт
     
  10. DimkaG

    DimkaG A-Parser Pro License
    A-Parser Pro

    Регистрация:
    23 мар 2021
    Сообщения:
    63
    Симпатии:
    20
  11. Adelir

    Adelir A-Parser Pro License
    A-Parser Pro

    Регистрация:
    1 дек 2022
    Сообщения:
    6
    Симпатии:
    0
    Спасибо за ответ. Будем тестить.

    Еще есть вопрос по Xevil - можно ли запустить этот пресет с его демо-версией?
    У меня не получилось, потому уточняю
     
  12. DimkaG

    DimkaG A-Parser Pro License
    A-Parser Pro

    Регистрация:
    23 мар 2021
    Сообщения:
    63
    Симпатии:
    20
    ксевил разгадывает капчи которые выдаёт гугл.... вы можете вообще ксевил не юзать но тогда кол-во успешных запросов будет стремиться к нулю со временем... не обязательно ксевил, попробуйте другие сервисы разгадывания. Но я рекомендую ксевил. В соседней моей ветке есть скидка на покупку в 55% по купонам.
     

Поделиться этой страницей