Aperçu et application
Liste par thèmes de tous les scrapers intégrés existants dans A-Parser avec description et liens vers leurs pages.
Scrapers de moteurs de recherche
| Nom du scraper | Description |
|---|---|
 SE::Google | Collecte de toutes les données des résultats de recherche Google : liens, ancres, snippets, mots-clés associés, collecte de blocs publicitaires. Multithreading, contournement de ReCaptcha |
 SE::Yandex | Collecte de toutes les données des résultats de recherche Yandex : liens, ancres, snippets, mots-clés associés, collecte de blocs publicitaires. Profondeur de collecte maximale |
 SE::AOL | Collecte de toutes les données des résultats de recherche AOL : liens, ancres, snippets |
 SE::Bing | Collecte de toutes les données des résultats de recherche Bing : liens, ancres, snippets, mots-clés associés, Profondeur de collecte maximale |
 SE::Baidu | Collecte de toutes les données des résultats de recherche Baidu : liens, ancres, snippets, mots-clés associés |
| SE::Baidu | Collecte de toutes les données des résultats de recherche Baidu : liens, ancres, snippets, mots-clés associés |
 SE::Dogpile | Collecte de toutes les données des résultats de recherche Dogpile : liens, ancres, snippets, mots-clés associés |
 SE::DuckDuckGo | Collecte de toutes les données des résultats de recherche DuckDuckGo : liens, ancres, snippets |
 SE::MailRu | Collecte de toutes les données des résultats de recherche MailRu : liens, ancres, snippets |
 SE::Seznam | Scraper du moteur de recherche tchèque seznam.cz : liens, ancres, snippets, mots-clés associés |
 SE::Yahoo | Collecte de toutes les données des résultats de recherche Yahoo : liens, ancres, snippets, mots-clés associés, Profondeur de collecte maximale |
 SE::Youtube | Collecte de données des résultats de recherche Youtube : liens, titre, description, nom d'utilisateur, lien vers l'image d'aperçu, nombre de vues, durée de la vidéo |
 SE::Ask | Scraper des résultats de recherche Google américains via Ask.com : liens, ancres, snippets, mots-clés associés |
 SE::Rambler | Collecte de toutes les données des résultats de recherche Rambler : liens, ancres, snippets |
 SE::Startpage | Collecte de toutes les données des résultats de recherche Startpage : liens, ancres, snippets |
Exemples
🔗 Indexation des pages dans Google et Yandex
Indexation des pages dans Google et Yandex
🔗 Vidéo Collecte de données de domaines thématiques par mot-clé depuis Google
Vidéo Collecte de données de domaines thématiques par mot-clé depuis Google
🔗 Questions et réponses des résultats de recherche Google
Questions et réponses des résultats de recherche Google
🔗 Collecte de données de domaines thématiques par mot-clé depuis Google et obtention de divers paramètres de domaine
Collecte de données de domaines thématiques par mot-clé depuis Google et obtention de divers paramètres de domaine
🔗 Collecte de Google Actualités avec date et conversion de celle-ci
Collecte de Google Actualités avec date et conversion de celle-ci
🔗 Collecte uniquement des snippets depuis Google
Collecte uniquement des snippets depuis Google
🔗 Vérification de l'orthographe dans Google
Vérification de l'orthographe dans Google
🔗 Collecte de liens et d'ancres depuis Google vers CSV
Collecte de liens et d'ancres depuis Google vers CSV
🔗 Collecte de texte depuis le moteur de recherche Google en utilisant une chaîne de tâches
Collecte de texte depuis le moteur de recherche Google en utilisant une chaîne de tâches
🔗 Scraper de cache Yandex
Scraper de cache Yandex
🔗 Collecte uniquement des snippets depuis Yandex
Collecte uniquement des snippets depuis Yandex
🔗 Obtention des résultats Yandex et du numéro de position du résultat
Obtention des résultats Yandex et du numéro de position du résultat
🔗 Nombre de pages d'un site dans Yandex
Nombre de pages d'un site dans Yandex
🔗 Collecte de la concurrence par mot-clé depuis Yandex
Collecte de la concurrence par mot-clé depuis Yandex
🔗 Recherche de niches libres dans le segment RU d'Internet
Recherche de niches libres dans le segment RU d'Internet
Scrapers de positions dans les moteurs de recherche
| Nom du scraper | Description |
|---|---|
 SE::Google::Position | Vérification des positions d'un site par mots-clés dans Google : liens, liste de toutes les positions |
 SE::Yandex::Position | Vérification des positions d'un site par mots-clés dans Yandex : liens, liste de toutes les positions |
 SE::Bing::Position | Vérification des positions d'un site par mots-clés dans Bing : liens, liste de toutes les positions |
 SE::MailRu::Position | Vérification des positions d'un site par mots-clés dans MailRu : liens, liste de toutes les positions |
Exemples
🔗 Obtention des positions d'un site simultanément pour plusieurs régions
Obtention des positions d'un site simultanément pour plusieurs régions
🔗 Obtention des positions d'un site simultanément pour plusieurs régions
Obtention des positions d'un site simultanément pour plusieurs régions
🔗 Aperçu des options de présentation des résultats
Aperçu des options de présentation des résultats
Scrapers de suggestions de recherche
| Nom du scraper | Description |
|---|---|
 SE::Google::Suggest | Scraper de suggestions Google : nombre de résultats par requête, suggestions de requête, type de requête |
 SE::Yandex::Suggest | Scraper de suggestions Yandex : nombre de résultats par requête, suggestions de requête |
 SE::Bing::Suggest | Scraper de suggestions Bing : nombre de résultats par requête, suggestions de requête |
 SE::Aol::Suggest | Scraper de suggestions Aol : nombre de résultats par requête, suggestions de requête |
 SE::Yahoo::Suggest | Scraper de suggestions Yahoo : nombre de résultats par requête, suggestions de requête |
 SE::Youtube::Suggest | Scraper de suggestions Youtube : suggestions de requête |
Exemples
🔗 Présélection pour la collecte de données de suggestions avec la possibilité d'exclure des résultats les suggestions contenant des mots-clés négatifs
Présélection pour la collecte de données de suggestions avec la possibilité d'exclure des résultats les suggestions contenant des mots-clés négatifs
Scrapers de mots-clés
| Nom du scraper | Description |
|---|---|
 SE::Google::Trends | Scraper de mots-clés en tendance selon Google |
 SE::Yandex::WordCraft | Scraper de requêtes d'utilisateurs et de sites populaires dans la recherche Yandex avec Yandex Webmaster WordCraft |
 SE::Yandex::Wordstat | Scraper de mots-clés et de statistiques d'impressions du service wordstat.yandex.ru |
 SE::Yandex::Wordstat::ByDate | Scraper de statistiques d'impressions Yandex WordStat par mois ou par semaine, statistiques de mots-clés |
 Rank::Bukvarix::Domain | Collecte de mots-clés par domaine depuis Bukvarix : mot-clé, fréquence, position |
 Rank::Bukvarix::Keyword | Collecte de mots-clés par mot-clé depuis Bukvarix : mot-clé, fréquence, position |
 Rank::Ahrefs::KeywordDifficulty | Difficulté des mots-clés, mots-clés, nombre de mots-clés |
 Rank::Ahrefs::KeywordGenerator | Collecte de mots-clés Ahrefs : idées de mots-clés, questions avec mots-clés |
 SE::Google::KeywordPlanner | Collecte de suggestions, mots-clés, concurrence, enchères min. et max. |
 SE::Yandex::Direct | Nombre d'annonces pour une requête spécifique, titre, texte et domaine, liens, ancres, tags |
Exemples
🔗 Saisonnalité des mots-clés
Saisonnalité des mots-clés
🔗 Évaluation de la fréquence via WordStat
Évaluation de la fréquence via WordStat
🔗 Collecte Wordstat en profondeur
Collecte Wordstat en profondeur
🔗 Obtention de la liste des catégories Google Trends
Obtention de la liste des catégories Google Trends
🔗 Formatage de la date Google Trends
Formatage de la date Google Trends
Enregistrement de comptes
| Nom du scraper | Description |
|---|---|
 SE::Yandex::Register | Enregistrement de comptes dans Yandex |
Exemples
🔗 Obtention de la liste complète des régions Yandex
Obtention de la liste complète des régions Yandex
🔗 Automatisation de l'enregistrement de comptes Yandex
Automatisation de l'enregistrement de comptes Yandex
Scrapers de paramètres de sites et de domaines
| Nom du scraper | Description |
|---|---|
 SE::Google::TrustCheck | Vérification du trust d'un site |
 SE::Google::Compromised | Vérification de la présence de la mention « This site may be hacked » |
 SE::Google::SafeBrowsing | Vérification du domaine dans la liste noire de Google |
 SE::Yandex::SafeBrowsing | Vérification du domaine dans la liste noire de Yandex |
 SE::Yandex::SQI | Vérification de l'Indice de Qualité du Site (IQS) dans Yandex |
 Net::Whois | Détermine si un domaine est enregistré ou non, la date de création du domaine, ainsi que la date de fin d'enregistrement |
 Net::Dns | Le scraper résout les domaines en adresses IP |
 Rank::Cms | Identifie tous les forums populaires, blogs, CMS, guestbooks, wikis et de nombreux autres types de moteurs |
 Rank::Archive | Scraper de la date de première et dernière mise en cache d'un site dans la web archive |
 Rank::Linkpad | Scraper de backlinks et de statistiques du service linkpad.ru |
 Rank::MajesticSEO | Scraper du nombre de backlinks du service majesticseo.com |
 Rank::Mustat | Évaluation du trafic sur le site, ainsi que coût et classement du domaine |
 Rank::Social::Signal | Scraper de signaux sociaux |
 Rank::Curlie | Vérification de la présence d'un site dans l'annuaire Curlie (équivalent de DMOZ) |
 Rank::Ahrefs | Scraper ahrefs.com |
 Rank::KeysSo | Scraper keys.so |
 Rank::MOZ | Scraper MOZ |
 SecurityTrails::Ip | Collecte les domaines par IP |
 SecurityTrails::Domain | Scraper SecurityTrails |
Exemples
🔗 Collecte de données de domaines thématiques par mot-clé depuis Google et obtention de divers paramètres de domaine
Collecte de données de domaines thématiques par mot-clé depuis Google et obtention de divers paramètres de domaine
🔗 Informations sur le site
Informations sur le site
🔗 Net::Whois sélection de données arbitraires
Net::Whois sélection de données arbitraires
🔗 Réception de notifications Telegram sur l'expiration de l'enregistrement des domaines
Réception de notifications Telegram sur l'expiration de l'enregistrement des domaines
🔗 Collecte d'une base d'adresses e-mail
Collecte d'une base d'adresses e-mail
🔗 Détermination de la liste des domaines sur une IP
Détermination de la liste des domaines sur une IP
🔗 Détermination du CMS pour 1 000 000 de domaines en 15 heures
Détermination du CMS pour 1 000 000 de domaines en 15 heures
🔗 Collecte de domaines de sites selon un CMS spécifique
Collecte de domaines de sites selon un CMS spécifique
🔗 Sites WordPress avec abonnements
Sites WordPress avec abonnements
Scrapers de services divers
| Nom du scraper | Description |
|---|---|
| SE::Yandex::Register | Permet d'enregistrer des comptes dans Yandex |
 SE::Bing::Translator | Traducteur via le service www.bing.com/translator/ |
 SE::Google::Translate | Traducteur Google |
 SE::Yandex::Translate | Traducteur Yandex |
 SE::Bing::Images | Scraper d'images du moteur de recherche Bing |
 SE::Google::Images | Scraper d'images par mots-clés Google |
 SE::Google::ByImage | Recherche d'images par lien |
 SE::Yandex::Images | Scraper d'images par mots-clés Yandex |
 SE::Yandex::ByImage | Scraper d'images par lien depuis Yandex |
 SE::DuckDuckGo::Images | Scraper d'images depuis DuckDuckGo |
 SE::Dogpile::Images | Scraper d'images depuis Dogpile |
 Util::AntiGate | Reconnaissance de captcha via le service AntiGate |
 Util::YandexRecognize | Reconnaissance de captcha de Yandex |
 Util::ReCaptcha2 | Reconnaissance de recaptcha par les ressources Anti-captcha.com, Rucaptcha.com, Capmonster, Capmonster.cloud, Xevil, 2captcha, R.I.P.captcha |
 SEO::Ping | Envoi massif de requêtes Ping aux services supportant l'API Weblog (Google Blog Search, Feed Burner, Ping-o-Matic, etc.) |
 Check::RosKomNadzor | Vérification d'un site dans la base de données de Roskomnadzor |
 SE::Yandex::Speller | Vérification des pages pour les fautes de texte via Yandex.Speller |
 GooglePlay::Apps | Scraper d'applications Google Play |
 Social::Instagram::Post | Scraper de données sur les posts Instagram |
 Social::Instagram::Profile | Scraper de données de profils Instagram |
 Social::Instagram::Tag | Scraper de posts par tags sur Instagram |
 Social::Instagram::Geo | Scraper de posts Instagram dans un lieu spécifié |
 Telegram::GroupScraper | Scraper de données de groupes publics dans Telegram |
 API::Server::Redis | Travail avec A-Parser via Redis |
 SE::Google::Cache | Vérification de la présence de pages dans le cache Google |
| Social::Instagram::Geo | Scraper de posts Instagram dans un lieu spécifié |
 DeepL::Translator | Traducteur de texte via le service www.deepl.com |
 CoinMarketCap::LastPrice | Scraper de la boutique CoinMarketCap : nom du jeton, prix actuel en USD |
Exemples
🔗 Automatisation de l'enregistrement de comptes Yandex
Automatisation de l'enregistrement de comptes Yandex
🔗 Comparaison de la vitesse des traducteurs
Comparaison de la vitesse des traducteurs
🔗 Utilisation de fichiers entiers comme requêtes
Utilisation de fichiers entiers comme requêtes
🔗 Chargement de fichiers depuis un répertoire pour traduction dans DeepL
Chargement de fichiers depuis un répertoire pour traduction dans DeepL
🔗 Téléchargement d'images d'une résolution et d'une taille spécifiées
Téléchargement d'images d'une résolution et d'une taille spécifiées
🔗 Création de scrapers JS. Travail avec CAPTCHA
Création de scrapers JS. Travail avec CAPTCHA
🔗 Création de scrapers JS. Travail avec ReCaptcha2
Création de scrapers JS. Travail avec ReCaptcha2
🔗 Exemple de travail avec SEO::Ping
Exemple de travail avec SEO::Ping
🔗 Scraper de liens de lieux pour Social::Instagram::Geo
Scraper de liens de lieux pour Social::Instagram::Geo
🔗 Collecte d'informations sur les utilisateurs Instagram
Collecte d'informations sur les utilisateurs Instagram
🔗 Collecte des utilisateurs de groupes publics dans Telegram
Collecte des utilisateurs de groupes publics dans Telegram
Scrapers de boutiques
| Nom du scraper | Description |
|---|---|
 Shop::Amazon | Scraper des résultats de recherche amazon.com |
 Shop::Yandex::Market | Scraper Yandex.Market |
 Shop::AliExpress | Scraper des résultats de recherche Shop::AliExpress |
 Shop::eBay | Scraper des résultats de recherche Ebay |
 Shop::Wildberries::ProductsList | Scraper de liste de produits Wildberries |
 Shop::Wildberries::ProductInfo | Scraper de page produit Wildberries |
 Shop::Wildberries::Suggest | Scraper de suggestions de recherche Wildberries |
| Shop::Yandex::Market | Scraper de produits depuis YANDEX.MARKET |
Exemples
🔗 Collecte de produits depuis un site
Collecte de produits depuis un site
Scrapers de cartes
| Nom du scraper | Description |
|---|---|
 Maps::Google | Scraper Google Maps : nom de l'organisation, adresse et coordonnées, note, nombre d'avis et politique de prix, site web, téléphone, photo |
 Maps::Yandex | Scraper Yandex Maps : nom de l'organisation, adresse et coordonnées, note, nombre d'avis et politique de prix, site web, téléphone, photo, réseaux sociaux |
Exemples
🔗 Collecte de Google Maps pour rassembler toutes les organisations dans une zone spécifique
Collecte de Google Maps pour rassembler toutes les organisations dans une zone spécifique
Scrapers de contenu
| Nom du scraper | Description |
|---|---|
 Check::BackLink | Vérifie la présence de votre lien (liens) dans une base de liens |
 HTML::LinkExtractor | Scraper de liens externes et internes d'un site spécifié, peut parcourir les liens internes jusqu'au niveau choisi |
 HTML::ArticleExtractor | Scraper d'articles |
 HTML::TextExtractor | Scraper de blocs de texte |
 HTML::TextExtractor::LangDetect | Détermination de la langue de la page, sans utiliser de services tiers |
 HTML::EmailExtractor | Collecte d'adresses e-mail depuis les pages de sites |
 Net::HTTP | Télécharge la page spécifiée, supporte la collecte multipage |
Exemples
🔗 Vérification de la présence de liens vers une page dans le cache Yandex
Vérification de la présence de liens vers une page dans le cache Yandex
🔗 Collecte de site en profondeur basée sur le scraper HTML::LinkExtractor
Collecte de site en profondeur basée sur le scraper HTML::LinkExtractor
🔗 Vidéo de collecte de données du site Booking.com en utilisant Net::HTTP
Vidéo collecte de la ressource Booking.com en utilisant Net::HTTP
🔗 Vérification périodique des backlinks avec ajout des résultats dans un tableau
Vérification périodique des backlinks avec ajout des résultats dans un tableau
🔗 Collecte de site en profondeur basée sur le scraper HTML::LinkExtractor
Collecte de site en profondeur basée sur le scraper HTML::LinkExtractor
🔗 Collecte de sujets maillés
Collecte de sujets maillés
🔗 Recherche de sous-domaines d'un site
Recherche de sous-domaines d'un site
🔗 Collecte de sites et sauvegarde des liens vers les images
Collecte de sites et sauvegarde des liens vers les images
🔗 Génération de sitemap.xml en utilisant les capacités de JavaScript
Génération de sitemap.xml en utilisant les capacités de JavaScript
🔗 Obtention des pages d'un site et vérification de l'indexation dans Google et Yandex
Obtention des pages d'un site et vérification de l'indexation dans Google et Yandex
🔗 Analyse de la vitesse de réponse des pages sur un site
Analyse de la vitesse de réponse des pages sur un site
🔗 Collecte d'e-mails depuis les pages de contact
Collecte d'e-mails depuis les pages de contact
🔗 Vérification de la longueur du texte sur les pages
Vérification de la longueur du texte sur les pages
🔗 Translittération
Translittération