Panoramica e applicazione
Elenco per argomenti di tutti gli scraper integrati esistenti in A-Parser con descrizione e link alle loro pagine.
Scraper dei motori di ricerca
| Nome dello scraper | Descrizione |
|---|---|
 SE::Google | Scraping di tutti i dati dai risultati di ricerca di Google: link, anchor, snippet, Related keywords, scraping di blocchi pubblicitari. Multithreading, bypass di ReCaptcha |
 SE::Yandex | Scraping di tutti i dati dai risultati di ricerca di Yandex: link, anchor, snippet, Related keywords, scraping di blocchi pubblicitari. Massima profondità di scraping |
 SE::AOL | Scraping di tutti i dati dai risultati di ricerca di AOL: link, anchor, snippet |
 SE::Bing | Scraping di tutti i dati dai risultati di ricerca di Bing: link, anchor, snippet, Related keywords, Massima profondità di scraping |
 SE::Baidu | Scraping di tutti i dati dai risultati di ricerca di Baidu: link, anchor, snippet, Related keywords |
| SE::Baidu | Scraping di tutti i dati dai risultati di ricerca di Baidu: link, anchor, snippet, Related keywords |
 SE::Dogpile | Scraping di tutti i dati dai risultati di ricerca di Dogpile: link, anchor, snippet, Related keywords |
 SE::DuckDuckGo | Scraping di tutti i dati dai risultati di ricerca di DuckDuckGo: link, anchor, snippet |
 SE::Seznam | Scraper del motore di ricerca ceco seznam.cz: link, anchor, snippet, Related keywords |
 SE::Yahoo | Scraping di tutti i dati dai risultati di ricerca di Yahoo: link, anchor, snippet, Related keywords, Massima profondità di scraping |
 SE::Youtube | Scraping dei dati dai risultati di ricerca di Youtube: link, titolo, descrizione, nome utente, link all'immagine di anteprima, numero di visualizzazioni, durata del video |
 SE::Ask | Scraper dei risultati di ricerca americani di Google tramite Ask.com: link, anchor, snippet, Related keywords |
 SE::Rambler | Scraping di tutti i dati dai risultati di ricerca di Rambler: link, anchor, snippet |
 SE::Startpage | Scraping di tutti i dati dai risultati di ricerca di Startpage: link, anchor, snippet |
Esempi
🔗 Indicizzazione delle pagine in Google e Yandex
Indicizzazione delle pagine in Google e Yandex
🔗 Video Scraping di domini tematici per parola chiave da Google
Video Scraping di domini tematici per parola chiave da Google
🔗 Domande e risposte dai risultati di Google
Domande e risposte dai risultati di Google
🔗 Scraping di domini tematici per parola chiave da Google e recupero di vari parametri del dominio
Scraping di domini tematici per parola chiave da Google e recupero di vari parametri del dominio
🔗 Scraping di Google News con data e relativa conversione
Scraping di Google News con data e relativa conversione
🔗 Scraping di soli snippet da Google
Scraping di soli snippet da Google
🔗 Controllo ortografico in Google
Controllo ortografico in Google
🔗 Scraping di link e anchor da Google in CSV
Scraping di link e anchor da Google in CSV
🔗 Scraping di testo dal motore di ricerca Google utilizzando una catena di task
Scraping di testo dal motore di ricerca Google utilizzando una catena di task
🔗 Scraper della cache di Yandex
Scraper della cache di Yandex
🔗 Scraping di soli snippet da Yandex
Scraping di soli snippet da Yandex
🔗 Recupero dei risultati di Yandex e della posizione del risultato
Recupero dei risultati di Yandex e della posizione del risultato
🔗 Numero di pagine del sito in Yandex
Numero di pagine del sito in Yandex
🔗 Scraping della concorrenza per parola chiave da Yandex
Scraping della concorrenza per parola chiave da Yandex
🔗 Ricerca di nicchie libere nel segmento RU di internet
Ricerca di nicchie libere nel segmento RU di internet
Scraper delle posizioni nei motori di ricerca
| Nome dello scraper | Descrizione |
|---|---|
 SE::Google::Position | Controllo delle posizioni del sito per parole chiave in Google: link, elenco di tutte le posizioni |
 SE::Yandex::Position | Controllo delle posizioni del sito per parole chiave in Yandex: link, elenco di tutte le posizioni |
 SE::Bing::Position | Controllo delle posizioni del sito per parole chiave in Bing: link, elenco di tutte le posizioni |
Esempi
🔗 Recupero delle posizioni del sito contemporaneamente per più regioni
Recupero delle posizioni del sito contemporaneamente per più regioni
🔗 Recupero delle posizioni del sito contemporaneamente per più regioni
Recupero delle posizioni del sito contemporaneamente per più regioni
🔗 Panoramica delle opzioni di visualizzazione dei risultati
Panoramica delle opzioni di visualizzazione dei risultati
Scraper dei suggerimenti dei motori di ricerca
| Nome dello scraper | Descrizione |
|---|---|
 SE::Google::Suggest | Scraper dei suggerimenti di Google: numero di risultati per query, suggerimenti alla query, tipo di query |
 SE::Yandex::Suggest | Scraper dei suggerimenti di Yandex: numero di risultati per query, suggerimenti alla query |
 SE::Bing::Suggest | Scraper dei suggerimenti di Bing: numero di risultati per query, suggerimenti alla query |
 SE::Aol::Suggest | Scraper dei suggerimenti di Aol: numero di risultati per query, suggerimenti alla query |
 SE::Yahoo::Suggest | Scraper dei suggerimenti di Yahoo: numero di risultati per query, suggerimenti alla query |
 SE::Youtube::Suggest | Scraper dei suggerimenti di Youtube: suggerimenti alla query |
Esempi
🔗 Preset per lo scraping di suggerimenti con possibilità di escludere dai risultati i suggerimenti contenenti stop-word
Preset per lo scraping di suggerimenti con possibilità di escludere dai risultati i suggerimenti contenenti stop-word
Scraper di keyword
| Nome dello scraper | Descrizione |
|---|---|
 SE::Google::Trends | Scraper delle keyword in tendenza secondo Google |
 SE::Yandex::WordCraft | Scraper delle query degli utenti e dei siti popolari nella ricerca Yandex con Yandex Webmaster WordCraft |
 SE::Yandex::Wordstat | Scraper di parole chiave e statistiche di visualizzazione dal servizio wordstat.yandex.ru |
 SE::Yandex::Wordstat::ByDate | Scraper delle statistiche di visualizzazione di Yandex WordStat per mesi o settimane, statistiche delle parole chiave |
 Rank::Bukvarix::Domain | Raccolta di parole chiave per dominio da Bukvarix: parola chiave, frequenza, posizione |
 Rank::Bukvarix::Keyword | Raccolta di parole chiave per keyword da Bukvarix: parola chiave, frequenza, posizione |
 Rank::Ahrefs::KeywordDifficulty | Difficoltà delle parole chiave, parole chiave, numero di parole chiave |
 Rank::Ahrefs::KeywordGenerator | Raccolta di parole chiave Ahrefs: idee per parole chiave, domande con parole chiave |
 SE::Google::KeywordPlanner | Raccolta di suggerimenti, parole chiave, concorrenza, offerte min. e max. |
 SE::Yandex::Direct | Numero di annunci per una query specifica, titolo, testo e dominio, link, anchor, tag |
Esempi
🔗 Stagionalità delle parole chiave
Stagionalità delle parole chiave
🔗 Valutazione della frequenza tramite WordStat
Valutazione della frequenza tramite WordStat
🔗 Scraping di Wordstat in profondità
Scraping di Wordstat in profondità
🔗 Recupero dell'elenco delle categorie di Google Trends
Recupero dell'elenco delle categorie di Google Trends
🔗 Formattazione della data di Google Trends
Formattazione della data di Google Trends
Registrazione di account
| Nome dello scraper | Descrizione |
|---|---|
 SE::Yandex::Register | Registrazione di account in Yandex |
Esempi
🔗 Recupero dell'elenco completo delle regioni di Yandex
Recupero dell'elenco completo delle regioni di Yandex
🔗 Automazione della registrazione degli account Yandex
Automazione della registrazione degli account Yandex
Scraper dei parametri di siti e domini
| Nome dello scraper | Descrizione |
|---|---|
 SE::Google::TrustCheck | Controllo del trust del sito |
 SE::Google::Compromised | Controllo della presenza della scritta This site may be hacked |
 SE::Google::SafeBrowsing | Controllo del dominio nella blacklist di Google |
 SE::Yandex::SafeBrowsing | Controllo del dominio nella blacklist di Yandex |
 SE::Yandex::SQI | Controllo dell'Indice di qualità del sito in Yandex |
 Net::Whois | Determina se il dominio è registrato o meno, la data di creazione del dominio e la data di fine registrazione |
 Net::Dns | Lo scraper risolve i domini in indirizzi IP |
 Rank::Cms | Determina tutti i forum popolari, blog, CMS, guestbook, wiki e molti altri tipi di motori |
 Rank::Archive | Scraper della data della prima e dell'ultima memorizzazione nella cache del sito nell'archivio web |
 Rank::MajesticSEO | Scraper del numero di backlink dal servizio majesticseo.com |
 Rank::Mustat | Valutazione del traffico sul sito, nonché costo e rating del dominio |
 Rank::Social::Signal | Scraper di segnali sociali |
 Rank::Curlie | Controllo della presenza del sito nella directory Curlie (analogo di DMOZ) |
 Rank::Ahrefs | Scraper di ahrefs.com |
 Rank::KeysSo | Scraper di keys.so |
 Rank::MOZ | Scraper di MOZ |
 SecurityTrails::Ip | Raccoglie domini per IP |
 SecurityTrails::Domain | Scraper di SecurityTrails |
Esempi
🔗 Scraping di domini tematici per parola chiave da Google e recupero di vari parametri del dominio
Scraping di domini tematici per parola chiave da Google e recupero di vari parametri del dominio
🔗 Informazioni sul sito
Informazioni sul sito
🔗 Net::Whois selezione di dati arbitrari
Net::Whois selezione di dati arbitrari
🔗 Ricezione di notifiche su Telegram sulla scadenza della registrazione dei domini
Ricezione di notifiche su Telegram sulla scadenza della registrazione dei domini
🔗 Raccolta di database di indirizzi e-mail
Raccolta di database di indirizzi e-mail
🔗 Determinazione dell'elenco dei domini su un IP
Determinazione dell'elenco dei domini su un IP
🔗 Determinazione del CMS per 1.000.000 di domini in 15 ore
Determinazione del CMS per 1.000.000 di domini in 15 ore
🔗 Scraping di domini di siti per un determinato CMS
Scraping di domini di siti per un determinato CMS
🔗 Siti WordPress con iscrizioni
Siti WordPress con iscrizioni
Scraper di vari servizi
| Nome dello scraper | Descrizione |
|---|---|
| SE::Yandex::Register | Permette di registrare account in Yandex |
 SE::Bing::Translator | Traduttore tramite il servizio www.bing.com/translator/ |
 SE::Google::Translate | Traduttore Google |
 SE::Yandex::Translate | Traduttore Yandex |
 SE::Bing::Images | Scraper di immagini dal motore di ricerca Bing |
 SE::Google::Images | Scraper di immagini per parole chiave Google |
 SE::Google::ByImage | Ricerca di immagini tramite link |
 SE::Yandex::Images | Scraper di immagini per parole chiave Yandex |
 SE::Yandex::ByImage | Scraper di immagini tramite link da Yandex |
 SE::DuckDuckGo::Images | Scraper di immagini da DuckDuckGo |
 SE::Dogpile::Images | Scraper di immagini da Dogpile |
 Util::AntiGate | Riconoscimento captcha tramite il servizio AntiGate |
 Util::YandexRecognize | Riconoscimento captcha di Yandex |
 Util::ReCaptcha2 | Riconoscimento recaptcha dalle risorse Anti-captcha.com, Rucaptcha.com, Capmonster, Capmonster.cloud, Xevil, 2captcha, R.I.P.captcha |
 SEO::Ping | Invio massivo di query Ping ai servizi che supportano Weblog API (Google Blog Search, Feed Burner, Ping-o-Matic, ecc.) |
 Check::RosKomNadzor | Controllo del sito nel database di Roskomnadzor |
 SE::Yandex::Speller | Controllo delle pagine per errori nel testo tramite Yandex.Speller |
 GooglePlay::Apps | Scraper di applicazioni Google Play |
 Social::Instagram::Post | Scraper di dati sui post in Instagram |
 Social::Instagram::Profile | Scraper di dati dai profili in Instagram |
 Social::Instagram::Tag | Scraper di post per tag in Instagram |
 Social::Instagram::Geo | Scraper di post in Instagram nella location specificata |
 Telegram::GroupScraper | Scraper di dati da gruppi pubblici in Telegram |
 API::Server::Redis | Lavoro con A-Parser tramite Redis |
 SE::Google::Cache | Controllo della presenza di pagine nella cache di Google |
| Social::Instagram::Geo | Scraper di post in Instagram nella location specificata |
 DeepL::Translator | Traduttore di testo tramite il servizio www.deepl.com |
 CoinMarketCap::LastPrice | Scraper del negozio CoinMarketCap: nome del token, prezzo attuale in USD |
Esempi
🔗 Automazione della registrazione degli account Yandex
Automazione della registrazione degli account Yandex
🔗 Confronto della velocità dei traduttori
Confronto della velocità dei traduttori
🔗 Utilizzo di file interi come query
Utilizzo di file interi come query
🔗 Caricamento di file da una directory per la traduzione in DeepL
Caricamento di file da una directory per la traduzione in DeepL
🔗 Download di immagini di risoluzione e dimensioni specificate
Download di immagini di risoluzione e dimensioni specificate
🔗 Creazione di scraper JS. Lavoro con CAPTCHA
Creazione di scraper JS. Lavoro con CAPTCHA
🔗 Creazione di scraper JS. Lavoro con ReCaptcha2
Creazione di scraper JS. Lavoro con ReCaptcha2
🔗 Esempio di utilizzo di SEO::Ping
Esempio di utilizzo di SEO::Ping
🔗 Scraper di link di località per Social::Instagram::Geo
Scraper di link di località per Social::Instagram::Geo
🔗 Scraping di informazioni sugli utenti di Instagram
Scraping di informazioni sugli utenti di Instagram
🔗 Scraping di utenti di gruppi pubblici in Telegram
Scraping di utenti di gruppi pubblici in Telegram
Scraper di negozi
| Nome dello scraper | Descrizione |
|---|---|
 Shop::Amazon | Scraper dei risultati di ricerca amazon.com |
 Shop::Yandex::Market | Scraper Yandex.Market |
 Shop::AliExpress | Scraper dei risultati di ricerca Shop::AliExpress |
 Shop::eBay | Scraper dei risultati di ricerca Ebay |
 Shop::Wildberries::ProductsList | Scraper dell'elenco prodotti Wildberries |
 Shop::Wildberries::ProductInfo | Scraper della pagina prodotto Wildberries |
 Shop::Wildberries::Suggest | Scraper dei suggerimenti di ricerca Wildberries |
| Shop::Yandex::Market | Scraper di prodotti da YANDEX.MARKET |
Esempi
🔗 Scraping di prodotti da un sito
Scraping di prodotti da un sito
Scraper di mappe
| Nome dello scraper | Descrizione |
|---|---|
 Maps::Google | Scraper di Google Maps: nome dell'organizzazione, indirizzo e coordinate, rating, numero di recensioni e politica dei prezzi, sito, telefono, foto |
 Maps::Yandex | Scraper di Yandex Maps: nome dell'organizzazione, indirizzo e coordinate, rating, numero di recensioni e politica dei prezzi, sito, telefono, foto, social network |
Esempi
🔗 Scraping di Google Maps per raccogliere tutte le organizzazioni in una determinata area
Scraping di Google Maps per raccogliere tutte le organizzazioni in una determinata area
Scraper di contenuti
| Nome dello scraper | Descrizione |
|---|---|
 Check::BackLink | Controlla la presenza del tuo link (o dei tuoi link) in un database di link |
 HTML::LinkExtractor | Scraper di link esterni ed interni dal sito specificato, può navigare tra i link interni fino al livello scelto |
 HTML::ArticleExtractor | Scraper di articoli |
 HTML::TextExtractor | Scraper di blocchi di testo |
 HTML::TextExtractor::LangDetect | Determinazione della lingua della pagina, senza l'uso di servizi di terze parti |
 HTML::EmailExtractor | Scraping di indirizzi e-mail dalle pagine dei siti |
 Net::HTTP | Scarica la pagina specificata, supporta lo scraping multipagina |
Esempi
🔗 Verifica della presenza di link alla pagina nella cache di Yandex
Verifica della presenza di link alla pagina nella cache di Yandex
🔗 Scraping di un sito in profondità basato sullo scraper HTML::LinkExtractor
Scraping di un sito in profondità basato sullo scraper HTML::LinkExtractor
🔗 Video scraping della risorsa Booking.com utilizzando Net::HTTP
Video scraping della risorsa Booking.com utilizzando Net::HTTP
🔗 Controllo periodico dei backlink con aggiunta dei risultati in una tabella
Controllo periodico dei backlink con aggiunta dei risultati in una tabella
🔗 Scraping di un sito in profondità basato sullo scraper HTML::LinkExtractor
Scraping di un sito in profondità basato sullo scraper HTML::LinkExtractor
🔗 Raccolta di argomenti intercollegati
Raccolta di argomenti intercollegati
🔗 Ricerca di sottodomini di un sito
Ricerca di sottodomini di un sito
🔗 Scraping di siti e salvataggio di link alle immagini
Scraping di siti e salvataggio di link alle immagini
🔗 Generazione di sitemap.xml utilizzando le funzionalità di JavaScript
Generazione di sitemap.xml utilizzando le funzionalità di JavaScript
🔗 Recupero delle pagine del sito e verifica dell'indicizzazione in Google e Yandex
Recupero delle pagine del sito e verifica dell'indicizzazione in Google e Yandex
🔗 Analisi della velocità di risposta delle pagine sul sito
Analisi della velocità di risposta delle pagine sul sito
🔗 Scraping di e-mail dalle pagine dei contatti
Scraping di e-mail dalle pagine dei contatti
🔗 Verifica della lunghezza del testo sulle pagine
Verifica della lunghezza del testo sulle pagine
🔗 Traslitterazione
Traslitterazione