SE::AOL - Scraper dei risultati di ricerca search.aol.com
Panoramica dello scraper
Lo scraper AOL è uno scraper dei risultati di ricerca di AOL. Grazie allo scraper AOL, potrai ottenere enormi database di link pronti per un ulteriore utilizzo. Puoi utilizzare le query nello stesso formato in cui le inserisci nella barra di ricerca di AOL, inclusi gli operatori di ricerca (contains, intitle, language, site, ecc.). Maggiori dettagli sulla pagina ufficiale AOL Search FAQs.
La funzionalità di A-Parser consente di salvare le impostazioni di scraping dello scraper AOL per un uso futuro (preset), impostare pianificazioni di scraping e molto altro. Puoi utilizzare la generazione automatica delle query, la sostituzione di sotto-query da file, l'iterazione di combinazioni alfanumeriche e liste per ottenere il massimo numero possibile di risultati.
Il salvataggio dei risultati è possibile nel formato e nella struttura necessari, grazie al potente motore di template integrato Template Toolkit che consente di applicare logica aggiuntiva ai risultati e di esportare i dati in vari formati, tra cui JSON, SQL e CSV.
Dati raccolti
- Numero di risultati per query
- Link, anchor e snippet dai risultati di ricerca
Funzionalità
Lo scraper del motore di ricerca AOL possiede le seguenti funzionalità e impostazioni:
- Supporto per tutti gli operatori di ricerca AOL (site:, prefer:, url:, feed:, ecc.). Maggiori dettagli sulla pagina ufficiale AOL Search FAQs
- Estrae il numero massimo di risultati forniti da AOL - 100 pagine da 20 elementi per ogni pagina dei risultati
- Supporto per i periodi dei risultati (Anytime, Day, Week, Month)
Casi d'uso
- Raccolta di database di link - per A-Poster, XRumer, AllSubmitter, ecc.
- Valutazione della concorrenza per le keyword
- Scraping dei risultati di Google USA
- Ricerca di backlink (menzioni) di siti
- Verifica dell'indicizzazione dei siti
- Ricerca di siti vulnerabili
- Qualsiasi altro scenario che implichi lo scraping di AOL in una forma o nell'altra
Query
Come query, è necessario specificare frasi di ricerca, esattamente come se venissero inserite direttamente nel modulo di ricerca di AOL, ad esempio:
test
buy house
site:www.realtor.com
feed:football
a-parser loc:ca
Sostituzioni nelle query
Puoi utilizzare le macro integrate per moltiplicare le query, ad esempio se vogliamo ottenere un database molto grande di forum, indichiamo alcune query principali in diverse lingue:
forum
forum
foro
论坛
Nel formato della query indichiamo l'iterazione dei caratteri da a a zzzz, questo metodo permette di ruotare al massimo i risultati di ricerca e ottenere molti nuovi risultati unici:
$query {az:a:zzzz}
Questa macro creerà 475254 query aggiuntive per ogni query di ricerca iniziale, il che darà un totale di 4 x 475254 = 1901016 query di ricerca, una cifra impressionante, ma non è affatto un problema per A-Parser. Alla velocità di 2000 query al minuto, tale attività verrà elaborata in sole 16 ore.
Utilizzo degli operatori
Puoi utilizzare gli operatori di ricerca nel formato della query, in questo modo verranno aggiunti automaticamente a ogni query della tua lista:
site:$query
Esempi di output dei risultati
A-Parser supporta la formattazione flessibile dei risultati grazie al motore di template integrato Template Toolkit, che gli consente di produrre risultati in forma libera o strutturata, come CSV o JSON
Esportazione della lista di link
Link + anchor + snippet con posizione
Output di link, anchor e snippet in una tabella CSV
Salvataggio delle parole chiave correlate
Concorrenza delle parole chiave
Verifica dell'indicizzazione dei link
Salvataggio in formato SQL
Dump dei risultati in JSON
Elaborazione dei risultati
A-Parser consente di elaborare i risultati direttamente durante lo scraping, in questa sezione abbiamo riportato i casi più popolari per lo scraper AOL
Deduplicazione dei link
Deduplicazione dei link per dominio
Estrazione dei domini
Rimozione dei tag da anchor e snippet
Filtrazione dei link per inclusione
Impostazioni possibili
| Nome parametro | Valore predefinito | Descrizione |
|---|---|---|
| Pages count | 5 | Numero di pagine da sottoporre a scraping (da 1 a 100) |
| Period | Anytime | Periodo dei risultati (Anytime, Day, Week, Month) |
| AOL domain | search.aol.com | Scelta del paese dei risultati di ricerca (search.aol.com, search.aol.co.uk, recherche.aol.fr, suche.aol.de) |