SE::Yahoo - Scraper dei risultati di ricerca Yahoo
Panoramica dello scraper
Scraper della SERP di Yahoo. Grazie allo scraper Yahoo potrai ottenere grandi database di link pronti per un ulteriore utilizzo. Puoi utilizzare le query nello stesso formato in cui le inserisci nella barra di ricerca di Yahoo, inclusi gli operatori di ricerca (site, ip, ecc.).
La funzionalità di A-Parser consente di salvare le impostazioni di scraping dello scraper Yahoo per un uso futuro (preset), impostare pianificazioni di scraping e molto altro. Puoi utilizzare la generazione automatica delle query, la sostituzione di sotto-query da file, l'iterazione di combinazioni alfanumeriche e liste per ottenere il massimo numero possibile di risultati.
Il salvataggio dei risultati è possibile nel formato e nella struttura necessari, grazie al potente motore di modelli integrato Template Toolkit che consente di applicare logica aggiuntiva ai risultati e di esportare i dati in vari formati, inclusi JSON, SQL e CSV.
Dati raccolti
- Link, anchor e snippet dalla SERP
- Elenco di parole chiave correlate (Related keywords)
- Risultati pubblicitari
Funzionalità
- Supporto per tutti gli operatori di ricerca Yahoo (site:, ip:, ecc.)
- Estrae il numero massimo di risultati forniti da Yahoo - 50 pagine da 100 elementi nella SERP
- Può estrarre automaticamente più di 1000 risultati per query - inserendo caratteri aggiuntivi (opzione Parse all results)
- Possibilità di eseguire lo scraping in profondità per parole chiave correlate (Parse related to level)
- Possibilità di ricerca di parole chiave correlate
- Supporta l'indicazione del periodo di pubblicazione
Casi d'uso
- Raccolta di database di link - per A-Poster, XRumer, AllSubmitter, ecc.
- Valutazione della concorrenza per le parole chiave
- Ricerca di backlink (menzioni) di siti
- Verifica dell'indicizzazione dei siti
- Ricerca di siti sullo stesso indirizzo IP
- Ricerca di siti vulnerabili
- Qualsiasi altro scenario che implichi lo scraping di Yahoo in una forma o nell'altra
Query
Come query è necessario indicare frasi di ricerca, esattamente come se venissero inserite direttamente nel modulo di ricerca di Yahoo, ad esempio:
test
finestre Mosca
site:http://lenta.ru
ip:222.36.12.12
Sostituzioni nelle query
Puoi utilizzare i macro integrati per moltiplicare le query, ad esempio se vogliamo ottenere un database molto grande di forum, indichiamo alcune query di base in diverse lingue:
forum
forum
foro
论坛
Nel formato della query indichiamo l'iterazione dei caratteri da a a zzzz, questo metodo permette di ruotare al massimo i risultati di ricerca e ottenere molti nuovi risultati unici:
$query {az:a:zzzz}
Questo macro creerà 475254 query aggiuntive per ogni query di ricerca iniziale, il che in totale darà 4 x 475254 = 1901016 query di ricerca; una cifra impressionante, ma non è affatto un problema per A-Parser. Con una velocità di 2000 query al minuto, tale attività verrà elaborata in sole 16 ore.
Utilizzo degli operatori
Puoi utilizzare gli operatori di ricerca nel formato della query, in questo modo verranno aggiunti automaticamente a ogni query della tua lista:
site:$query
Esempi di output dei risultati
A-Parser supporta la formattazione flessibile dei risultati grazie al motore di modelli integrato Template Toolkit, che gli consente di produrre risultati in forma libera, così come in forma strutturata, ad esempio CSV o JSON
Esportazione della lista di link
Link + anchor + snippet con output della posizione
Output di link, anchor e snippet in una tabella CSV
Salvataggio delle parole chiave correlate
Concorrenza delle parole chiave
Verifica dell'indicizzazione dei link
Salvataggio in formato SQL
Dump dei risultati in JSON
Elaborazione dei risultati
A-Parser consente di elaborare i risultati direttamente durante lo scraping; in questa sezione abbiamo riportato i casi più popolari per lo scraper Yahoo
Deduplicazione dei link
Deduplicazione dei link per dominio
Estrazione dei domini
Rimozione dei tag da anchor e snippet
Filtro dei link per inclusione
Impostazioni possibili
| Nome parametro | Valore predefinito | Descrizione |
|---|---|---|
| Pages count | 5 | Numero di pagine da sottoporre a scraping (da 1 a 50) |
| Serp time | All time | Periodo della SERP (ricerca basata sul tempo, parametro "tbs=": Qualsiasi data / Ultime 24 ore / Ultima settimana / Ultimo mese) |
| Safe Search | Moderate | Scelta dell'opzione di ricerca sicura (Off / Moderate / Strict) |
| Yahoo domain | United States (English) | Scelta del dominio Yahoo |
| Yahoo language | Any | Scelta della lingua di Yahoo, consente di selezionare la lingua di ricerca |
| Yahoo country | Any | Scelta del paese, consente di selezionare il paese in cui verrà effettuata la ricerca |
| Not found is error | ☐ | Considerare l'assenza di risultati come un errore |