Scraper JS: esempi
Qui sono raccolti solo alcuni esempi di utilizzo degli scraper JavaScript che ne dimostrano le funzionalità principali. Molti altri esempi sono pubblicati nel Catalogo degli scraper
🔗 JS::TitleParser
Scraping del tag HTML title su una pagina arbitraria
🔗 JS::TextFromSE
Unione di più scraper integrati in uno solo
🔗 Download di file
Esempio di salvataggio di file di qualsiasi dimensione direttamente su disco
🔗 Gestione dei CAPTCHA
Esempio di scraper JS per lavorare con i captcha
🔗 Gestione di ReCaptcha2
Esempio di scraper JS per lavorare con i recaptcha
🔗 Lavorare con scraper pronti all'uso
Esempio di ricezione dei risultati da uno scraper pronto all'uso all'interno di uno scraper JS
🔗 Lavorare con il database SQLite
Esempio di creazione di una tabella, inserimento e selezione dei dati
🔗 Lavorare con il database MySQL
Esempio di lavoro con il modulo mysql2, questo scraper raccoglie link dai risultati di Google e li scrive nel database
🔗 Navigazione tra le pagine
Esempio di scraping di un sito su richiesta con navigazione tra le pagine
🔗 Filtraggio per molteplici criteri
Esempio di filtraggio delle pagine per un gran numero di criteri, viene utilizzato fs per leggere il file dei criteri
🔗 Filtraggio delle immagini in base al loro contenuto
Esempio di utilizzo di Google Vision per determinare il contenuto delle immagini
🔗 Pubblicazione su blog Wordpress
Pubblicazione di messaggi su blog Wordpress tramite tecnologia xmlrpc
🔗 Invio di email
Esempio di lavoro con nodemailer (invio di email da uno scraper JS). Viene utilizzato Yandex SMTP.
🔗 Creazione di screenshot delle pagine
Dimostrazione del lavoro con puppeteer (Chrome) sull'esempio della creazione di screenshot di siti
🔗 Notifiche Telegram
Ricezione di notifiche su Telegram sulla scadenza della registrazione dei domini