Overzicht en toepassing
Een lijst per onderwerp van alle bestaande ingebouwde scrapers in A-Parser met beschrijvingen en links naar hun pagina's.
Scrapers van zoekmachines
| Naam van de scraper | Beschrijving |
|---|---|
 SE::Google | Scraping van alle gegevens uit de Google-zoekresultaten: links, ankerteksten, snippets, gerelateerde zoekwoorden, scraping van advertentieblokken. Multithreading, ReCaptcha-omzeiling |
 SE::Yandex | Scraping van alle gegevens uit de Yandex-zoekresultaten: links, ankerteksten, snippets, gerelateerde zoekwoorden, scraping van advertentieblokken. Maximale scrapingdiepte |
 SE::AOL | Scraping van alle gegevens uit de AOL-zoekresultaten: links, ankerteksten, snippets |
 SE::Bing | Scraping van alle gegevens uit de Bing-zoekresultaten: links, ankerteksten, snippets, gerelateerde zoekwoorden, maximale scrapingdiepte |
 SE::Baidu | Scraping van alle gegevens uit de Baidu-zoekresultaten: links, ankerteksten, snippets, gerelateerde zoekwoorden |
| SE::Baidu | Scraping van alle gegevens uit de Baidu-zoekresultaten: links, ankerteksten, snippets, gerelateerde zoekwoorden |
 SE::Dogpile | Scraping van alle gegevens uit de Dogpile-zoekresultaten: links, ankerteksten, snippets, gerelateerde zoekwoorden |
 SE::DuckDuckGo | Scraping van alle gegevens uit de DuckDuckGo-zoekresultaten: links, ankerteksten, snippets |
 SE::Seznam | Scraper voor de Tsjechische zoekmachine seznam.cz: links, ankerteksten, snippets, gerelateerde zoekwoorden |
 SE::Yahoo | Scraping van alle gegevens uit de Yahoo-zoekresultaten: links, ankerteksten, snippets, gerelateerde zoekwoorden, maximale scrapingdiepte |
 SE::Youtube | Scraping van gegevens uit de YouTube-zoekresultaten: links, titel, beschrijving, gebruikersnaam, link naar preview-afbeelding, aantal weergaven, videolengte |
 SE::Ask | Scraper voor Amerikaanse Google-zoekresultaten via Ask.com: links, ankerteksten, snippets, gerelateerde zoekwoorden |
 SE::Rambler | Scraping van alle gegevens uit de Rambler-zoekresultaten: links, ankerteksten, snippets |
 SE::Startpage | Scraping van alle gegevens uit de Startpage-zoekresultaten: links, ankerteksten, snippets |
Voorbeelden
🔗 Indexatie van pagina's in Google en Yandex
Indexatie van pagina's in Google en Yandex
🔗 Video Gegevensextractie van thematische domeinen op trefwoord uit Google
Video Gegevensextractie van thematische domeinen op trefwoord uit Google
🔗 Vragen en antwoorden uit Google-zoekresultaten
Vragen en antwoorden uit Google-zoekresultaten
🔗 Gegevensextractie van thematische domeinen op trefwoord uit Google en het verkrijgen van diverse domeinparameters
Gegevensextractie van thematische domeinen op trefwoord uit Google en het verkrijgen van diverse domeinparameters
🔗 Google Nieuws scrapen met datum en deze omzetten
Google Nieuws scrapen met datum en deze omzetten
🔗 Alleen snippets scrapen uit Google
Alleen snippets scrapen uit Google
🔗 Spellingcontrole in Google
Spellingcontrole in Google
🔗 Scrapen van links en ankerteksten uit Google naar CSV
Scrapen van links en ankerteksten uit Google naar CSV
🔗 Tekst scrapen uit de Google-zoekmachine met behulp van een takenketen
Tekst scrapen uit de Google-zoekmachine met behulp van een takenketen
🔗 Scraper voor Yandex-cache
Scraper voor Yandex-cache
🔗 Alleen snippets scrapen uit Yandex
Alleen snippets scrapen uit Yandex
🔗 Yandex-zoekresultaten en positienummer van het resultaat ophalen
Yandex-zoekresultaten en positienummer van het resultaat ophalen
🔗 Aantal pagina's van een website in Yandex
Aantal pagina's van een website in Yandex
🔗 Concurrentie op trefwoord scrapen uit Yandex
Concurrentie op trefwoord scrapen uit Yandex
🔗 Zoeken naar onbezette niches in het RU-segment van het internet
Zoeken naar onbezette niches in het RU-segment van het internet
Scrapers van posities in zoekmachines
| Naam van de scraper | Beschrijving |
|---|---|
 SE::Google::Position | Websiteposities controleren op trefwoorden in Google: links, lijst met alle posities |
 SE::Yandex::Position | Websiteposities controleren op trefwoorden in Yandex: links, lijst met alle posities |
 SE::Bing::Position | Websiteposities controleren op trefwoorden in Bing: links, lijst met alle posities |
Voorbeelden
🔗 Websiteposities ophalen voor meerdere regio's tegelijk
Websiteposities ophalen voor meerdere regio's tegelijk
🔗 Websiteposities ophalen voor meerdere regio's tegelijk
Websiteposities ophalen voor meerdere regio's tegelijk
🔗 Overzicht van resultaatweergave-opties
Overzicht van resultaatweergave-opties
Scrapers van suggesties van zoekmachines
| Naam van de scraper | Beschrijving |
|---|---|
 SE::Google::Suggest | Scraper voor Google-suggesties: aantal resultaten per zoekopdracht, suggesties bij de zoekopdracht, type zoekopdracht |
 SE::Yandex::Suggest | Scraper voor Yandex-suggesties: aantal resultaten per zoekopdracht, suggesties bij de zoekopdracht |
 SE::Bing::Suggest | Scraper voor Bing-suggesties: aantal resultaten per zoekopdracht, suggesties bij de zoekopdracht |
 SE::Aol::Suggest | Scraper voor AOL-suggesties: aantal resultaten per zoekopdracht, suggesties bij de zoekopdracht |
 SE::Yahoo::Suggest | Scraper voor Yahoo-suggesties: aantal resultaten per zoekopdracht, suggesties bij de zoekopdracht |
 SE::Youtube::Suggest | Scraper voor YouTube-suggesties: suggesties bij de zoekopdracht |
Voorbeelden
🔗 Preset voor het scrapen van suggesties met de mogelijkheid om suggesties met stopwoorden uit te sluiten
Preset voor het scrapen van suggesties met de mogelijkheid om suggesties met stopwoorden uit te sluiten
Scrapers van zoekwoorden
| Naam van de scraper | Beschrijving |
|---|---|
 SE::Google::Trends | Scraper voor trending zoekwoorden volgens Google |
 SE::Yandex::WordCraft | Scraper voor gebruikersvragen en populaire sites in Yandex-zoekopdrachten met Yandex Webmaster WordCraft |
 SE::Yandex::Wordstat | Scraper voor trefwoorden en vertoningsstatistieken van de dienst wordstat.yandex.ru |
 SE::Yandex::Wordstat::ByDate | Scraper voor Yandex WordStat-vertoningsstatistieken per maand of week, trefwoordstatistieken |
 Rank::Bukvarix::Domain | Trefwoorden verzamelen per domein uit Bukvarix: trefwoord, frequentie, positie |
 Rank::Bukvarix::Keyword | Trefwoorden verzamelen per zoekwoord uit Bukvarix: trefwoord, frequentie, positie |
 Rank::Ahrefs::KeywordDifficulty | Moeilijkheidsgraad van trefwoorden, trefwoorden, aantal trefwoorden |
 Rank::Ahrefs::KeywordGenerator | Ahrefs trefwoorden verzamelen: trefwoordideeën, vragen met trefwoorden |
 SE::Google::KeywordPlanner | Verzamelen van suggesties, trefwoorden, concurrentie, min. en max. biedingen |
 SE::Yandex::Direct | Aantal advertenties voor een specifieke zoekopdracht, titel, tekst en domein, links, ankerteksten, tags |
Voorbeelden
🔗 Seizoensgebondenheid van trefwoorden
Seizoensgebondenheid van trefwoorden
🔗 Frequentie-inschatting via WordStat
Frequentie-inschatting via WordStat
🔗 Wordstat in de diepte scrapen
Wordstat in de diepte scrapen
🔗 Lijst met Google Trends-categorieën ophalen
Lijst met Google Trends-categorieën ophalen
🔗 Datumformattering in Google Trends
Datumformattering in Google Trends
Registratie van accounts
| Naam van de scraper | Beschrijving |
|---|---|
 SE::Yandex::Register | Registratie van accounts in Yandex |
Voorbeelden
🔗 Volledige lijst met Yandex-regio's ophalen
Volledige lijst met Yandex-regio's ophalen
🔗 Automatisering van Yandex-accountregistratie
Automatisering van Yandex-accountregistratie
Scrapers van site- en domeinparameters
| Naam van de scraper | Beschrijving |
|---|---|
 SE::Google::TrustCheck | Website controleren op trust |
 SE::Google::Compromised | Controleren op de aanwezigheid van de melding 'This site may be hacked' |
 SE::Google::SafeBrowsing | Domein controleren in de Google blacklist |
 SE::Yandex::SafeBrowsing | Domein controleren in de Yandex blacklist |
 SE::Yandex::SQI | Site Quality Index (SQI) controleren in Yandex |
 Net::Whois | Bepaalt of een domein geregistreerd is, de aanmaakdatum van het domein en de einddatum van de registratie |
 Net::Dns | Scraper resolveert domeinen naar IP-adressen |
 Rank::Cms | Identificeert alle populaire forums, blogs, CMS, gastenboeken, wiki's en vele andere types engines |
 Rank::Archive | Scraper voor de datum van de eerste en laatste caching van een site in het webarchief |
 Rank::MajesticSEO | Scraper voor het aantal backlinks van de dienst majesticseo.com |
 Rank::Mustat | Schatting van het verkeer op de site, evenals de waarde en rating van het domein |
 Rank::Social::Signal | Scraper voor sociale signalen |
 Rank::Curlie | Controleren of een site aanwezig is in de Curlie-catalogus (analoog aan DMOZ) |
 Rank::Ahrefs | Scraper voor ahrefs.com |
 Rank::KeysSo | Scraper voor keys.so |
 Rank::MOZ | Scraper voor MOZ |
 SecurityTrails::Ip | Verzamelt domeinen op basis van IP |
 SecurityTrails::Domain | Scraper voor SecurityTrails |
Voorbeelden
🔗 Gegevensextractie van thematische domeinen op trefwoord uit Google en het verkrijgen van diverse domeinparameters
Gegevensextractie van thematische domeinen op trefwoord uit Google en het verkrijgen van diverse domeinparameters
🔗 Informatie over de website
Informatie over de website
🔗 Net::Whois: willekeurige gegevens selecteren
Net::Whois: willekeurige gegevens selecteren
🔗 Telegram-meldingen ontvangen over het verlopen van domeinregistraties
Telegram-meldingen ontvangen over het verlopen van domeinregistraties
🔗 Verzamelen van een e-mailadressenbestand
Verzamelen van een e-mailadressenbestand
🔗 Lijst met domeinen op een IP bepalen
Lijst met domeinen op een IP bepalen
🔗 CMS bepalen voor 1.000.000 domeinen in 15 uur
CMS bepalen voor 1.000.000 domeinen in 15 uur
🔗 Domeinen scrapen van websites met een specifiek CMS
Domeinen scrapen van websites met een specifiek CMS
🔗 WordPress-sites met abonnementen
WordPress-sites met abonnementen
Scrapers van diverse diensten
| Naam van de scraper | Beschrijving |
|---|---|
| SE::Yandex::Register | Maakt het mogelijk om accounts te registreren in Yandex |
 SE::Bing::Translator | Vertaler via de dienst www.bing.com/translator/ |
 SE::Google::Translate | Google Vertalen |
 SE::Yandex::Translate | Yandex Vertalen |
 SE::Bing::Images | Afbeeldingenscraper van de Bing-zoekmachine |
 SE::Google::Images | Afbeeldingenscraper op basis van trefwoorden van Google |
 SE::Google::ByImage | Afbeeldingen zoeken via een link |
 SE::Yandex::Images | Afbeeldingenscraper op basis van trefwoorden van Yandex |
 SE::Yandex::ByImage | Afbeeldingenscraper via een link uit Yandex |
 SE::DuckDuckGo::Images | Afbeeldingenscraper uit DuckDuckGo |
 SE::Dogpile::Images | Afbeeldingenscraper uit Dogpile |
 Util::AntiGate | Captcha-herkenning via de AntiGate-dienst |
 Util::YandexRecognize | Captcha-herkenning van Yandex |
 Util::ReCaptcha2 | ReCaptcha-herkenning van bronnen zoals Anti-captcha.com, Rucaptcha.com, Capmonster, Capmonster.cloud, Xevil, 2captcha, R.I.P.captcha |
 SEO::Ping | Massa-verzending van Ping-verzoeken naar diensten die de Weblog API ondersteunen (Google Blog Search, Feed Burner, Ping-o-Matic, etc.) |
 Check::RosKomNadzor | Website controleren in de database van Roskomnadzor |
 SE::Yandex::Speller | Pagina's controleren op tekstfouten via Yandex.Speller |
 GooglePlay::Apps | Scraper voor Google Play-apps |
 Social::Instagram::Post | Scraper voor gegevens over Instagram-posts |
 Social::Instagram::Profile | Scraper voor gegevens uit Instagram-profielen |
 Social::Instagram::Tag | Scraper voor posts op basis van tags in Instagram |
 Social::Instagram::Geo | Scraper voor posts in Instagram op een opgegeven locatie |
 Telegram::GroupScraper | Scraper voor gegevens uit publieke groepen in Telegram |
 API::Server::Redis | Werken met A-Parser via Redis |
 SE::Google::Cache | Controleren op de aanwezigheid van pagina's in de Google-cache |
| Social::Instagram::Geo | Scraper voor posts in Instagram op een opgegeven locatie |
 DeepL::Translator | Tekstvertaler via de dienst www.deepl.com |
 CoinMarketCap::LastPrice | Scraper voor de CoinMarketCap-winkel: tokennaam, huidige prijs in USD |
Voorbeelden
🔗 Automatisering van Yandex-accountregistratie
Automatisering van Yandex-accountregistratie
🔗 Snelheidsvergelijking van vertalers
Snelheidsvergelijking van vertalers
🔗 Volledige bestanden gebruiken als zoekopdrachten
Volledige bestanden gebruiken als zoekopdrachten
🔗 Bestanden uit een map laden voor vertaling in DeepL
Bestanden uit een map laden voor vertaling in DeepL
🔗 Afbeeldingen downloaden met opgegeven resolutie en grootte
Afbeeldingen downloaden met opgegeven resolutie en grootte
🔗 JS-scrapers maken. Werken met CAPTCHA
JS-scrapers maken. Werken met CAPTCHA
🔗 JS-scrapers maken. Werken met ReCaptcha2
JS-scrapers maken. Werken met ReCaptcha2
🔗 Voorbeeld van werken met SEO::Ping
Voorbeeld van werken met SEO::Ping
🔗 Scraper voor locatie-links voor Social::Instagram::Geo
Scraper voor locatie-links voor Social::Instagram::Geo
🔗 Scrapen van informatie over Instagram-gebruikers
Scrapen van informatie over Instagram-gebruikers
🔗 Scrapen van gebruikers uit openbare Telegram-groepen
Scrapen van gebruikers uit openbare Telegram-groepen
Scrapers van winkels
| Naam van de scraper | Beschrijving |
|---|---|
 Shop::Amazon | Scraper voor amazon.com zoekresultaten |
 Shop::Yandex::Market | Scraper voor Yandex.Market |
 Shop::AliExpress | Scraper voor Shop::AliExpress zoekresultaten |
 Shop::eBay | Scraper voor eBay zoekresultaten |
 Shop::Wildberries::ProductsList | Scraper voor Wildberries productlijsten |
 Shop::Wildberries::ProductInfo | Scraper voor Wildberries productpagina's |
 Shop::Wildberries::Suggest | Scraper voor Wildberries zoeksuggesties |
| Shop::Yandex::Market | Scraper voor producten van YANDEX.MARKET |
Voorbeelden
🔗 Producten scrapen van een website
Producten scrapen van een website
Scrapers van kaarten
| Naam van de scraper | Beschrijving |
|---|---|
 Maps::Google | Scraper voor Google Maps: organisatienaam, adres en coördinaten, rating, aantal reviews en prijsbeleid, website, telefoon, foto's |
 Maps::Yandex | Scraper voor Yandex Maps: organisatienaam, adres en coördinaten, rating, aantal reviews en prijsbeleid, website, telefoon, foto's, sociale netwerken |
Voorbeelden
🔗 Google Maps scrapen om alle organisaties in een bepaald gebied te verzamelen
Google Maps scrapen om alle organisaties in een bepaald gebied te verzamelen
Scrapers van content
| Naam van de scraper | Beschrijving |
|---|---|
 Check::BackLink | Controleert de aanwezigheid van uw link(s) in een database met links |
 HTML::LinkExtractor | Scraper voor externe en interne links van een opgegeven website, kan interne links volgen tot een gekozen niveau |
 HTML::ArticleExtractor | Scraper voor artikelen |
 HTML::TextExtractor | Scraper voor tekstblokken |
 HTML::TextExtractor::LangDetect | Bepaling van de paginataal, zonder gebruik van externe diensten |
 HTML::EmailExtractor | Gegevensextractie van e-mailadressen van websitepagina's |
 Net::HTTP | Downloadt de opgegeven pagina, ondersteunt scraping van meerdere pagina's |
Voorbeelden
🔗 Controleren of er links naar een pagina zijn in de Yandex-cache
Controleren of er links naar een pagina zijn in de Yandex-cache
🔗 Website in de diepte scrapen op basis van de HTML::LinkExtractor scraper
Website in de diepte scrapen op basis van de HTML::LinkExtractor scraper
🔗 Video gegevensextractie van Booking.com met behulp van Net::HTTP
Video gegevensextractie van Booking.com met behulp van Net::HTTP
🔗 Periodieke controle van backlinks met toevoeging van resultaten aan een tabel
Periodieke controle van backlinks met toevoeging van resultaten aan een tabel
🔗 Website in de diepte scrapen op basis van de HTML::LinkExtractor scraper
Website in de diepte scrapen op basis van de HTML::LinkExtractor scraper
🔗 Verzamelen van onderling gelinkte topics
Verzamelen van onderling gelinkte topics
🔗 Subdomeinen van een website zoeken
Subdomeinen van een website zoeken
🔗 Websites scrapen en links naar afbeeldingen opslaan
Websites scrapen en links naar afbeeldingen opslaan
🔗 Sitemap.xml genereren met behulp van JavaScript-mogelijkheden
Sitemap.xml genereren met behulp van JavaScript-mogelijkheden
🔗 Websitepagina's ophalen en indexatie in Google en Yandex controleren
Websitepagina's ophalen en indexatie in Google en Yandex controleren
🔗 Analyse van de responstijd van pagina's op een website
Analyse van de responstijd van pagina's op een website
🔗 E-mails scrapen van contactpagina's
E-mails scrapen van contactpagina's
🔗 Tekstlengte op pagina's controleren
Tekstlengte op pagina's controleren
🔗 Transliteratie
Transliteratie