SE::Google - Scraper för Googles sökresultat
Översikt över scrapern
Scrapern för Googles sökresultat är en av de mest efterfrågade, tack vare den kan du få enorma databaser med länkar redo för vidare användning. Du kan använda sökfrågor på samma sätt som du skriver in dem i Google, inklusive sökoperatorer (inurl, intitle osv.).
Google-scrapern stöder automatisk multiplikation av sökfrågor, så du kan vara säker på att du får maximalt antal resultat från sökresultaten. Dessutom kan A-Parser automatiskt följa relaterade sökfrågor till ett angivet djup. Tack vare A-Parsers flertrådning kan bearbetningshastigheten nå 3000-7000 sökfrågor per minut, vilket i genomsnitt gör det möjligt att få upp till 500 000 länkar per minut.
Funktionaliteten i A-Parser gör det möjligt att spara inställningar för dataskrapning för framtida bruk (förinställningar), schemalägga dataskrapning och mycket mer. Du kan använda automatisk multiplikation av sökfrågor, infogning av undersökfrågor från filer, generering av alfanumeriska kombinationer och listor för att få största möjliga mängd resultat.
Resultaten kan sparas i det format och den struktur du behöver, tack vare den inbyggda kraftfulla mallmotorn Template Toolkit som gör det möjligt att tillämpa ytterligare logik på resultaten och exportera data i olika format, inklusive JSON, SQL och CSV.
Användningsfall för scrapern
🔗 Dataskrapning av domäner
Dataskrapning av tematiska domäner baserat på nyckelfraser från Google och insamling av olika domänparametrar
🔗 Dataskrapning av Google News
Denna förinställning skrapar Google-nyheter baserat på sökfrågor och samlar in datumen för dessa nyheter
🔗 Kontroll av indexering
Förinställningen kontrollerar indexeringen av webbplatssidor i Google genom att gå igenom en lista med angivna länkar
🔗 Bedömning av konkurrens
Förinställningen fastställer konkurrensen i sökmotorn Google baserat på nyckelord
🔗 Dataskrapning av topp 3-resultat
Förinställningen sparar de tre första snippets från Googles sökresultat
🔗 Frågor och svar
Scraper som samlar in frågor och svar från sektionen People Also Ask
Insamlade data
- Länkar, ankare och snippets från sökresultaten, samt datum från snippet (om tillgängligt)
- Information om flaggor för varje resultat samlas också in, för närvarande stöds följande flaggor: Date, AMP, Image Preview, Video, Rich snippet, Featured snippet
- Förekomst och innehåll i annonsblock, samt deras position på sidan
- Antal resultat för sökfrågan (konkurrens)
- Lista över relaterade sökord (Related keywords)
- Förekomst av ytterligare block på sidan: produktkarusell, videor osv.
- Scrapern samlar även in följande ytterligare data:
- Förekomst av stavfel i sökfrågan och den korrigerade sökfrågan
- Geo-position som Google har fastställt
- Förekomst av AMP-sidor
- Lista över People also ask: frågor, svar, länkar till källor, deras ankare och länkar till media (aktiveras med det separata alternativet Parse People also ask)
- AI-svar (AI overview), dess typ och lista över källor
Funktioner
Scrapern för sökmotorn Google har många funktioner och inställningar:
- stöd för alla Googles sökoperatorer (site:, inurl: osv.)
- angivelse av resultatstorlek (10, 20, 30, 50 eller 100 resultat) och angivelse av antal sidor (från 1 till 10), vid maximala inställningar ger Google mellan 300 och 500 resultat per sökfråga, tack vare multiplikation av sökfrågor kringgår A-Parser enkelt denna begränsning
- möjlighet till automatisk övergång till relaterade sökord
- angivelse av språk och land för sökresultaten, möjlighet att välja lokal Google-domän, samt språk för gränssnittet
- möjlighet att ange geo-lokalisering, vilket gör det möjligt att få exakta lokala sökresultat för vilken plats som helst på jorden
- val mellan desktop eller mobil visning
- möjlighet att välja typ av sökresultat, förutom de vanliga organiska resultaten kan Google-scrapern samla in nyhets-, bok- eller videoresultat
- vid behov kan automatisk igenkänning av ReCaptcha2 anslutas via igenkänningstjänster eller via XEvil/CapMonster
- stöder angivelse av tidsintervall för sökresultat (för all tid eller för ett specifikt intervall från 24 timmar till ett år)
- möjlighet att inaktivera Googles filter för att dölja liknande resultat (filter=)
- möjlighet att ange om sökresultaten ska skrapas om Google meddelar att inget hittades för den angivna sökfrågan och föreslår resultat för en liknande sökfråga
- möjlighet att ställa in antalet People also ask som scrapern ska samla in genom att klicka sig djupare i varje fråga
- möjlighet att samla in taggar
Följande scrapers fungerar baserat på Google-scrapern:
SE::Google::Position - fastställande av positioner för valfria webbplatser i sökresultaten för en lista med frågor
SE::Google::Compromised - kontrollerar domänernas renhet ur Googles perspektiv, kan identifiera hackade webbplatser och nätfiskewebbplatser
SE::Google::TrustCheck - kontrollerar Googles Trust (förtroende) för en webbplats
Användningsområden
- Insamling av länkdatabaser - för XRumer, AllSubmitter, GSA Ranker osv.
- Fullständig dump av SERP, inklusive länkar, ankare, snippets, annonsblock och annan information, möjliggör djupanalys för SEO-specialister och marknadsförare
- Bedömning av konkurrens för sökord
- Bedömning av konkurrens i PPC-resultat (annonser)
- Sökning efter bakåtlänkar och omnämnanden av webbplatser
- Kontroll av indexering av webbplatser
- Sökning efter sårbara webbplatser
- Alla andra scenarier som innebär att man hämtar sökresultat för ett obegränsat antal sökfrågor
Sökfrågor
Som sökfrågor ska sökfraser anges på exakt samma sätt som om de skrevs in direkt i Googles sökfält, till exempel:
bilköp
fönster i stockholm
site:https://lenta.ru
inurl:guestbook
Multiplikation av sökfrågor
Du kan använda inbyggda makron för att multiplicera sökfrågor, till exempel om vi vill få en mycket stor databas med forum, anger vi några huvudsökfrågor på olika språk:
forum
forum
foro
论坛
I sökfrågeformatet anger vi en teckenkombination från a till zzzz, denna metod gör det möjligt att rotera sökresultaten maximalt och få många nya unika resultat:
$query {az:a:zzzz}
Detta makro kommer att skapa 475254 ytterligare sökfrågor för varje ursprunglig sökfråga, vilket totalt ger 4 x 475254 = 1901016 sökfrågor, en imponerande siffra, men det är inga problem för A-Parser. Med en hastighet på 2000 sökfrågor per minut kommer en sådan uppgift att bearbetas på bara 16 timmar.
Användning av operatorer
Du kan använda sökoperatorer i sökfrågeformatet, på så sätt läggs de automatiskt till i varje sökfråga från din lista:
inurl:$query
Exempel på resultatutmatning
A-Parser stöder flexibel formatering av resultat tack vare den inbyggda mallmotorn Template Toolkit, vilket gör det möjligt att mata ut resultat i valfri form, även strukturerat som CSV eller JSON
Export av länklista
Resultatformat:
$serp.format('$link\n')
Exempel på resultat:
https://www.weforum.org/open-forum/
https://www.weforum.org/about/world-economic-forum/
https://www.merriam-webster.com/dictionary/forum
https://en.wikipedia.org/wiki/Forum
https://dictionary.cambridge.org/dictionary/english/forum
https://www.collinsdictionary.com/dictionary/english/forum
https://www.linkedin.com/company/world-economic-forum
https://docs.moodle.org/en/Forum_activity
https://wordpress.org/support/forums/
https://www.facebook.com/worldeconomicforum/
...
Länkar + ankare + snippets med position
Resultatformat:
[% FOREACH item IN serp; loop.count _ ' - ' _ item.link _ ' - ' _ item.anchor _ ' - ' _ item.snippet _ "\n"; END %]
Exempel på resultat:
1 - https://ru.wikipedia.org/wiki/%D0%A4%D0%BE%D1%80%D1%83%D0%BC - Forum — Wikipedia - <em>Fórum</em> (lat. forum — ark. förgård till grav; plats i press för druvor som ska bearbetas; marknadsplats, stadstorg; ...
2 - https://ru.wikipedia.org/wiki/%D0%A4%D0%BE%D1%80%D1%83%D0%BC_(%D0%BC%D0%B5%D1%80%D0%BE%D0%BF%D1%80%D0%B8%D1%8F%D1%82%D0%B8%D0%B5) - Forum (evenemang) — Wikipedia - <em>Forum</em> — evenemang som hålls för att belysa eller lösa vissa<wbr>i tillräcklig grad globala problem. Detta begrepp förekommer i ...
3 - https://support.google.com/googleplay/community?hl=ru - Välkommen till communityns hjälpforum ... - Välkommen till communityns hjälpforum <em>forum</em> för Google Play. Utvalda inlägg. Visa alla intressanta inlägg · Behöver du hjälp med ett spel?
4 - https://support.google.com/mail/community?hl=en - Gmail Community - Google Support - Welcome to the Gmail Help Community · Featured posts · Categories.
5 - https://www.weforum.org/ - The World Economic Forum - The World Economic Forum is an independent international organization committed to improving the state of the world by engaging business, political, academic ...
6 - https://www.kunena.org/ - Home - Kunena - To Speak! Next Generation Forum ... - Kunena! - To Speak! Next Generation Forum Component for Joomla.
7 - https://forum.adguard.com/index.php - AdGuard Forum - <em>Forum</em> för betatestare. Här skriver vi rapporter om buggar i betaversioner. Trådar: 355. Meddelanden: 11.6K. Underforum: Kommentarer till betaversioner ...
8 - https://www.sofiaforum.bg/ - Sofia Security Forum: Plattform för diskussion ... - Sofia <em>Security Forum</em> / Sofia Security Forum.
9 - https://forum.keenetic.net/ - Forums - Keenetic Community - Keenetic fan club. A place to meet software developers, get the latest updates, and share experience.
10 - https://forum.euroaion.com/ - Perfect quality European private server of Aion - EuroAion.com - Perfect quality European private server of Aion!
...
Export av länkar, ankare och snippets till en CSV-tabell
Det inbyggda verktyget $tools.CSVLine gör det möjligt att skapa korrekta tabelldokument, redo att importeras till Excel eller Google Kalkylark.
Allmänt resultatformat:
[% FOREACH i IN p1.serp; tools.CSVline(i.link, i.anchor, i.snippet); END %]
Filnamn:
$datefile.format().csv
Inledande text:
Länk,Ankare,Snippet
Exempel på resultat:
Länk,Ankare,Snippet
https://ru.wikipedia.org/wiki/%D0%A4%D0%BE%D1%80%D1%83%D0%BC,"Forum — Wikipedia",
https://en.wikipedia.org/wiki/Forum,"Forum - Wikipedia","<em>Forum</em> (plural forums or fora) may refer to: Contents. 1 Common uses; 2 Places. 2.1 Natural features; 2.2 Populated places. 3 Arts and entertainment; 4 Media."
https://www.weforum.org/,"The World Economic Forum","The World Economic <em>Forum</em> is an independent international organization committed to improving the state of the world by engaging business, political, academic ..."
https://support.google.com/webmasters/community?hl=ru,"Välkommen till communityns hjälpforum ...","Välkommen till communityns hjälpforum <em>forum</em> för Google Search Central. Utvalda inlägg. Visa alla intressanta inlägg · Svar på ..."
https://support.google.com/chrome/community?hl=ru,"Välkommen till communityns hjälpforum ...","Välkommen till communityns hjälpforum <em>forum</em> för Google Chrome. Utvalda ..."
...
I Allmänt resultatformat används mallmotorn Template Toolkit för att mata ut arrayen $serp i en FOREACH-loop.
I filnamnet för resultaten behöver du bara ändra filändelsen till csv.
För att alternativet "Prepend text" ska vara tillgängligt i Task Editor, måste du aktivera "More options". I "Prepend text" skriver vi kolumnnamnen separerade med kommatecken och gör den andra raden tom.
Utmatning av annonsblock
Resultatformat:
$ads.format('$link - $anchor - $snippet\n')
Exempel på resultat:
https://www.rentalcars.com/ - Rent a Car Worldwide - Best Prices Online Guaranteed - Secure Your <em>Car Hire</em> Today. The Best Price Guaranteed. Book at Over 53,000 Locations. Search, Compare and Save Using the World's Biggest Online <em>Car Rental</em> Service.
https://www.kayak.com/United-States-Car-Rentals.253.crc.html - United States from $9/day - Search for Rental Cars on Kayak - Find and Compare Great <em>Car</em> Deals in USA. Book with Confidence on KAYAK®!
https://www.discovercars.com/ - -70% Worldwide Car Rental - Rent Your Car in 5 Minutes - <em>Car rental</em> prices are rising, but if you act fast, you can get a good deal. Don’t stress! We...
https://www.economybookings.com/ - Rent a Car for Summer Holidays - Car Rentals for the Best Price - Theft protection and Third Party liability part of a great deal. Free Mileage included.
...
Spara relaterade sökord
Resultatformat:
$related.format('$key\n')
Exempel på resultat:
test <b>speed</b>
<b>net speed</b> test
<b>google speed</b> test
<b>fast speed</b> test
<b>ping</b> test
<b>xfinity speed</b> test
<b>speed</b> test <b>mobile</b>
test <b>my</b>
...
För att automatiskt ta bort HTML-taggar i resultatet bör du använda Resultatbyggaren, välja arrayen $related och tillämpa Remove HTML tags.
Sökordskonkurrens
Resultatformat:
$query - $totalcount\n
Exempel på resultat:
speed test mobile - 1080000000
test score - 4020000000
net speed test - 1210000000
fast speed test - 2150000000
speed test - 2500000000
test match - 4160000000
ping test - 425000000
google speed test - 1870000000
Identifiering av sökord med stavfel
Resultatformat:
$query - $misspell\n
Exempel på resultat:
spead test - 1
test match - 0
speed test - 0
temst match - 1
Kontroll av länkindexering
Sökfrågeformat:
site:$query
Resultatformat:
$query.orig - $totalcount\n
Exempel på resultat:
https://a-parser.com/pages/buy - 2
https://a-parser.com/wiki/parsers - 4
https://a-parser.com/resources - 883
https://trjkjfkdf.bg.ky - none
https://a-parser.com/forum - 371
För att kontrollera länkindexering, infoga motsvarande operator i sökfrågeformatet: site:.
Resultatformatet visas som "ursprunglig url - antal sidor i indexet".
Som resultat får vi sidornas adress och deras antal i sökmotorns index.
Om sidan saknas blir resultatet: none.
Spara i SQL-format
Resultatformat:
[% FOREACH serp; "INSERT INTO serp VALUES('" _ query _ "', '"; link _ "', '"; anchor _ "')\n"; END %]
Exempel på resultat:
INSERT INTO serp VALUES('test', 'https://www.speedtest.net/', 'Speedtest by Ookla - The Global Broadband Speed Test')
INSERT INTO serp VALUES('test', 'https://fast.com/', 'Fast.com: Internet Speed Test')
INSERT INTO serp VALUES('test', 'https://www.business-standard.com/article/sports/ind-vs-aus-live-score-4th-day-5-india-vs-australia-live-cricket-score-online-brisbane-weather-121011900103_1.html', 'IND vs AUS 4th Test highlights: India creates history, wins ...')
INSERT INTO serp VALUES('test', 'https://www.test.com/', 'Find online tests, practice test, and test creation software | Test ...')
INSERT INTO serp VALUES('test', 'https://www.espncricinfo.com/series/india-in-australia-2020-21-1223867/australia-vs-india-4th-test-1223872/match-report-4', 'Recent Match Report - Australia vs India 4th Test 2020 ...')
INSERT INTO serp VALUES('test', 'https://www.icc-cricket.com/world-test-championship/standings', 'World Test Championship (2019-2021) Points Table - Live ...')
INSERT INTO serp VALUES('test', 'https://www.icc-cricket.com/rankings/mens/team-rankings/test', 'ICC Test Match Team Rankings International Cricket Council')
INSERT INTO serp VALUES('test', 'https://projectstream.google.com/speedtest', 'Speedtest - Google')
INSERT INTO serp VALUES('test', 'https://www.google.com/search?hl=en&q=Software+Testing&stick=H4sIAAAAAAAAAONgecQ4g5Fb4OWPe8JSfYyT1py8xtjOyMUVnJFf7ppXkllSKaTCxQZlSXHxSHHo5-obmJul5GkwSHFxwXlKwUbuuy5NO8fmKMgABGJm_g5SmlpCXOyexT75yYk5ggpvuB68mfLeXkuYiyMksSI_Lz-3UtCBgcHhx__39kqcnEBND7aoddhrMTTtW3GIjYWDUYCBZxGrQHB-Wkl5YlGqQkhqcUlmXjoAS5B1P7EAAAA&sa=X&ved=2ahUKEwiW-rnmlajuAhWpAGMBHR-JAv4Q6RMwHXoECDQQBQ', '')
...
Dumpa resultat till JSON
Allmänt resultatformat:
[% IF notFirst;
",\n";
ELSE;
notFirst = 1;
END;
obj = {};
obj.totalcount = p1.totalcount;
obj.links = [];
FOREACH item IN p1.serp;
obj.links.push(item.link);
END;
obj.json %]
Starttext:
[
Sluttext:
]
Exempel på resultat:
[{"totalcount":"6450000000","links":["https://www.speedtest.net/","https://fast.com/","https://projectstream.google.com/speedtest","https://www.test.com/","https://www.speakeasy.net/speedtest/","https://www.att.com/support/speedtest/","https://speedtest.xfinity.com/","https://developers.google.com/speed/pagespeed/insights/","https://www.espncricinfo.com/series/india-in-australia-2020-21-1223867/australia-vs-india-4th-test-1223872/match-report-4","https://nasional.tempo.co/read/1424570/listyo-sigit-temui-ahy-menjelang-fit-and-profer-test-calon-kapolri","https://www.google.com/search?hl=en&q=Test+Assessment&stick=H4sIAAAAAAAAAONgecRYyC3w8sc9YamMSWtOXmNM4uIKzsgvd80rySypFNLiYoOyFLj4pbj10_UNjQyzKsvyzDQYpHi5kAWUNIxkdl2ado5NTJABCMTKAhyUODmBLIVA-wX2WgxN-1YcYmPhYBRg4FnEyh-SWlyi4FhcnFpcnJuaVwIAwEAP9ogAAAA&sa=X&ved=2ahUKEwj17MzXmajuAhW8CWMBHRlzBP4Q6RMwDHoECBEQBQ"]}]
För att alternativen "Prepend text" och "Append text" ska vara tillgängliga i Task Editor, måste du aktivera "More options".
Bearbetning av resultat
A-Parser gör det möjligt att bearbeta resultat direkt under dataskrapningen. I det här avsnittet har vi listat de mest populära fallen för Google-scrapern.
Dubblettkontroll av länkar
Lägg till dubblettkontroll och välj $serp.$i.link - Link i rullgardinslistan.
Ladda ner exempel
Hur man importerar ett exempel till A-Parser
eJx9VE1v2zAM/SsFkcMGBEFy2MW3NFiKDVnTNekpyEGNaUOLLGmSnDUw/N9H+ktO
N/Rmko+PfCTlCoLwZ//k0GPwkBwqsM03JLD7miQPxuQK7zZSn/3di5a/S4QpWOE8
OoYfRigKpJiJUgWYVhCuFonEXNA5mXJQpmRbZ96uDoOT6Ml3Eapk2GI+n0P9QZrI
8WRKHWLO4gO44n4tOk4bZcxHKWUvhuRyy8kBSJMlByfDcdoh9i3cU8c6h977oMyr
UJAEV2J9PPYsfm1cIXh4E7uYdZMcgjtxwb2hYCZVrOzXZD2KgqtMUhGQo7OsIfr0
eRbemEGkqQzSaKHaCjz7WLVbTALaEJY+ebprZwpyBWwI2HntuzvApLGjyp9tDiSZ
UB6n4KnVtaBG0vcRGdCJYNzWcj/kr8DopVIbvKCKsIb/vpQqpUNZZpT0rUv8P2T7
D0c9yBuXokX/cdTDwNJY99sfMSs1G5OT8vS1WWYhA9l+1VxPAnNynhHtMLNHnllh
HA5lOuauOr0Ni5qvKq5saaPrRsbNWm6dJ6MzmW+7S+2Rpd7TA9zqlSmsQtalS6Vo
LR6f43ksfbcGNmKD75NXTQmW3r9DCMYo/33XtmqdpPP7wg0WNMlx1Y7yJJR6ed6M
IxBPqjknz7QnutPc0AWRivo4/BGG/0g1/i8kVU1r+eWfWhBrYAj5aBieZs6P+S/t
6pW4
Se även: Resultatens dubblettkontroll
Dubblettkontroll av länkar per domän
Lägg till dubblettkontroll och välj $serp.$i.link - Link i rullgardinslistan. Välj typ av dubblettkontroll: Domain.
Ladda ner exempel
Hur man importerar ett exempel till A-Parser
eJx9VE2P2jAQ/SvI4tBKaAWHXnJj6bJqRZftwp4QB0MmyMXxuLZDF0X89844IQ7b
am+ZmffefDq1CNIf/bMDD8GLbFMLG79FJlYPWfaIeNAwWChz9INXo35XMNidB1+x
lMqIkbDSeXBM3PTwFMihkJUOYlSLcLZAcngC51TOQZWTbR2+nR0Ep8CT7yR1xbDJ
eDwWlw9o8gB7rExInMkHcM2VW3BM6zHGPUoV26IgNc4lZxtBPVlyMFlsRy1i3cDz
a++N91HjTmqRBVfBZbu9qvg5ulLyGId2ctfOtAuu5AnWSMFC6ZTZz8l6kiVnGeYy
AEfviij06fNdeGMFmecqKDRSNxl49ilrsyLiGyQsffJ05w5LcgWIAuw8X6vbiGG0
U5c/G47ICqk9jISnUueSCsnfR1QAJwO6peV6yF8LNFOtF3ACnWBR/75SOqdDmRZE
+tYS/w9Z/qNx6drrp6JF/3FUQ6cSrfvlj8TKcYEHXtkuLrNUgWw/i9eTiTE5jwC2
m9kTz6xEB12aVrnNTq/EguGrSiub2uS6aeNmLbfOPZpCHZbtpV6RlVnTU1yaGZZW
A/dlKq1pLR5e0nlMfbsGNlKB78mzmIJbv75DERC1/75qSrVO0fl94QJLmmQ/ayu5
l1q/viz6EZFOKp6TZ9k93ekB6YKoi8u2+yN0f5S6/1/I6gut5Zd/bkDcA0PIR8Pw
NHN+zH8BRVyZDA==
Se även: Resultatens dubblettkontroll
Extrahera domäner
Lägg till Result Builders (Resultatbyggaren) och välj källa i rullgardinslistan: $p1.serp.$i.link - Link. Välj typ: Extract Domain.
Ladda ner exempel
Hur man importerar ett exempel till A-Parser
eJx9VE1v2zAM/SuFkMMGBIFz2MW3NGuGDVnTNe0p6EGzaUOLLGqSnCUw8t9HKort
dkNv5scj+cgndyJIv/cPDjwEL/JdJ2z8FrnY3uX5F8Raw83dMThZhJvP2EhlxFRY
6Tw4BuxGeRQooZKtDmLaiXCyQGXwAM6pkoOqJNs6PJ4cBKfAk+8gdctp8yzLxPkd
mKyhwNaEATN/J10rs/cWHMNGiOz88jIVxJBm9Ct0jWSmEzufJdp9cCsP8IQUrFQk
dsWQdS8bbjkpZQCOzqpY6MPHWThyBVmWKig0Ul868JqGrs9G/Y6MDVIuffIiVg4b
cgWIBdh5uk63E5NoCyrRRuyPC0bkldQepsLTqCtJg5RvIyqAkwHdxvI85O8EmoXW
aziAHtJi/dtW6ZJuuqgI9DUB/5+y+afGuac3bkU3+eNohr5KtG433wdUiWusiXn5
k3hr1ahAtl/GQ+ciI+cewPY7u+edNeigb5Mqp+4kZAuGBTCcbGEH1ysar84ycnbC
Y+sK6rfLpjtBQrdxOLMXrJ6kOLi8if5JSOfkifwpPWBSoTgTpkBTqXqTRHrt3Jon
en0bs8TGauA9mVZrOrOHx0FuC5/OysZA+C14GVvwKq9PkGZA7b9tL9StUzTSJybc
0GXGXVPJQmr9/LgeR8Qg0ShPz2UL0n2NpEhiweTSz6D/iXTjX0LenenMv/zDJYk5
cAr5aBmebsjv+C86oZM/
Se även: Resultatbyggaren
Ta bort taggar från ankare och snippets
Lägg till Result Builders (Resultatbyggaren) och välj källa i rullgardinslistan: $p1.serp.$i.anchor - Anchor. Välj typ: Remove HTML tags.
Lägg till Result Builders (Resultatbyggaren) igen och välj källa i rullgardinslistan: $p1.serp.$i.snippet - Snippet. Välj typ: Remove HTML tags.
Ladda ner exempel
Hur man importerar ett exempel till A-Parser
eJyVVD1v2zAQ/SsC4aEFBEMeumhzjLpp4cSp7UxGBlY6qawpkiUpN4bg/947mpaU
NAjQjby79+7rkR3z3B3cgwUH3rF83zETzixn2895/kXrWkKygUYfIbnd3a0Sz2uX
VFY3yVwVP7V1CVdlslXCGKJImeHWgSWy/YgDHSVUvJWepR3zJwOYAkmtFSU5RYl3
Y/XzyYK3AojpyGVLYbMsy9j5HRivodCt8gNm9k64FOrgDFiCjRDZ+ekpZdg91uiW
2jacpjAxs2kcSe/c8iPsNDorERq7YvB2zxtKOSm5B/JOq0D04ePUPxMDL0vhhVZc
XjLQmIasj0r8Dh0rjbF4pEEscdZo8hAIyHi6Vrdnk3BnSNEG7PcLhuUVlw5S5rDU
JcdCytce4cFyr+3aUD1o75hWcylXcAQ5hAX+m1bIEnc6rxD0NQLfDln/w3Hu2xun
wp38sVhDzxJuN+u7AVXqla6x8/IH9i1FIzze3SIsOmcZGg8App/ZPc2s0Rb6NJE5
ZkeRG1AkgGFlczOYXrTxYi0jY8ecbm2B+fZZumcodENbDS+BkX6i5mx4Mbe+keS2
lp/QGKM9SSdCSKZvMbrLe/ovyivmjJhCq0rU66j8azut2uFzX6uFbowEGr5qpUTt
ONgMGp67qBW6DFN8DV6EFLSf67vGMrR037aXeRorsKpPaSx8nDVSFlzKx81q7GGD
7oPmHdEW+JhqjTLHLqi5+MP0v1Y3/mfy7oza+eUeLkHUA4WgDYfhUBj0OfwFH/O5
UQ==
Du kan lägga till Resultatbyggaren så många gånger du behöver.
Se även: Resultatbyggaren
Filtrering av länkar efter innehåll
Lägg till ett filter och välj i rullgardinslistan: $serp.$i.link - Link. Välj typ: Contain string. Skriv sedan in filtreringskriteriet i fältet String (Sträng).
Ladda ner exempel
Hur man importerar ett exempel till A-Parser
eJx9VE1v2kAQ/StoxSGVEIJDL74RVKpWNKSBnBCHDR5bG9Y72901DbL83zuzNrZJ
qtw8H+/Nm491JYL0J//owEPwItlXwsZvkYjttyT5jphrGK2UDuCUyUcvl5EP8UuZ
kVbmJCbCSufBMXo/AFEghUyWOohJJcLFAnHiGZxTKQdVSrZ1+HZxQIzgyXeWuuS0
+Ww2E/UnMJnDEUsTesz8k3TW6S04hg0QswEkix1SkLpnycleUE+WHLHJw6TN2DXp
RzRBKjOQPD1iQSbaoNCQ7cF4UR8OV0a/QldInuvYzqftkLvgVp5hh40O6N00d3iQ
BfOPUxmAo9MsEt19mYY3ZpBpqrim1E0F3kNf9dmoP1GfQcqlT570ypHWRASIBOy8
XNXtxTja3HEZsb8bjEgyqT1MhCepK0lC0vcRRfORAd0mzoD8lUCz0HoNZ9B9WuS/
L5VO6WgWGYF+tMD/p2w+cNRde8NStPS/jjR0LNG63/zqUSmuMafO05e42EIFsv0y
XlIiZuQ8AdhuZg88swIddGVa5rY6PRsLhi+sX9nC9q6bNm7Wcuuka8pUvmmv9ppZ
mh29zY1ZYmE1cF+m1JrW4uGpP4+Fb9fARi/wPXgZS3Dr1zcpAqL2P7eNVOsUnd9X
FljQJIdVW8qj1Pr5aT2MiP6k4jl5pj3SneZIF0Rd1Ifu79D9YqrhPyKpalrLq39s
krgHTiEfDcPHlzSv/wHtZp3U
Se även: Resultatfilter
Möjliga inställningar
Regionala parametrar
Google domain - den Google-domän som används, standard är google.com
Results language - sök efter sidor på det valda språket, i webbläsaren motsvarar detta alternativet Avancerad sökning -> Ytterligare inställningar -> Sök på (url-parameter lr). Som standard inte angivet, vilket innebär automatisk identifiering baserat på IP
Spoiler: Skärmdump
Interface language - språket för Googles produkter, i webbläsaren är detta Språk -> Gränssnittsspråk (url-parameter hl). Som standard är engelska valt
Spoiler: Skärmdump
Search from country - val av sökregion, i webbläsaren är detta Språk -> Sökregion (url-parameter gl). Som standard inte angivet, vilket innebär automatisk identifiering baserat på IP
Spoiler: Skärmdump
Narrow results by region - sök efter sidor skapade i ett visst land, i webbläsaren är detta Avancerad sökning -> Ytterligare inställningar -> Land (url-parameter cr). Som standard inte angivet, vilket innebär att detta alternativ är inaktiverat
Spoiler: Skärmdump
Location (city) - exakt plats för sökningen, i webbläsaren bestäms detta automatiskt baserat på användarens plats. Som standard inte angivet, vilket innebär automatisk identifiering baserat på sökfrågans IP
Spoiler: Skärmdump
Alla regionala parametrar påverkar sökresultaten i större eller mindre utsträckning.
| Namn på parameter | Standardvärde | Beskrivning |
|---|---|---|
| Device | Desktop | Val av desktop- eller mobilresultat: Desktop / Mobile |
| Pages count | 5 | Antal sidor att skrapa (från 1 till 100) |
| Parse pages links from first page | ☑ | Samlar in länkar till alla tillgängliga sidnumreringssidor från den första resultatsidan. Gäller endast när Device är: Desktop; fungerar inte för mobilresultat |
| Serp type | Default (All) | Bestämmer om skrapning ska ske från huvudsidan, nyheter eller böcker (Books, News, Videos) |
| Hide omitted results | ☑ | Bestämmer om utelämnade resultat ska döljas (parametern filter=) |
| Serp time | Anytime | Tid för sökresultat (tidsberoende sökning, parametern tbs=, möjliga värden: Past 1 hour, Past 24 hours, Past week, Past month, Past year) |
| Parse not found | ☑ | Bestämmer om resultat ska skrapas om Google meddelar att inget hittades för den angivna sökfrågan och föreslår resultat för en annan sökfråga |
| Disable autocorrect | ☐ | Gör det möjligt att inaktivera Googles autokorrigering och skrapa resultat för exakt den angivna sökfrågan |
| Exact match | ☐ | Motsvarar alternativet "Exact match" i sökmotorn. Observera, detta alternativ skriver över värdet för parametern Serp time (likt hur dessa alternativ fungerar i webbläsaren). |
| Safe search | Blur | Möjlighet att aktivera "Safe search" |
| Google domain | www.google.com | Google-domän för skrapning, alla domäner stöds (www.google.ac, www.google.com.af, www.google.co.ck osv.) |
| Narrow results by region | Any region | Möjlighet att begränsa sökningen till ett specifikt land |
| Results language | Auto (Based on IP) | Val av språk för resultat (parametern lr=) |
| Search from country | Auto (Based on IP) | Val av land som sökningen utförs ifrån (geoberoende sökning, parametern gl=) |
| Interface language | English | Möjlighet att välja Googles gränssnittsspråk för maximal identitet mellan resultat i scrapern och i webbläsaren |
| Location (city) | Sökning per stad, region. Städer kan anges som novosibirsk, russia; en fullständig lista över platser finns i Geotargets (kopia - använd värdet från kolumnen Canonical Name). Det är också nödvändigt att ställa in korrekt Google-domän | |
| Util::ReCaptcha2 preset | default | Bestämmer om  Util::ReCaptcha2 ska användas för att kringgå reCaptcha |
| Util::AntiGate preset | default | Bestämmer om  Util::AntiGate ska användas för att kringgå grafiska captchas |
| ReCaptcha2 retries | 3 | Antal försök att skicka svar för reCaptcha ett angivet antal gånger utan att byta proxy |
| ReCaptcha2 pass proxy | ☐ | Gör det möjligt att skicka proxy (som används i anropet till Google) och cookies (som erhållits i svaret från Google) till ReCaptcha-igenkänningstjänsten |
| Use sessions | ☑ | Sparar bra sessioner, vilket gör det möjligt att skrapa ännu snabbare med färre fel. |
| Don't take session | ☐ | Möjlighet att inte använda sparade bra sessioner |
| Additional headers | Gör det möjligt att ange valfria egna headers | |
| PAA questions count | 0 | Maximalt antal frågor och svar (People also ask) per sökfråga som scrapern ska samla in |
| Empty totalcount is error | ☐ | Om denna parameter aktiveras kommer sökfrågan att betraktas som misslyckad om värdet för $totalcount saknas, och nya försök kommer att göras |
| Count of retries when result is empty | 10 | Antal omförsök för en sökfråga om resultatsidan är helt tom |
| Redirect browser max pages | 10 | Antal webbläsarsidor som används för att kringgå skydd i form av kontroll av aktiverat JavaScript |
| Single redirect browser for task | ☑ | Om flera Google-scrapers anges i uppgiften — använd endast en webbläsare för alla deluppgifter; maximalt antal sidor och övriga inställningar tas från den första Google-scrapern i uppgiften |