Maps::Google::Reviews - Scraper opinii z Map Google
Przegląd scrapera
Scraper opinii z Map Google. Scraper opinii z Map Google zapewnia szybkie i zautomatyzowane pozyskiwanie opinii z Map Google. Dzięki scraperowi Maps::Google::Reviews będziesz mógł automatycznie zbierać bazy opinii z Map Google. Używając scrapera Maps::Google::Reviews można łatwo i szybko scrapować opinie z Google maps.
Funkcjonalność A-Parser pozwala zapisywać ustawienia scrapowania scrapera Maps::Google::Reviews do dalszego wykorzystania (presety), ustalać harmonogram scrapowania i wiele więcej.
Zapisywanie wyników jest możliwe w dowolnej formie i strukturze, dzięki wbudowanemu potężnemu silnikowi szablonów Template Toolkit, który pozwala stosować dodatkową logikę do wyników i wyprowadzać dane w różnych formatach, w tym JSON, SQL i CSV.
Gromadzone dane
$totalcount— liczba opinii o miejscu$avgrating— średnia ocena- Tablica
$list(opinie)$list.$i.rating— ocena$list.$i.text— tekst$list.$i.name— imię autora$list.$i.date— data$list.$i.url— link
Możliwości
- Obsługuje określanie liczby zbieranych opinii na zapytanie (Max reviews count)
- Silnik zbierania: HTTP lub Browser (Engine)
Warianty użycia
- Zbieranie opinii
- Liczba opinii i średnia ocena
Zapytania
Jako zapytania należy podawać link do miejsca z cid, na przykład:
https://maps.google.com/?cid=12262488876297357724
Warianty wyprowadzania wyników
A-Parser obsługuje elastyczne formatowanie wyników dzięki wbudowanemu silnikowi szablonów Template Toolkit, co pozwala mu wyprowadzać wyniki w dowolnej formie, a także w ustrukturyzowanej, np. CSV lub JSON
Domyślny format wyniku:
$list.format('$name,$date,$url,$rating,$text\n')
Możliwe ustawienia
| Nazwa parametru | Wartość domyślna | Opis |
|---|---|---|
| Max reviews count | 20 | Ile opinii umieszczać w $list |
| Engine | HTTP | HTTP — bez przeglądarki. Browser — przez przeglądarkę |
| Max concurrent browser pages | 10 | Ile stron Chrome może jednocześnie otwierać scraper. Przy dużej liczbie wątków zwiększać ostrożnie — rośnie obciążenie pamięci i CPU |
| Browser tries on same proxy | 4 | Ile nowych stron przeglądarki otworzyć na jednym proxy, jeśli Google wymaga zalogowania lub brakuje karty Reviews. Następnie proxy jest zmieniane. 0 — tylko pierwsza strona, bez powtórzenia na tym samym proxy |
| Browser headless | ☑ | Uruchamianie przeglądarki bez okna |