Opcje dodatkowe dla niektórych scraperów

Niektóre scrapery obsługują dodatkowe opcje, które można dodać poprzez menu kontekstowe ustawień.

Scrapuj wszystkie wyniki / Parse all results

Ta opcja jest dostępna dla scraperów SE::Google, SE::Yandex, SE::Bing, SE::Yahoo i pozwala ominąć ograniczenia wyników wyszukiwania do 1000 na jedno zapytanie:

• Przy scrapowaniu zapytań A-Parser ocenia liczbę wyników w wynikach wyszukiwania wyświetlanych przez Google lub Yandex
• W zależności od liczby wyników scraper dodaje wiele dodatkowych zapytań, pozwalając tym samym wyparsować znacznie więcej wyników (często wszystkie) dla jednego zapytania

Scrapuj do poziomu / Parse to level

Ta opcja jest dostępna dla scraperów podpowiedzi (na przykład SE::Google::Suggest), dla scrapera SE::Yandex::WordStat oraz dla scrapera linków HTML::LinkExtractor:

• Dla scraperów podpowiedzi i Wordstat podstawia ponownie do zapytań wyparsowane słowa kluczowe, pozwalając tym samym wyparsować wszystkie zagnieżdżone słowa kluczowe do określonego poziomu
• Dla scrapera HTML::LinkExtractor ponownie podstawia do zapytań wszystkie linki wewnętrzne witryny, co pozwala na przeszukanie całego serwisu i stworzenie jego mapy linków

notatka

Dla tej opcji należy koniecznie włączyć usuwanie duplikatów zapytań, w przeciwnym razie może dojść do sytuacji, w której scraper będzie w pętli scrapował te same słowa kluczowe lub linki

Parse related to level

Ta opcja pozwala określić możliwość scrapowania w głąb według powiązanych słów kluczowych. Jest obsługiwana przez scrapery SE::Google, SE::Bing, SE::Yahoo.

Inne opcje

Istnieje szereg dodatkowych opcji dla różnych scraperów, więcej o ich przeznaczeniu można dowiedzieć się w dokumentacji każdego scrapera:

• Use Pages, Check Content, Check Next Page - opcje dla scrapera Net::HTTP
• Parse People also ask - opcja dla scrapera SE::Google