Shop::eBay - eBay zoekresultaten scraper

Overzicht van de scraper

Met de eBay product scraper kunt u gegevens uit de zoekresultaten verzamelen: naam, link, afbeelding, prijs en oude prijs, valuta, rating, aantal reviews en verkopen. Alleen zoeken op trefwoorden — productpagina's, verkopers en categorieën worden niet ondersteund als invoer.

De functionaliteit van A-Parser maakt het mogelijk om instellingen voor gegevensextractie op te slaan voor toekomstig gebruik (presets), schema's in te stellen en nog veel meer. U kunt automatische query-vermenigvuldiging gebruiken, subquery's uit bestanden invoegen, en alfanumerieke combinaties of lijsten doorlopen om het maximaal mogelijke aantal resultaten te verkrijgen.

Ga naar DEMO Koop A-Parser Pro ($299)

Verzamelde gegevens

Array $products (resultaatkaarten):

Naam ($products.$i.title)
Link ($products.$i.link) — zonder query-parameters
Afbeelding ($products.$i.image)
Prijs ($products.$i.price) — string; bereik wordt samengevoegd met een spatie
Oude prijs ($products.$i.old_price)
Valuta ($products.$i.currency)
Rating ($products.$i.rating)
Aantal reviews ($products.$i.reviews_count)
Aantal verkopen ($products.$i.number_sales) — leeg als het niet op de kaart staat of alleen "sold out" is
Primaire informatie ($products.$i.light_highlight)
Secundaire informatie ($products.$i.secondary_info)

Als een veld niet op de kaart staat, is de variabele leeg (niet none); als er niets is gevonden, is de gehele $products leeg.

Toepassingen

Verzamelen van productlinks
Beoordelen van de populariteit van producten
Volgen van prijsdynamiek en productpopulariteit

Query's

Als query's worden trefwoorden gebruikt voor de eBay-zoekopdracht, net als in het formulier op de website. Er wordt altijd in alle categorieën gezocht. Een link naar een product of categorie wordt niet herkend: de string wordt naar de zoekopdracht gestuurd zoals deze is, bijvoorbeeld:

mi band 6
iPhone 11
kingston CanvasGo+
AMD Ryzen R3 2200U

Query-substituties

U kunt ingebouwde macro's gebruiken voor query-vermenigvuldiging, bijvoorbeeld als we een zeer grote database met producten per merk willen verkrijgen:

philips
sony
xiaomi
samsung

In het query-formaat geven we een bereik aan van a tot zzzz. Deze methode maakt het mogelijk om de zoekresultaten maximaal te roteren en veel nieuwe unieke resultaten te verkrijgen:

$query {az:a:zzzz}

Deze macro genereert 475254 extra query's voor elke oorspronkelijke zoekopdracht, wat in totaal 4 x 475254 = 1901016 zoekopdrachten oplevert. Dit is een indrukwekkend getal, maar voor A-Parser is dit geen enkel probleem. Met een snelheid van 2000 query's per minuut wordt een dergelijke taak in slechts 16 uur verwerkt.

Voorbeelden van resultaatweergave

A-Parser ondersteunt flexibele formattering van resultaten dankzij de ingebouwde Template Toolkit, waardoor resultaten in elke gewenste vorm kunnen worden weergegeven, inclusief gestructureerde formaten zoals CSV of JSON.

Weergave van naam, nieuwe en oude prijs, valuta

Resultaatformaat:

$products.format('$title, $price, $old_price, $currency\n')

Voorbeeld van resultaat:

Xiaomi Mi Band 4 Global Version Smart Bracelet 0.95" Color Screen 50M Waterproof, 44.99, , $
Protective Film for Xiaomi youpin haylou ls02 ls01 Solar ls05 Color I Band 5, 5.97, , $
IP68 Waterproof SmartWatch ECG PPG Blood Pressure Heart Rate sports Wristwatch, 48.75, 52.99, $
Bluetooth Smart Watch Heart Rate Blood Pressure Bracelet For iPhone XS Xiaomi Mi, 38.63, 44.99, $

Weergave van naam, prijs en valuta

Resultaatformaat:

$products.format('Naam: $title, Prijs: $price, Valuta: $currency\n')

Voorbeeld van resultaat:

Naam: Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor, Prijs: 63.99, Valuta: $
Naam: Original Xiaomi Mi Band 6 Wristband AMOLED Color Screen - 2021!, Prijs: 20.00, Valuta: $
Naam: Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor, Prijs: 63.99, Valuta: $
Naam: Xiaomi Mi Band 6 Smart fitness bracelet, Prijs: 62.99, Valuta: $
Naam: Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor Sports Bracelet, Prijs: 63.99, Valuta: $
Naam: MI 6 Band 6 Smart 1.56" AMOLED Retina Colourful Screen Blood SpO2 Heart Fitness, Prijs: 82.74, Valuta: $
Naam: Xiaomi Mi Smart Band 6 1.56' Amoled Blood Oxygen Fitness Tracker Sport Bracelet, Prijs: 65.99, Valuta: $

Weergave van naam, prijs en het verschil tussen nieuwe en oude prijs in een CSV-tabel

Resultaatformaat:

[% FOREACH item IN products;  
    diff = item.old_price ? item.old_price - item.price : 0; 
    tools.CSVline(item.title, item.price, diff);
END %]

Voorbeeld van resultaat:

"Xiaomi Mi Band 4 Global Version Smart Bracelet 0.95"" Color Screen 50M Waterproof",44.99,0
"IP68 Waterproof SmartWatch ECG PPG Blood Pressure Heart Rate sports Wristwatch",48.75,4.24
"Protective Film for Xiaomi youpin haylou ls02 ls01 Solar ls05 Color I Band 5",5.97,0
"Bluetooth Smart Watch Heart Rate Blood Pressure Bracelet For iPhone XS Xiaomi Mi",38.63,6.36
"Men Sports Smart Watch ECG PPG Blood Pressure Heart Rate Phone Mate for iPhone",48.75,4.24

Weergave van resultaat met datum van gegevensextractie in een CSV-tabel

Resultaatformaat:

[% USE date;
d = date.format(mytime, format = "%Y %d %H:%M");
FOREACH item IN products;  
    tools.CSVline(d, item.title, item.price, item.link);
END %]

Voorbeeld van resultaat:

"2021 16 18:23","Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor",63.99,https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/124659632314
"2021 16 18:23","Original Xiaomi Mi Band 6 Wristband AMOLED Color Screen - 2021!",20.00,https://www.ebay.com/itm/Original-Xiaomi-Mi-Band-6-Wristband-AMOLED-Color-Screen-2021/153992931607
"2021 16 18:23","Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor",63.99,https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/133729672537
"2021 16 18:23","Xiaomi Mi Band 6 Smart fitness bracelet",62.99,https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Smart-fitness-bracelet/353451130097
"2021 16 18:23","Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor Sports Bracelet",63.99,https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor-Sports-Bracelet/164811614943

Weergave in een CSV-tabel

Resultaatformaat:

[% FOREACH item IN products; 
 tools.CSVline(item.link, item.title, item.price, item.old_price, item.rating, item.reviews_count); 
END %]

Begintekst:

Productlink, Productnaam, Prijs, Oude prijs, Beoordeling, Aantal reviews

Voorbeeld van het resultaat:

Productlink, Productnaam, Prijs, Oude prijs, Beoordeling, Aantal reviews
https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/124659632314,"Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor",63.99,,,
https://www.ebay.com/itm/Original-Xiaomi-Mi-Band-6-Wristband-AMOLED-Color-Screen-2021/153992931607,"Original Xiaomi Mi Band 6 Wristband AMOLED Color Screen - 2021!",20.00,,,
https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-1-56-AMOLED-Tracker-Heart-Rate-Bracelet/284256075838,"Xiaomi Mi Band 6 Blood Oxygen Fitness 1.56"" AMOLED Tracker Heart Rate Bracelet",60.79,63.99,,
https://www.ebay.com/itm/Xiaomi-Mi-Smart-Band-6-1-56-AMOLED-Blood-Oxygen-Fitness-Tracker-Sport-Bracelet/194003608270,"Xiaomi Mi Smart Band 6 1.56' AMOLED Blood Oxygen Fitness Tracker Sport Bracelet ",61.99,77.69,,
https://www.ebay.com/itm/Xiaomi-Mi-band-6-Xiaomi-smart-2021-Newest-1-56/154411997162,"Xiaomi Mi band 6 Xiaomi smart 2021 Newest 1.56'",58.99,,,

tip

In het Resultaatformaat wordt de Template Toolkit-template-engine gebruikt om de array $products in een FOREACH-lus weer te geven.

Om de optie "Prepend text" beschikbaar te maken in de Taakeditor, moet u "More options" activeren. In "Prepend text" vullen we de kolomnamen in gescheiden door komma's en maken we de tweede regel leeg.

Opslaan in SQL-formaat

Resultaatformaat:

[% FOREACH item IN products;
    "INSERT INTO products VALUES('" _ item.title _ "', '"; item.link _ "', '"; item.price _ "', '"; item.currency _ "')\n";
END %]

Voorbeeld van resultaat:

INSERT INTO products VALUES('Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor', 'https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/124659632314', '63.99', '$')
INSERT INTO products VALUES('Original Xiaomi Mi Band 6 Wristband AMOLED Color Screen - 2021!', 'https://www.ebay.com/itm/Original-Xiaomi-Mi-Band-6-Wristband-AMOLED-Color-Screen-2021/153992931607', '20.00', '$')
INSERT INTO products VALUES('Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor', 'https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/133729672537', '63.99', '$')
INSERT INTO products VALUES('Xiaomi Mi Band 6 Smart fitness bracelet', 'https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Smart-fitness-bracelet/353451130097', '62.99', '$')
INSERT INTO products VALUES('Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor Sports Bracelet', 'https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor-Sports-Bracelet/164811614943', '63.99', '$')
INSERT INTO products VALUES('MI 6 Band 6 Smart 1.56&#34; AMOLED Retina Colourful Screen Blood SpO2 Heart Fitness', 'https://www.ebay.com/itm/MI-6-Band-6-Smart-1-56-AMOLED-Retina-Colourful-Screen-Blood-SpO2-Heart-Fitness/224414937192', '82.74', '$')

Resultaten dumpen in JSON

Algemeen resultaatformaat:

[% IF notFirst;
  ",\n";
ELSE;
  notFirst = 1;
END;

obj = {};
obj.query = query;
obj.items = [];

FOREACH item IN p1.products;
    obj.items.push({
        link = item.link
        title = item.title
        price = item.price
    });
END;

obj.json %]

Begintekst:

Eindtekst:

Voorbeeld van resultaat:

[
    {
        "query": "mi band 6",
        "items": [
            {
                "link": "https://www.ebay.com/itm/Mens-Smart-Watch-Fitness-Activity-Tracker-Wristwatch-for-iPhone-Samsung-Android/233817567751",
                "title": "Men's Smart Watch Fitness Activity Tracker Wristwatch for iPhone Samsung Android",
                "price": "48.75"
            },
            {
                "link": "https://www.ebay.com/itm/Mens-Smart-Watch-Fitness-Activity-Tracker-Wristwatch-for-iPhone-Samsung-Android/233817567751",
                "title": "Men's Smart Watch Fitness Activity Tracker Wristwatch for iPhone Samsung Android",
                "price": "48.75"
            },
            {
                "link": "https://www.ebay.com/itm/Mens-Smart-Watch-Fitness-Activity-Tracker-Wristwatch-for-iPhone-Samsung-Android/233817567751",
                "title": "Men's Smart Watch Fitness Activity Tracker Wristwatch for iPhone Samsung Android",
                "price": "48.75"
            },
            {
                "link": "https://www.ebay.com/itm/Mens-Smart-Watch-Fitness-Activity-Tracker-Wristwatch-for-iPhone-Samsung-Android/233817567751",
                "title": "Men's Smart Watch Fitness Activity Tracker Wristwatch for iPhone Samsung Android",
                "price": "48.75"
            }
        ]
    }
]

tip

Om de opties "Prepend text" en "Append text" beschikbaar te maken in de Taakeditor, moet u "More options" activeren.

Mogelijke instellingen

opmerking

Algemene instellingen voor alle scrapers

Parameter	Standaardwaarde	Beschrijving
Pages count	`5`	Hoeveel pagina's met resultaten moeten worden opgehaald (1–50)
Items Per Page	`60`	Producten per pagina: 60, 120 of 240
Ebay domain	`United States`	Zoekzone; de locale en valuta zijn die welke door het domein worden geleverd

Overzicht van de scraper​

Verzamelde gegevens​

Toepassingen​

Query's​

Query-substituties​

Voorbeelden van resultaatweergave​

Weergave van naam, nieuwe en oude prijs, valuta​

Weergave van naam, prijs en valuta​

Weergave van naam, prijs en het verschil tussen nieuwe en oude prijs in een CSV-tabel​

Weergave van resultaat met datum van gegevensextractie in een CSV-tabel​

Weergave in een CSV-tabel​

Opslaan in SQL-formaat​

Resultaten dumpen in JSON​

Mogelijke instellingen​

Overzicht van de scraper

Verzamelde gegevens

Toepassingen

Query's

Query-substituties

Voorbeelden van resultaatweergave

Weergave van naam, nieuwe en oude prijs, valuta

Weergave van naam, prijs en valuta

Weergave van naam, prijs en het verschil tussen nieuwe en oude prijs in een CSV-tabel

Weergave van resultaat met datum van gegevensextractie in een CSV-tabel

Weergave in een CSV-tabel

Opslaan in SQL-formaat

Resultaten dumpen in JSON

Mogelijke instellingen