Shop::eBay - scraper för eBay-sökresultat

Översikt av scrapern

Genom att använda eBay produktscraper kan du samla in kort från sökresultaten: namn, länk, bild, pris och gammalt pris, valuta, betyg, antal recensioner och försäljningar. Endast sökning via nyckelord stöds — produktsidor, säljare och kategorier som indata stöds inte.

Funktionaliteten i A-Parser gör det möjligt att spara inställningar för dataskrapning för framtida bruk (förinställningar), schemalägga dataskrapning och mycket mer. Du kan använda automatisk multiplikation av frågor, infogning av underfrågor från filer, generering av alfanumeriska kombinationer och listor för att få största möjliga antal resultat.

Gå till DEMO Köp A-Parser Pro ($299)

Insamlade data

Arrayen $products (resultatkort):

Namn ($products.$i.title)
Länk ($products.$i.link) — utan query-parametrar
Bild ($products.$i.image)
Pris ($products.$i.price) — sträng; intervall sammanfogas med mellanslag
Gammalt pris ($products.$i.old_price)
Valuta ($products.$i.currency)
Betyg ($products.$i.rating)
Antal recensioner ($products.$i.reviews_count)
Antal försäljningar ($products.$i.number_sales) — tomt om det saknas på kortet eller om det bara står "sold out"
Primär information ($products.$i.light_highlight)
Sekundär information ($products.$i.secondary_info)

Om ett fält saknas på kortet är variabeln tom (inte none), om inget hittas är hela $products tom.

Användningsfall

Insamling av produktlänkar
Bedömning av produkters popularitet
Spårning av prisdynamik och produkters popularitet

Frågor

Som frågor används nyckelord för eBay-sökning, precis som i formuläret på webbplatsen. Sökningen sker alltid i alla kategorier. Länkar till produkter eller kategorier känns inte igen: strängen skickas till sökningen som den är, till exempel:

mi band 6
iPhone 11
kingston CanvasGo+
AMD Ryzen R3 2200U

Frågesubstitutioner

Du kan använda inbyggda makron för att multiplicera frågor, till exempel om vi vill få en mycket stor databas med produkter per varumärke

philips
sony
xiaomi
samsung

I frågeformatet anger vi en genomgång av tecken från a till zzzz, denna metod gör det möjligt att rotera sökresultaten maximalt och få många nya unika resultat:

$query {az:a:zzzz}

Detta makro kommer att skapa 475254 ytterligare frågor för varje ursprunglig sökfråga, vilket totalt ger 4 x 475254 = 1901016 sökfrågor, en imponerande siffra, men det är inga problem för A-Parser. Med en hastighet på 2000 frågor per minut kommer en sådan uppgift att bearbetas på bara 16 timmar.

Exempel på resultatutdata

A-Parser stöder flexibel formatering av resultat tack vare den inbyggda mallmotorn Template Toolkit, vilket gör att den kan mata ut resultat i valfri form, såväl som i strukturerad form, till exempel CSV eller JSON

Utdata av namn, nytt och gammalt pris, valuta

Resultatformat:

$products.format('$title, $price, $old_price, $currency\n')

Exempel på resultat:

Xiaomi Mi Band 4 Global Version Smart Bracelet 0.95" Color Screen 50M Waterproof, 44.99, , $
Protective Film for Xiaomi youpin haylou ls02 ls01 Solar ls05 Color I Band 5, 5.97, , $
IP68 Waterproof SmartWatch ECG PPG Blood Pressure Heart Rate sports Wristwatch, 48.75, 52.99, $
Bluetooth Smart Watch Heart Rate Blood Pressure Bracelet For iPhone XS Xiaomi Mi, 38.63, 44.99, $

Utdata av namn, pris och valuta

Resultatformat:

$products.format('Namn: $title, Pris: $price, Valuta: $currency\n')

Exempel på resultat:

Namn: Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor, Pris: 63.99, Valuta: $
Namn: Original Xiaomi Mi Band 6 Wristband AMOLED Color Screen - 2021!, Pris: 20.00, Valuta: $
Namn: Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor, Pris: 63.99, Valuta: $
Namn: Xiaomi Mi Band 6 Smart fitness bracelet, Pris: 62.99, Valuta: $
Namn: Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor Sports Bracelet, Pris: 63.99, Valuta: $
Namn: MI 6 Band 6 Smart 1.56" AMOLED Retina Colourful Screen Blood SpO2 Heart Fitness, Pris: 82.74, Valuta: $
Namn: Xiaomi Mi Smart Band 6 1.56' Amoled Blood Oxygen Fitness Tracker Sport Bracelet, Pris: 65.99, Valuta: $

Utdata av namn, pris och skillnad mellan nytt och gammalt pris i en CSV-tabell

Resultatformat:

[% FOREACH item IN products;  
    diff = item.old_price ? item.old_price - item.price : 0; 
    tools.CSVline(item.title, item.price, diff);
END %]

Exempel på resultat:

"Xiaomi Mi Band 4 Global Version Smart Bracelet 0.95"" Color Screen 50M Waterproof",44.99,0
"IP68 Waterproof SmartWatch ECG PPG Blood Pressure Heart Rate sports Wristwatch",48.75,4.24
"Protective Film for Xiaomi youpin haylou ls02 ls01 Solar ls05 Color I Band 5",5.97,0
"Bluetooth Smart Watch Heart Rate Blood Pressure Bracelet For iPhone XS Xiaomi Mi",38.63,6.36
"Men Sports Smart Watch ECG PPG Blood Pressure Heart Rate Phone Mate for iPhone",48.75,4.24

Utdata av resultat med datum för dataskrapning i en CSV-tabell

Resultatformat:

[% USE date;
d = date.format(mytime, format = "%Y %d %H:%M");
FOREACH item IN products;  
    tools.CSVline(d, item.title, item.price, item.link);
END %]

Exempel på resultat:

"2021 16 18:23","Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor",63.99,https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/124659632314
"2021 16 18:23","Original Xiaomi Mi Band 6 Wristband AMOLED Color Screen - 2021!",20.00,https://www.ebay.com/itm/Original-Xiaomi-Mi-Band-6-Wristband-AMOLED-Color-Screen-2021/153992931607
"2021 16 18:23","Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor",63.99,https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/133729672537
"2021 16 18:23","Xiaomi Mi Band 6 Smart fitness bracelet",62.99,https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Smart-fitness-bracelet/353451130097
"2021 16 18:23","Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor Sports Bracelet",63.99,https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor-Sports-Bracelet/164811614943

Utdata i en CSV-tabell

Resultatformat:

[% FOREACH item IN products; 
 tools.CSVline(item.link, item.title, item.price, item.old_price, item.rating, item.reviews_count); 
END %]

Inledande text:

Länk till produkt, Produktnamn, Pris, Gammalt pris, Betyg, Antal recensioner

Exempel på resultat:

Länk till produkt, Produktnamn, Pris, Gammalt pris, Betyg, Antal recensioner
https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/124659632314,"Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor",63.99,,,
https://www.ebay.com/itm/Original-Xiaomi-Mi-Band-6-Wristband-AMOLED-Color-Screen-2021/153992931607,"Original Xiaomi Mi Band 6 Wristband AMOLED Color Screen - 2021!",20.00,,,
https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-1-56-AMOLED-Tracker-Heart-Rate-Bracelet/284256075838,"Xiaomi Mi Band 6 Blood Oxygen Fitness 1.56"" AMOLED Tracker Heart Rate Bracelet",60.79,63.99,,
https://www.ebay.com/itm/Xiaomi-Mi-Smart-Band-6-1-56-AMOLED-Blood-Oxygen-Fitness-Tracker-Sport-Bracelet/194003608270,"Xiaomi Mi Smart Band 6 1.56' AMOLED Blood Oxygen Fitness Tracker Sport Bracelet ",61.99,77.69,,
https://www.ebay.com/itm/Xiaomi-Mi-band-6-Xiaomi-smart-2021-Newest-1-56/154411997162,"Xiaomi Mi band 6 Xiaomi smart 2021 Newest 1.56'",58.99,,,

tips

I Resultatformat används mallmotorn Template Toolkit för att mata ut arrayen $products i en FOREACH-loop.

För att alternativet "Prepend text" ska vara tillgängligt i Uppgiftsredigeraren måste du aktivera "More options". I "Prepend text" skriver vi kolumnnamnen separerade med kommatecken och gör den andra raden tom.

Spara i SQL-format

Resultatformat:

[% FOREACH item IN products;
    "INSERT INTO products VALUES('" _ item.title _ "', '"; item.link _ "', '"; item.price _ "', '"; item.currency _ "')\n";
END %]

Exempel på resultat:

INSERT INTO products VALUES('Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor', 'https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/124659632314', '63.99', '$')
INSERT INTO products VALUES('Original Xiaomi Mi Band 6 Wristband AMOLED Color Screen - 2021!', 'https://www.ebay.com/itm/Original-Xiaomi-Mi-Band-6-Wristband-AMOLED-Color-Screen-2021/153992931607', '20.00', '$')
INSERT INTO products VALUES('Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor', 'https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/133729672537', '63.99', '$')
INSERT INTO products VALUES('Xiaomi Mi Band 6 Smart fitness bracelet', 'https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Smart-fitness-bracelet/353451130097', '62.99', '$')
INSERT INTO products VALUES('Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor Sports Bracelet', 'https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor-Sports-Bracelet/164811614943', '63.99', '$')
INSERT INTO products VALUES('MI 6 Band 6 Smart 1.56&#34; AMOLED Retina Colourful Screen Blood SpO2 Heart Fitness', 'https://www.ebay.com/itm/MI-6-Band-6-Smart-1-56-AMOLED-Retina-Colourful-Screen-Blood-SpO2-Heart-Fitness/224414937192', '82.74', '$')

Dumpa resultat till JSON

Allmänt resultatformat:

[% IF notFirst;
  ",\n";
ELSE;
  notFirst = 1;
END;

obj = {};
obj.query = query;
obj.items = [];

FOREACH item IN p1.products;
    obj.items.push({
        link = item.link
        title = item.title
        price = item.price
    });
END;

obj.json %]

Starttext:

Sluttext:

Exempel på resultat:

[
    {
        "query": "mi band 6",
        "items": [
            {
                "link": "https://www.ebay.com/itm/Mens-Smart-Watch-Fitness-Activity-Tracker-Wristwatch-for-iPhone-Samsung-Android/233817567751",
                "title": "Men's Smart Watch Fitness Activity Tracker Wristwatch for iPhone Samsung Android",
                "price": "48.75"
            },
            {
                "link": "https://www.ebay.com/itm/Mens-Smart-Watch-Fitness-Activity-Tracker-Wristwatch-for-iPhone-Samsung-Android/233817567751",
                "title": "Men's Smart Watch Fitness Activity Tracker Wristwatch for iPhone Samsung Android",
                "price": "48.75"
            },
            {
                "link": "https://www.ebay.com/itm/Mens-Smart-Watch-Fitness-Activity-Tracker-Wristwatch-for-iPhone-Samsung-Android/233817567751",
                "title": "Men's Smart Watch Fitness Activity Tracker Wristwatch for iPhone Samsung Android",
                "price": "48.75"
            },
            {
                "link": "https://www.ebay.com/itm/Mens-Smart-Watch-Fitness-Activity-Tracker-Wristwatch-for-iPhone-Samsung-Android/233817567751",
                "title": "Men's Smart Watch Fitness Activity Tracker Wristwatch for iPhone Samsung Android",
                "price": "48.75"
            }
        ]
    }
]

tips

För att alternativen "Prepend text" och "Append text" ska vara tillgängliga i Uppgiftsredigeraren måste du aktivera "More options".

Möjliga inställningar

anteckning

Allmänna inställningar för alla scrapers

Parameter	Standardvärde	Beskrivning
Pages count	`5`	Hur många sidor med resultat som ska hämtas (1–50)
Items Per Page	`60`	Produkter per sida: 60, 120 eller 240
Ebay domain	`United States`	Sökzon; språk och valuta är de som domänen returnerar

Översikt av scrapern​

Insamlade data​

Användningsfall​

Frågor​

Frågesubstitutioner​

Exempel på resultatutdata​

Utdata av namn, nytt och gammalt pris, valuta​

Utdata av namn, pris och valuta​

Utdata av namn, pris och skillnad mellan nytt och gammalt pris i en CSV-tabell​

Utdata av resultat med datum för dataskrapning i en CSV-tabell​

Utdata i en CSV-tabell​

Spara i SQL-format​

Dumpa resultat till JSON​

Möjliga inställningar​

Översikt av scrapern

Insamlade data

Användningsfall

Frågor

Frågesubstitutioner

Exempel på resultatutdata

Utdata av namn, nytt och gammalt pris, valuta

Utdata av namn, pris och valuta

Utdata av namn, pris och skillnad mellan nytt och gammalt pris i en CSV-tabell

Utdata av resultat med datum för dataskrapning i en CSV-tabell

Utdata i en CSV-tabell

Spara i SQL-format

Dumpa resultat till JSON

Möjliga inställningar