Chuyển đến nội dung chính

Shop::eBay - công cụ cào dữ liệu kết quả tìm kiếm eBay

img

Tổng quan về công cụ cào dữ liệu​

Sử dụng công cụ cào dữ liệu sản phẩm eBay, bạn có thể thu thập các thẻ sản phẩm từ kết quả tìm kiếm: tên, liên kết, hình ảnh, giá hiện tại và giá cũ, loại tiền tệ, xếp hạng, số lượng đánh giá và số lượng bán hàng. Chỉ hỗ trợ tìm kiếm theo từ khóa — trang sản phẩm, người bán và danh mục không được hỗ trợ làm đầu vào.

Tính năng của A-Parser cho phép lưu các cài đặt cào dữ liệu để sử dụng sau này (preset), thiết lập lịch trình cào dữ liệu và nhiều tính năng khác. Bạn có thể sử dụng tính năng tự động nhân bản truy vấn, thay thế các truy vấn phụ từ tệp, liệt kê các tổ hợp chữ-số và danh sách để nhận được số lượng kết quả tối đa có thể.

Dữ liệu thu thập được​

Dữ liệu thu thập được

Mảng $products (thẻ sản phẩm trong kết quả):

  • Tên ($products.$i.title)
  • Liên kết ($products.$i.link) — không bao gồm tham số truy vấn
  • Hình ảnh ($products.$i.image)
  • Giá ($products.$i.price) — dạng chuỗi; các khoảng giá được nối bằng dấu cách
  • Giá cũ ($products.$i.old_price)
  • Loại tiền tệ ($products.$i.currency)
  • Xếp hạng ($products.$i.rating)
  • Số lượng đánh giá ($products.$i.reviews_count)
  • Số lượng bán hàng ($products.$i.number_sales) — để trống nếu không có trên thẻ hoặc chỉ có "sold out"
  • Thông tin sơ cấp ($products.$i.light_highlight)
  • Thông tin thứ cấp ($products.$i.secondary_info)

Nếu trường thông tin không có trên thẻ — biến sẽ để trống (không phải none), nếu không tìm thấy gì — toàn bộ $products sẽ trống.

Ứng dụng​

  • Thu thập liên kết sản phẩm
  • Đánh giá mức độ phổ biến của sản phẩm
  • Theo dõi biến động giá và mức độ phổ biến của sản phẩm

Truy vấn​

Các truy vấn là từ khóa tìm kiếm trên eBay, giống như trong biểu mẫu trên trang web. Tìm kiếm luôn thực hiện trên tất cả các danh mục. Liên kết đến sản phẩm hoặc danh mục không được nhận diện: chuỗi sẽ được đưa vào tìm kiếm nguyên bản, ví dụ:

mi band 6
iPhone 11
kingston CanvasGo+
AMD Ryzen R3 2200U

Thay thế truy vấn​

Bạn có thể sử dụng macro tích hợp để nhân bản truy vấn, ví dụ chúng ta muốn lấy một cơ sở dữ liệu sản phẩm rất lớn theo thương hiệu

philips
sony
xiaomi
samsung

Trong định dạng truy vấn, chúng ta sẽ chỉ định việc liệt kê các ký tự từ a đến zzzz, phương pháp này cho phép xoay vòng kết quả tìm kiếm tối đa và nhận được nhiều kết quả mới duy nhất:

$query {az:a:zzzz}

Macro này sẽ tạo ra 475254 truy vấn bổ sung cho mỗi truy vấn tìm kiếm gốc, tổng cộng sẽ cho ra 4 x 475254 = 1901016 truy vấn tìm kiếm, một con số ấn tượng, nhưng điều này hoàn toàn không phải là vấn đề đối với A-Parser. Với tốc độ 2000 truy vấn mỗi phút, tác vụ này sẽ được xử lý chỉ trong 16 giờ.

Các ví dụ xuất kết quả​

A-Parser hỗ trợ định dạng kết quả linh hoạt nhờ vào công cụ tạo mẫu tích hợp Template Toolkit, cho phép xuất kết quả dưới dạng tùy ý, cũng như dưới dạng cấu trúc như CSV hoặc JSON

Xuất tên, giá mới và cũ, tiền tệ​

Định dạng kết quả:

$products.format('$title, $price, $old_price, $currency\n')

Ví dụ kết quả:

Xiaomi Mi Band 4 Global Version Smart Bracelet 0.95" Color Screen 50M Waterproof, 44.99, , $
Protective Film for Xiaomi youpin haylou ls02 ls01 Solar ls05 Color I Band 5, 5.97, , $
IP68 Waterproof SmartWatch ECG PPG Blood Pressure Heart Rate sports Wristwatch, 48.75, 52.99, $
Bluetooth Smart Watch Heart Rate Blood Pressure Bracelet For iPhone XS Xiaomi Mi, 38.63, 44.99, $

Xuất tên, giá và tiền tệ​

Định dạng kết quả:

$products.format('Tên: $title, Giá: $price, Tiền tệ: $currency\n')

Ví dụ kết quả:

Tên: Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor, Giá: 63.99, Tiền tệ: $
Tên: Original Xiaomi Mi Band 6 Wristband AMOLED Color Screen - 2021!, Giá: 20.00, Tiền tệ: $
Tên: Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor, Giá: 63.99, Tiền tệ: $
Tên: Xiaomi Mi Band 6 Smart fitness bracelet, Giá: 62.99, Tiền tệ: $
Tên: Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor Sports Bracelet, Giá: 63.99, Tiền tệ: $
Tên: MI 6 Band 6 Smart 1.56" AMOLED Retina Colourful Screen Blood SpO2 Heart Fitness, Giá: 82.74, Tiền tệ: $
Tên: Xiaomi Mi Smart Band 6 1.56' Amoled Blood Oxygen Fitness Tracker Sport Bracelet, Giá: 65.99, Tiền tệ: $

Xuất tên, giá và chênh lệch giữa giá mới và cũ vào bảng CSV​

Định dạng kết quả:

[% FOREACH item IN products;  
    diff = item.old_price ? item.old_price - item.price : 0; 
    tools.CSVline(item.title, item.price, diff);
END %]

Ví dụ kết quả:

"Xiaomi Mi Band 4 Global Version Smart Bracelet 0.95"" Color Screen 50M Waterproof",44.99,0
"IP68 Waterproof SmartWatch ECG PPG Blood Pressure Heart Rate sports Wristwatch",48.75,4.24
"Protective Film for Xiaomi youpin haylou ls02 ls01 Solar ls05 Color I Band 5",5.97,0
"Bluetooth Smart Watch Heart Rate Blood Pressure Bracelet For iPhone XS Xiaomi Mi",38.63,6.36
"Men Sports Smart Watch ECG PPG Blood Pressure Heart Rate Phone Mate for iPhone",48.75,4.24

Xuất kết quả kèm ngày cào dữ liệu vào bảng CSV​

Định dạng kết quả:

[% USE date;
d = date.format(mytime, format = "%Y %d %H:%M");
FOREACH item IN products;  
    tools.CSVline(d, item.title, item.price, item.link);
END %]

Ví dụ kết quả:

"2021 16 18:23","Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor",63.99,https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/124659632314
"2021 16 18:23","Original Xiaomi Mi Band 6 Wristband AMOLED Color Screen - 2021!",20.00,https://www.ebay.com/itm/Original-Xiaomi-Mi-Band-6-Wristband-AMOLED-Color-Screen-2021/153992931607
"2021 16 18:23","Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor",63.99,https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/133729672537
"2021 16 18:23","Xiaomi Mi Band 6 Smart fitness bracelet",62.99,https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Smart-fitness-bracelet/353451130097
"2021 16 18:23","Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor Sports Bracelet",63.99,https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor-Sports-Bracelet/164811614943

Xuất vào bảng CSV​

Định dạng kết quả:

[% FOREACH item IN products; 
 tools.CSVline(item.link, item.title, item.price, item.old_price, item.rating, item.reviews_count); 
END %]

Văn bản bắt đầu:

Liên kết sản phẩm, Tên sản phẩm, Giá, Giá cũ, Xếp hạng, Số lượng đánh giá

Ví dụ kết quả:

Liên kết sản phẩm, Tên sản phẩm, Giá, Giá cũ, Xếp hạng, Số lượng đánh giá
https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/124659632314,"Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor",63.99,,,
https://www.ebay.com/itm/Original-Xiaomi-Mi-Band-6-Wristband-AMOLED-Color-Screen-2021/153992931607,"Original Xiaomi Mi Band 6 Wristband AMOLED Color Screen - 2021!",20.00,,,
https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-1-56-AMOLED-Tracker-Heart-Rate-Bracelet/284256075838,"Xiaomi Mi Band 6 Blood Oxygen Fitness 1.56"" AMOLED Tracker Heart Rate Bracelet",60.79,63.99,,
https://www.ebay.com/itm/Xiaomi-Mi-Smart-Band-6-1-56-AMOLED-Blood-Oxygen-Fitness-Tracker-Sport-Bracelet/194003608270,"Xiaomi Mi Smart Band 6 1.56' AMOLED Blood Oxygen Fitness Tracker Sport Bracelet ",61.99,77.69,,
https://www.ebay.com/itm/Xiaomi-Mi-band-6-Xiaomi-smart-2021-Newest-1-56/154411997162,"Xiaomi Mi band 6 Xiaomi smart 2021 Newest 1.56'",58.99,,,
mẹo

Trong Định dạng kết quả, công cụ tạo mẫu Template Toolkit được sử dụng để xuất mảng $products trong vòng lặp FOREACH.

Để tùy chọn "Prepend text" hiển thị trong Trình chỉnh sửa tác vụ, bạn cần kích hoạt "More options". Trong "Prepend text", chúng ta ghi tên các cột cách nhau bằng dấu phẩy và để dòng thứ hai trống.

Lưu dưới định dạng SQL​

Định dạng kết quả:

[% FOREACH item IN products;
    "INSERT INTO products VALUES('" _ item.title _ "', '"; item.link _ "', '"; item.price _ "', '"; item.currency _ "')\n";
END %]

Ví dụ kết quả:

INSERT INTO products VALUES('Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor', 'https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/124659632314', '63.99', '$')
INSERT INTO products VALUES('Original Xiaomi Mi Band 6 Wristband AMOLED Color Screen - 2021!', 'https://www.ebay.com/itm/Original-Xiaomi-Mi-Band-6-Wristband-AMOLED-Color-Screen-2021/153992931607', '20.00', '$')
INSERT INTO products VALUES('Newest 2021 Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor', 'https://www.ebay.com/itm/Newest-2021-Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor/133729672537', '63.99', '$')
INSERT INTO products VALUES('Xiaomi Mi Band 6 Smart fitness bracelet', 'https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Smart-fitness-bracelet/353451130097', '62.99', '$')
INSERT INTO products VALUES('Xiaomi Mi Band 6 Blood Oxygen Fitness Tracker Heart Rate Monitor Sports Bracelet', 'https://www.ebay.com/itm/Xiaomi-Mi-Band-6-Blood-Oxygen-Fitness-Tracker-Heart-Rate-Monitor-Sports-Bracelet/164811614943', '63.99', '$')
INSERT INTO products VALUES('MI 6 Band 6 Smart 1.56" AMOLED Retina Colourful Screen Blood SpO2 Heart Fitness', 'https://www.ebay.com/itm/MI-6-Band-6-Smart-1-56-AMOLED-Retina-Colourful-Screen-Blood-SpO2-Heart-Fitness/224414937192', '82.74', '$')

Dump kết quả sang JSON​

Định dạng kết quả chung:

[% IF notFirst;
  ",\n";
ELSE;
  notFirst = 1;
END;

obj = {};
obj.query = query;
obj.items = [];

FOREACH item IN p1.products;
    obj.items.push({
        link = item.link
        title = item.title
        price = item.price
    });
END;

obj.json %]

Văn bản bắt đầu:

[

Văn bản kết thúc:

]

Ví dụ kết quả:

[
    {
        "query": "mi band 6",
        "items": [
            {
                "link": "https://www.ebay.com/itm/Mens-Smart-Watch-Fitness-Activity-Tracker-Wristwatch-for-iPhone-Samsung-Android/233817567751",
                "title": "Men's Smart Watch Fitness Activity Tracker Wristwatch for iPhone Samsung Android",
                "price": "48.75"
            },
            {
                "link": "https://www.ebay.com/itm/Mens-Smart-Watch-Fitness-Activity-Tracker-Wristwatch-for-iPhone-Samsung-Android/233817567751",
                "title": "Men's Smart Watch Fitness Activity Tracker Wristwatch for iPhone Samsung Android",
                "price": "48.75"
            },
            {
                "link": "https://www.ebay.com/itm/Mens-Smart-Watch-Fitness-Activity-Tracker-Wristwatch-for-iPhone-Samsung-Android/233817567751",
                "title": "Men's Smart Watch Fitness Activity Tracker Wristwatch for iPhone Samsung Android",
                "price": "48.75"
            },
            {
                "link": "https://www.ebay.com/itm/Mens-Smart-Watch-Fitness-Activity-Tracker-Wristwatch-for-iPhone-Samsung-Android/233817567751",
                "title": "Men's Smart Watch Fitness Activity Tracker Wristwatch for iPhone Samsung Android",
                "price": "48.75"
            }
        ]
    }
]
mẹo

Để các tùy chọn "Prepend text" và "Append text" hiển thị trong Trình chỉnh sửa tác vụ, bạn cần kích hoạt "More options".

Các cài đặt có thể​

ghi chú

Cài đặt chung cho tất cả các công cụ cào dữ liệu

Tham sốGiá trị mặc địnhMô tả
Pages count5Số lượng trang kết quả cần lấy (1–50)
Items Per Page60Số sản phẩm trên mỗi trang: 60, 120 hoặc 240
Ebay domainUnited StatesKhu vực tìm kiếm; ngôn ngữ và tiền tệ sẽ theo tên miền tương ứng