Chuyển đến nội dung chính

SE::Ask - Công cụ cào dữ liệu kết quả tìm kiếm Google tại Mỹ thông qua Ask.com

img

Tổng quan về công cụ cào dữ liệu

Công cụ cào dữ liệu kết quả tìm kiếm Ask. Nhờ có công cụ cào dữ liệu Ask, bạn có thể thu thập được các cơ sở dữ liệu liên kết lớn, sẵn sàng để sử dụng tiếp. Bạn có thể sử dụng các truy vấn giống hệt như khi nhập vào thanh tìm kiếm của Ask, bao gồm cả các toán tử tìm kiếm (site, inurl, v.v.).

Tính năng của A-Parser cho phép lưu các thiết lập cào dữ liệu của công cụ cào dữ liệu Ask để sử dụng sau này (mẫu thiết lập), đặt lịch trình cào dữ liệu và nhiều tính năng khác. Bạn có thể sử dụng tính năng tự động nhân bản truy vấn, thay thế truy vấn phụ từ tệp, lặp qua các tổ hợp chữ cái - số và danh sách để nhận được số lượng kết quả tối đa có thể.

Việc lưu kết quả có thể thực hiện theo định dạng và cấu trúc mà bạn cần, nhờ vào bộ tạo mẫu mạnh mẽ được tích hợp sẵn Template Toolkit, cho phép áp dụng logic bổ sung cho kết quả và xuất dữ liệu ở nhiều định dạng khác nhau, bao gồm JSON, SQL và CSV.

Dữ liệu thu thập được

  • Liên kết, văn bản neo (anchor) và đoạn trích (snippet) từ kết quả tìm kiếm
  • Các từ khóa liên quan
Dữ liệu thu thập được

Tính năng

  • Cào số lượng kết quả tối đa được trả về - 10 trang
  • Cào lên đến 100 kết quả từ kết quả tìm kiếm Mỹ của Ask.com
  • Khả năng thu thập các từ khóa liên quan

Trường hợp sử dụng

  • Thu thập cơ sở dữ liệu liên kết - cho A-Poster, XRumer, AllSubmitter, v.v.
  • Đánh giá mức độ cạnh tranh của từ khóa
  • Tìm kiếm liên kết ngược (đề cập) của trang web
  • Kiểm tra chỉ mục (indexing) của trang web
  • Tìm kiếm các trang web có lỗ hổng bảo mật
  • Bất kỳ phương án nào khác liên quan đến việc cào dữ liệu Ask.com dưới hình thức này hay hình thức khác

Truy vấn

Trong phần truy vấn, bạn cần chỉ định các cụm từ tìm kiếm, giống hệt như khi nhập trực tiếp vào khung tìm kiếm của Ask.com, ví dụ:

test
cửa sổ Hà Nội

Thay thế truy vấn

Bạn có thể sử dụng các macro tích hợp sẵn để nhân bản truy vấn, ví dụ chúng ta muốn lấy một cơ sở dữ liệu diễn đàn rất lớn, hãy chỉ định một số truy vấn chính bằng các ngôn ngữ khác nhau:

forum
diễn đàn
foro
论坛

Trong định dạng truy vấn, chúng ta chỉ định việc lặp qua các ký tự từ a đến zzzz, phương pháp này cho phép xoay vòng kết quả tìm kiếm tối đa và nhận được nhiều kết quả độc nhất mới:

$query {az:a:zzzz}

Macro này sẽ tạo ra 475254 truy vấn bổ sung cho mỗi truy vấn tìm kiếm gốc, tổng cộng sẽ cho ra 4 x 475254 = 1901016 truy vấn tìm kiếm, một con số ấn tượng, nhưng đó hoàn toàn không phải là vấn đề đối với A-Parser. Với tốc độ 2000 truy vấn mỗi phút, tác vụ này sẽ được xử lý chỉ trong khoảng 16 giờ.

Sử dụng toán tử

Bạn có thể sử dụng các toán tử tìm kiếm trong định dạng truy vấn, theo cách này nó sẽ được tự động thêm vào mỗi truy vấn từ danh sách của bạn:

site:$query

Các tùy chọn xuất kết quả

A-Parser hỗ trợ định dạng kết quả linh hoạt nhờ bộ tạo mẫu tích hợp Template Toolkit, cho phép xuất kết quả dưới dạng tùy ý, cũng như dạng có cấu trúc như CSV hoặc JSON

Xuất danh sách liên kết

Tương tự như trong SE::Google.

Tương tự như trong SE::Google.

Tương tự như trong SE::Google.

Tương tự như trong SE::Google.

Lưu dưới định dạng SQL

Tương tự như trong SE::Google.

Xuất kết quả sang JSON

Tương tự như trong SE::Google.

Xử lý kết quả

A-Parser cho phép xử lý kết quả trực tiếp trong quá trình cào dữ liệu, trong phần này chúng tôi đưa ra các trường hợp phổ biến nhất cho công cụ cào dữ liệu Ask

Tương tự như trong SE::Google.

Tương tự như trong SE::Google.

Trích xuất tên miền

Tương tự như trong SE::Google.

Loại bỏ thẻ khỏi văn bản neo và đoạn trích

Tương tự như trong SE::Google.

Tương tự như trong SE::Google.

Các thiết lập có thể

Tên tham sốGiá trị mặc địnhMô tả
Pages count5Số lượng trang cần cào (từ 1 đến 10)
Use http2Sử dụng http2