SE::Yahoo - Yahoo Arama Sonuçları Veri Kazıyıcı
Veri kazıyıcı incelemesi
Yahoo arama sonuçları veri kazıyıcı. Yahoo veri kazıyıcı sayesinde, daha sonraki kullanımlar için hazır büyük bağlantı veritabanları elde edebilirsiniz. Sorguları, Yahoo arama çubuğuna girdiğiniz şekilde, arama operatörleri (site, ip vb.) dahil olmak üzere kullanabilirsiniz.
A-Parser işlevselliği, Yahoo veri kazıyıcı ayarlarını daha sonra kullanmak üzere kaydetmenize (presetler), veri çekme zamanlaması ayarlamanıza ve çok daha fazlasına olanak tanır. Mümkün olan maksimum sonuç sayısını elde etmek için otomatik sorgu çoğaltma, dosyalardan alt sorgu ekleme, sayısal-alfabetik kombinasyonları ve listeleri tarama özelliklerini kullanabilirsiniz.
Sonuçların kaydedilmesi, sonuçlara ek mantık uygulamanıza ve verileri JSON, SQL ve CSV dahil olmak üzere çeşitli formatlarda çıktı almanıza olanak tanıyan yerleşik güçlü şablon motoru Template Toolkit sayesinde ihtiyacınız olan biçimde ve yapıda mümkündür.
Toplanan veriler
- Arama sonuçlarından bağlantılar, çapalar (anchor) ve snippet'ler
- İlgili anahtar kelimelerin listesi (Related keywords)
- Reklam sonuçları
Özellikler
- Tüm Yahoo arama operatörlerini destekler (site:, ip: vb.)
- Yahoo tarafından sunulan maksimum sonuç sayısını kazır - arama sonuçlarında 100 öğelik 50 sayfa
- Sorgu başına otomatik olarak 1000'den fazla sonucu kazıyabilir - ek karakterler ekler (Parse all results seçeneği)
- İlgili anahtar kelimelere göre derinlemesine veri çekme imkanı (Parse related to level)
- İlgili anahtar kelimeleri arama özelliği
- Arama sonuçlarının zamanını belirtmeyi destekler
Kullanım durumları
- A-Poster, XRumer, AllSubmitter vb. için bağlantı veritabanları toplama
- Anahtar kelimeler için rekabet değerlendirmesi
- Sitelerin backlinklerini (bahsedilmelerini) bulma
- Sitelerin indekslenme durumunu kontrol etme
- Aynı IP adresindeki siteleri bulma
- Savunmasız siteleri arama
- Yahoo veri çekme işlemini şu veya bu şekilde içeren diğer tüm seçenekler
Sorgular
Sorgu olarak, doğrudan Yahoo arama formuna giriliyormuş gibi arama ifadeleri belirtilmelidir, örneğin:
test
pencere İstanbul
site:http://lenta.ru
ip:222.36.12.12
Sorgu çoğaltma
Sorguları çoğaltmak için yerleşik makroları kullanabilirsiniz, örneğin çok büyük bir forum veritabanı elde etmek istiyoruz, farklı dillerde birkaç ana sorgu belirtelim:
forum
forum
foro
论坛
Sorgu formatında a'dan zzzz'ye kadar karakter taramasını belirtelim; bu yöntem arama sonuçlarını maksimum düzeyde döndürmeye ve birçok yeni benzersiz sonuç elde etmeye olanak tanır:
$query {az:a:zzzz}
Bu makro, her bir orijinal arama sorgusu için 475254 ek sorgu oluşturacaktır; bu da toplamda 4 x 475254 = 1901016 arama sorgusu demektir. Rakam etkileyici olsa da, bu A-Parser için hiç sorun değildir. Dakikada 2000 sorgu hızıyla, böyle bir görev sadece 16 saatte tamamlanacaktır.
Operatörlerin kullanımı
Sorgu formatında arama operatörlerini kullanabilirsiniz, böylece listenizdeki her sorguya otomatik olarak eklenecektir:
site:$query
Sonuç çıktı seçenekleri
A-Parser, yerleşik şablon motoru Template Toolkit sayesinde esnek sonuç formatlamayı destekler; bu da sonuçları serbest formda ve CSV veya JSON gibi yapılandırılmış formatlarda çıktı almasına olanak tanır.
Bağlantı listesi dışa aktarma
Pozisyon çıktısı ile bağlantılar + çapalar + snippet'ler
Bağlantıları, çapaları ve snippet'leri CSV tablosuna aktarma
İlgili anahtar kelimeleri kaydetme
Anahtar kelime rekabeti
Bağlantı indeksleme kontrolü
SQL formatında kaydetme
Sonuçları JSON formatında dökme
Sonuçların işlenmesi
A-Parser, sonuçları doğrudan veri çekme sırasında işlemenize olanak tanır; bu bölümde Yahoo veri kazıyıcı için en popüler durumları sunduk.
Bağlantı deduplikasyonu
Alan adına göre bağlantı deduplikasyonu
Alan adlarını ayıklama
Çapa ve snippet'lerden etiketleri kaldırma
İçeriğe göre bağlantı filtreleme
Olası ayarlar
| Parametre adı | Varsayılan değer | Açıklama |
|---|---|---|
| Pages count | 5 | Kazınacak sayfa sayısı (1'den 50'ye kadar) |
| Serp time | All time | SERP zamanı (zamana bağlı arama, "tbs=" parametresi: All time / Past 24 hours / Past week / Past month) |
| Safe Search | Moderate | Güvenli arama seçeneği (Off / Moderate / Strict) |
| Yahoo domain | United States (English) | Yahoo alan adı seçimi |
| Yahoo language | Any | Yahoo dil seçimi, arama dilini seçmenize olanak tanır |
| Yahoo country | Any | Ülke seçimi, aramanın yapılacağı ülkeyi seçmenize olanak tanır |
| Not found is error | ☐ | Sonuç olmamasının hata olarak sayılıp sayılmayacağı |