Maps::Yandex - Yandex Haritalar Veri Kazıyıcı

Veri kazıyıcı incelemesi

Yandex Haritalar veri kazıyıcı, kuruluşların iletişim verilerini toplar.

A-Parser'ın işlevselliği, veri çekme ayarlarını ileride kullanmak üzere kaydetmenize (presetler), veri çekme zamanlaması oluşturmanıza ve çok daha fazlasına olanak tanır. Mümkün olan maksimum sonuç sayısını elde etmek için otomatik sorgu çoğaltma, dosyalardan alt sorgu ekleme, alfanümerik kombinasyonları ve listeleri tarama özelliklerini kullanabilirsiniz.

Sonuçların, sonuçlara ek mantık uygulamanıza ve verileri JSON, SQL ve CSV dahil olmak üzere çeşitli formatlarda çıktı almanıza olanak tanıyan yerleşik güçlü şablon motoru Template Toolkit sayesinde ihtiyacınız olan biçim ve yapıda kaydedilmesi mümkündür.

DEMO'ya gitA-Parser Pro Satın Al ($299)

Toplanan veriler

• Kuruluş adı
• Adres ve koordinatlar
• Puan, yorum sayısı ve fiyat politikası
• Kategoriler ve etiketler
• Web sitesi, sosyal ağlar ve telefonlar
• Fotoğraf ve logo bağlantısı
• Açıklama
• Yandex Haritalar'daki kuruluş sayfasının bağlantısı
• İşletmenin çalışma saatleri bilgisi

Özellikler

• Aramanın yapılacağı bölgenin koordinatlarını ve yakınlaştırma (zoom) düzeyini belirtmek zorunludur
• Veri toplama için sayfa sayısını belirleme imkanı
• Sonuçların dilini seçme imkanı
• Captcha'ları aşmak için Antigate kullanma imkanı

Kullanım durumları

• Belirli bir bölgedeki kuruluşların listesini toplama
• Kuruluşların iletişim bilgilerini alma
• Haritalarda kuruluş aramayı içeren diğer tüm seçenekler

Sorgular

Sorgu olarak, anahtar kelimeleri doğrudan Yandex Haritalar arama formuna giriyormuşsunuz gibi belirtmeniz gerekir, örneğin:

pizza

Sonuç çıktı seçenekleri

A-Parser, yerleşik Template Toolkit şablon motoru sayesinde sonuçların esnek bir şekilde formatlanmasını destekler; bu da sonuçları rastgele bir formda veya CSV ya da JSON gibi yapılandırılmış bir biçimde çıktı almasına olanak tanır.

Varsayılan çıktı

Sonuç formatı:

$serp.format('$name ($rating): $address\n')

Sonuçta kuruluşların listesi, puanları ve adresleri görüntülenir:

Pirogi № 1 (4.9): Rusya, Moskova, Bolshiye Kamenshchiki caddesi, 9, str. B
Einstein lounge (4.8): Rusya, Moskova, Taganskaya caddesi, 29, str. 1
Gusto (4.1): Rusya, Moskova, Bolshaya Dmitrovka caddesi, 7/5s1
Friends (4.4): Rusya, Moskova, Krasnobogatyrskaya caddesi, 90, str. 2
Shisha City (4.4): Rusya, Moskova, Vorontsovskaya caddesi, 6, str. 7
Jacks (4.4): Rusya, Moskova, 1-ya Frezernaya caddesi, 2/1s10
Restoran Guilty Pleasure (4.3): Rusya, Moskova, Oruzheyny çıkmazı, 15A
White Fox (4.3): Rusya, Moskova, Bolshoy Drovyanoy çıkmazı, 6

Tüm iletişim verilerinin çıktısı

Sonuç formatı:

$serp.format('$name ($rating): $address, $reviews, $price, $categories, $tags, $site, $phones, $photo, $coordinates, $social, $logo, $description, $link\n')

Sonuç örneği:

Pirogi № 1 (4.9): Rusya, Moskova, Bolshiye Kamenshchiki caddesi, 9, str. B, 256, , Yemek teslimatı, Pizzacılar, Fırınlar, ücretsiz teslimat, kartla ödeme, market teslimatı, yemek teslimatı, https://piroginomerodin.ru/, +7 (499) 642-32-71, +7 (495) 127-78-47, https://avatars.mds.yandex.net/get-altay/4489303/2a000001787d1771aebf8b4b849d986caea1/XXXL, 37.65577,55.738421, https://vk.com/piroginomerodin, https://www.instagram.com/piroginomerodin/, https://avatars.mds.yandex.net/get-tycoon/474201/2a0000016dd037b101f0cd4ad3968416440e/priority-headline-logo, , https://yandex.ru/maps/org/105121172016/
Einstein lounge (4.8): Rusya, Moskova, Taganskaya caddesi, 29, str. 1, 153, 900–1500 ₽, Nargile barlar, Barlar, publar, Entelektüel oyunlar, masa oyunları, yazlık teras, kartla ödeme, iş yemeği, projektör, Wi-Fi, spor yayınları, , +7 (968) 068-99-09, https://avatars.mds.yandex.net/get-altay/2419289/2a000001748889d4246610a4f452790b8eee/XXXL, 37.668036,55.739651, https://www.instagram.com/einstein_lounge/, https://avatars.mds.yandex.net/get-tycoon/1635364/2a00000170a408e3bda96d25bf44857eed75/priority-headline-logo, , https://yandex.ru/maps/org/127811263445/
Gusto (4.1): Rusya, Moskova, Bolshaya Dmitrovka caddesi, 7/5s1, 133, 1500–1700 ₽, Restoranlar, Pizzacılar, iş yemeği, Wi-Fi, paket kahve, paket servis, yazlık teras, kartla ödeme, spor yayınları, http://www.gusto-moscow.ru/, +7 (495) 650-69-22, https://avatars.mds.yandex.net/get-altay/2887807/2a0000017357f4fe86d86cd5d3e300855b86/XXXL, 37.614142,55.760285, https://www.facebook.com/pages/gusto-итальянская-кухня/300193353486996, https://www.instagram.com/gusto.rest/, , , https://yandex.ru/maps/org/1080982853/
Shisha City (4.4): Rusya, Moskova, Vorontsovskaya caddesi, 6, str. 7, 68, 900–1200 ₽, Nargile barlar, Barlar, publar, Antikafe, masa oyunları, engelli otoparkı, kartla ödeme, butik bira, Online ön sipariş, Wi-Fi, spor yayınları, http://www.shishataganka.ru/, +7 (958) 100-62-71, https://avatars.mds.yandex.net/get-altay/212783/2a0000015d991abf6d89fa812daac5491c4f/XXXL, 37.654414,55.739423, https://vk.com/shishacitytaganka, https://www.facebook.com/shishacitytaganka, https://www.instagram.com/shishacitytaganka, https://avatars.mds.yandex.net/get-tycoon/479792/2a000001746e2044d0177e25adeba8e943ac/priority-headline-logo, , https://yandex.ru/maps/org/1695943598/

CSV tablosuna çıktı

Sonuç formatı:

[% FOREACH serp; 
    tools.CSVline(name, rating, address, reviews, price);
END %]

Sonuç örneği:

"Pirogi № 1",4.9,"Rusya, Moskova, Bolshiye Kamenshchiki caddesi, 9, str. B",256,
"Einstein lounge",4.8,"Rusya, Moskova, Taganskaya caddesi, 29, str. 1",153,"900–1500 ₽"
Gusto,4.1,"Rusya, Moskova, Bolshaya Dmitrovka caddesi, 7/5s1",134,"1500–1700 ₽"
"Shisha City",4.4,"Rusya, Moskova, Vorontsovskaya caddesi, 6, str. 7",68,"900–1200 ₽"
"Nargile Kult Game",4.5,"Rusya, Moskova, Shabolovka caddesi, 2",66,"1200–1500 ₽"

Sonuçların JSON formatında dökümü

Genel sonuç formatı:

[% IF notFirst;
  ",\n";
ELSE;
  notFirst = 1;
END;

obj = {};
obj.query = query;
obj.serp = [];

FOREACH item IN p1.serp;
    obj.serp.push({
        name = item.name
        rating = item.rating
        address = item.address
        phones = item.phones
    });
END;

obj.json %]

Başlangıç metni:

[

Bitiş metni:

]

Sonuç örneği:

[{
    "query": "pizza",
    "serp": [
        {
            "name": "Pirogi № 1",
            "address": "Rusya, Moskova, Bolshiye Kamenshchiki caddesi, 9, str. B",
            "phones": "+7 (499) 642-32-71, +7 (495) 127-78-47",
            "rating": "4.9"
        },
        {
            "name": "Einstein lounge",
            "address": "Rusya, Moskova, Taganskaya caddesi, 29, str. 1",
            "phones": "+7 (968) 068-99-09",
            "rating": "4.8"
        },
        {
            "name": "Gusto",
            "address": "Rusya, Moskova, Bolshaya Dmitrovka caddesi, 7/5s1",
            "phones": "+7 (495) 650-69-22",
            "rating": "4.1"
        },
    ]
}]

ipucu

Görev Düzenleyici'de "Prepend text" ve "Append text" seçeneklerinin kullanılabilir olması için "More options" kısmını etkinleştirmeniz gerekir.

Olası ayarlar

not

Tüm veri kazıyıcılar için ortak ayarlar

Parametre	Varsayılan değer	Açıklama
Coordinates	37.6572693,55.780844	Arama alanının koordinatları, zorunlu parametre — URL'deki gibi (ll=) boylam, enlem, haritadaki düğme ile koordinatları kopyalarken olduğu gibi değil
Zoom	11	Zoom, zorunlu parametre
Pages count	5	Sayfa sayısı
Language	English	Sonuçların dil seçimi
AntiGate preset	default	Util::AntiGate veri kazıyıcısının önceden yapılandırılmış preseti