SE::Yandex::Video - Yandex Video Veri Kazıyıcı

Veri kazıyıcı incelemesi

Yandex video arama veri kazıyıcı. SE::Yandex::Video veri kazıyıcı sayesinde video bağlantı veritabanları alabilirsiniz. Sorguları Yandex arama çubuğuna girdiğiniz şekilde kullanabilirsiniz.

A-Parser işlevselliği, Yandex veri çekme ayarlarını daha sonra kullanmak üzere kaydetmenize (presetler), veri çekme zamanlamasını ayarlamanıza ve çok daha fazlasına olanak tanır. Mümkün olan maksimum sonuç sayısını elde etmek için otomatik sorgu çoğaltma, dosyalardan alt sorgu ekleme, sayısal-alfabetik kombinasyonları ve listeleri tarama özelliklerini kullanabilirsiniz.

Sonuçların kaydedilmesi, sonuçlara ek mantık uygulamanıza ve verileri JSON, SQL ve CSV dahil olmak üzere çeşitli formatlarda çıktı almanıza olanak tanıyan yerleşik güçlü şablon oluşturucu Template Toolkit sayesinde ihtiyacınız olan biçimde ve yapıda mümkündür.

DEMO'ya git A-Parser Pro Satın Al ($299)

Toplanan veriler

Video bağlantıları
Çapa metinleri (Anchor)
Snippet'lar
Videonun barındığı servis adı
Süre, izlenme sayısı ve yayınlanma tarihi
Poster ve video önizleme bağlantıları
Video kısa özeti
Videodaki bölümlerin listesi
Web sitelerine yerleştirmek için kod

Özellikler

Filtre desteği (kısa, yeni)
Sonuç sayfası sayısını seçme
Oturum desteği

Kullanım durumları

Blogları, tüp sitelerini, doorway sayfalarını doldurmak için video toplama...
Metin verisi toplama

Sorgular

Sorgu olarak arama ifadelerini belirtmeniz gerekir, örneğin:

Cats
Football  
Waterfall  
Speak in english   
cars

Sorgu değişimleri

Sorguları çoğaltmak için yerleşik makroları kullanabilirsiniz, örneğin çok büyük bir forum veritabanı almak istiyorsak, farklı dillerde birkaç ana sorgu belirtelim:

forum
forum
foro
论坛

Sorgu formatında a'dan zzzz'ye kadar karakter taramasını belirtelim; bu yöntem arama sonuçlarını maksimum düzeyde döndürmeye ve birçok yeni benzersiz sonuç elde etmeye olanak tanır:

$query {az:a:zzzz}

Bu makro, her bir orijinal arama sorgusu için 475254 ek sorgu oluşturacaktır; bu da toplamda 4 x 475254 = 1901016 arama sorgusu demektir. Rakam etkileyici olsa da A-Parser için bu hiç sorun değildir. Dakikada 2000 sorgu hızıyla böyle bir görev sadece 16 saatte tamamlanacaktır.

Sonuç çıktı seçenekleri

A-Parser, yerleşik şablon oluşturucu Template Toolkit sayesinde sonuçların esnek bir şekilde formatlanmasını destekler; bu da sonuçları serbest formda veya CSV ya da JSON gibi yapılandırılmış formatlarda çıktı almasına olanak tanır.

Varsayılan çıktı

Sonuç formatı:

$serp.format('$link\n')

Sonuç örneği:

http://www.youtube.com/v/lcYzh7IjJj0
http://www.youtube.com/watch?v=VD2h2YUY_WQ
http://www.youtube.com/watch?v=UPOUE8ObCy8
http://www.youtube.com/watch?v=Ha9Q1kHqCHA
http://www.youtube.com/watch?v=P5rlifhgewY
https://zen.yandex.ru/video/watch/61099fa859eaef364db8b3cd?f=video
http://www.youtube.com/v/-cvEA8897Fc?fs=0
https://zen.yandex.ru/video/watch/625ed4e3099b9b7b81b17e3b?f=video
http://rutube.ru/video/016773a106036e9d3cd619ace97011e0/
http://rutube.ru/video/e54b2392b7dd3fe57fed6002aba5f833/
http://rutube.ru/video/8fe868740089c3557d6d54e86ceca6a1/
http://www.youtube.com/v/OuOK2fEPdMU
http://www.youtube.com/watch?v=UcbmVFYp4Lg
http://www.youtube.com/watch?v=JgJE4oQf-Gs
http://www.youtube.com/watch?v=ektN1-ptnDE

CSV tablosuna çıktı

Sonuç formatı:

[% FOREACH item IN serp;
    tools.CSVline(query, item.link, item.anchor, item.prevPoster, item.duration, item.views);
END %]

Sonuç örneği:

test,http://www.youtube.com/v/lcYzh7IjJj0,"<b>Test</b> 10 fotoğraf yardımıyla IQ testi",https://avatars.mds.yandex.net/get-vthumb/4322300/5f649751351f727400bfd1be494fd6b4/564x318_1,07:09,"2,5 milyon izlenme"
test,http://www.youtube.com/watch?v=VD2h2YUY_WQ,"Online <b>Test</b> Pad -kendi başınıza nasıl <b>test</b>",https://avatars.mds.yandex.net/get-vthumb/1023253/fffa43fb9402c436d6881537bb9aee9a/564x318_1,05:38,"16,6 bin izlenme"
test,http://www.youtube.com/watch?v=UPOUE8ObCy8,"Basit eğitici <b>test</b>.  Online <b>Test</b> Pad",https://avatars.mds.yandex.net/get-vthumb/3435353/fa94c2b60d9bb0fa8cda2d469b6dcf0a/564x318_1,04:16,"76,5 bin izlenme"
test,http://www.youtube.com/watch?v=Ha9Q1kHqCHA,"Online <b>testler</b> ile <b>Test</b> Pad #2",https://avatars.mds.yandex.net/get-vthumb/2032788/4ffd2b149fbfc3de17b67ef92290028e/564x318_1,07:00,"1704 izlenme"
test,http://www.youtube.com/watch?v=P5rlifhgewY,"Bu IQ-<b>testi</b> 5 Soruda Zeka Seviyenizi Gösterecek",https://avatars.mds.yandex.net/get-vthumb/4507451/f3475d744f7841b40912dd933dce65c1/564x318_1,08:01,"606 bin izlenme"
test,https://zen.yandex.ru/video/watch/61099fa859eaef364db8b3cd?f=video,"Spotlight 4 sınıf. Final <b>testi</b>.  Exit <b>test</b>",https://avatars.mds.yandex.net/get-vthumb/3304426/beaeeaba5bfc6c00bcae50c4fa7cf236/564x318_1,09:39,
test,http://www.youtube.com/v/-cvEA8897Fc?fs=0,"English grammar <b>test</b>",https://avatars.mds.yandex.net/get-vthumb/2428342/b5b8a32f0260ce4ac785b6a4f1a8b006/564x318_1,12:35,"597 bin izlenme"
test,https://zen.yandex.ru/video/watch/625ed4e3099b9b7b81b17e3b?f=video,"BU Cevapları Çok Az Kişi Biliyor ""Brain <b>Test</b>"" #1",https://avatars.mds.yandex.net/get-vh/5811343/2a00000180429688a113593b8944b066f53d/564x318_1,17:07,
test,http://rutube.ru/video/016773a106036e9d3cd619ace97011e0/,"Brain oyunu nasıl geçilir <b>Test</b> 2?  Tüm seviyelerin cevapları",https://avatars.mds.yandex.net/get-vthumb/4407993/aa07260f286afde40d15abad02f816af/564x318_1,1:29:03,
test,http://rutube.ru/video/e54b2392b7dd3fe57fed6002aba5f833/,"Brain <b>Test</b> Tam çözüm № 4 Bulmacalar dünyasına dalıyoruz",https://avatars.mds.yandex.net/get-vthumb/467972/c078458de66e698c5680527352261b9d/564x318_1,26:23,
test,http://rutube.ru/video/8fe868740089c3557d6d54e86ceca6a1/,"SpeedTest - İnternet bağlantı hızı testi",https://avatars.mds.yandex.net/get-vthumb/3446066/7cca0b8914479dcfe294b06246ea6df8/564x318_1,05:16,"toplam 223 bin izlenme"

SQL formatında kaydetme

Sonuç formatı:

[%  FOREACH serp;
    "INSERT INTO serp VALUES('" _ query _ "', '";
    link _ "', '";
    snippet.replace("\n", '\n') _ "', '";
    summary.replace("\n", '\n') _ "')\n";
END %]

Sonuç örneği:

INSERT INTO serp VALUES('test', 'http://www.youtube.com/v/lcYzh7IjJj0', '', '00:25 Tahtalı bilmece\nSoru: Burada kaç tahta var?\nCevap: Hiç, çünkü tahtalara fazladan çizgiler çizilmiş ve bir tahta diğerine sorunsuz geçiyor\n01:10 Fil ayaklı bilmece\nSoru: Filin kaç bacağı var?\nCevap: Filin arkada bir bacağı var, diğerleri gerçek değil\n02:00 Penceredeki kadın bilmecesi\nSoru: Bu iki resim arasındaki fark nedir?\nCevap: Sağ alt köşede bir fare deliği var')
INSERT INTO serp VALUES('test', 'http://www.youtube.com/watch?v=VD2h2YUY_WQ', '', '00:01 Giriş\nVideoda testler, anketler, bulmacalar ve mantık oyunları oluşturabileceğiniz online test pad sitesi anlatılıyor.\nBaşlamak için e-posta ile kayıt olmanız gerekiyor.\n00:35 Test oluşturma\nKayıttan sonra kendi testlerinizi, anketlerinizi, bulmacalarınızı ve mantık oyunlarınızı oluşturabilirsiniz.\nVideoda sıfırdan bir test oluşturma gösteriliyor.\n01:06 Soru seçenekleri\nVideoda farklı soru seçeneklerinin nasıl oluşturulacağı gösteriliyor: tekli seçim, metin girişi, boşluk doldurma ve diğerleri.\nHer seçenek için soru ve cevap örnekleri gösteriliyor.')
INSERT INTO serp VALUES('test', 'http://www.youtube.com/watch?v=P5rlifhgewY', '', '00:00 Giriş\nVideo, zeka seviyesini belirlemeye yardımcı olacak beş sorudan oluşan bir IQ testidir.\n04:00 Test sonuçları\nİlk cevap seçenekleri seçilirse mutluluk seviyesi yüksek, zeka ortalamadır.\nİkinci cevap seçenekleri seçilirse zeka seviyesi yüksek, mutluluk seviyesi ortalamadır.\nFarklı cevap seçenekleri seçilirse zeka ve mutluluk seviyesi altın ortadadır.\n07:08 Sonuç\nVideo, test sonuçlarını arkadaşlarla paylaşmaya ve kanala abone olmaya çağırıyor.\n50 bin beğeni gelirse bir test daha hazırlayacaklar.')
INSERT INTO serp VALUES('test', 'https://zen.yandex.ru/video/watch/625ed4e3099b9b7b81b17e3b?f=video', '"Brain <b>Test</b>" ► Tam Çözüm HERKESE İyi Seyirler :) Bağlantılar: Videodaki Müzik: https://www.youtube.com/watch?v=5qap5aO4i9A Discord Sunucu ► https://discord.gg/4JWEu9URwB YouTube ►...', '')
INSERT INTO serp VALUES('test', 'http://rutube.ru/video/016773a106036e9d3cd619ace97011e0/', 'Brain oyununu bitirdim <b>Test</b> 2. Tüm seviyelerin cevaplarını paylaşıyorum. Brain oyununun tüm bölümlerinin çözümü <b>Test</b> 2 tüm bölümler: Nastya ile zayıflıyoruz Hapishaneden kaçış Ajan Bames Jond Bilginler Ailesi Canavar Avcısı Vanya...', '')
INSERT INTO serp VALUES('test', 'http://rutube.ru/video/e54b2392b7dd3fe57fed6002aba5f833/', 'https://www.youtube.com/channel/UCgpWRYOfFZ0whXZ8F26KbUg YouTube kanalı https://t.me/DimaDaimont telegram kanalı https://www.donationalerts.com/r/dimadaimont2 gelişime yardımcı olmak...', '')

Sonuçları JSON'a dökme

Genel sonuç formatı:

[% IF notFirst;
  ",\n";
ELSE;
  notFirst = 1;
END;

obj = {};
obj.query = query;
obj.videos = [];

FOREACH item IN p1.serp;
    obj.videos.push({
        link = item.link
        anchor = item.anchor
        snippet = item.snippet
        service = item.service
        embed = item.embed
    });
END;

obj.json %]

Başlangıç metni:

Bitiş metni:

Sonuç örneği:

[{
  "videos": [
    {
      "embed": "<iframe src=\"//www.youtube.com/embed/lcYzh7IjJj0?enablejsapi=1&amp;wmode=opaque\" frameborder=\"0\" scrolling=\"no\" allowfullscreen=\"1\" allow=\"autoplay; fullscreen; accelerometer; gyroscope; picture-in-picture\" aria-label=\"Video\"></iframe>",
      "link": "http://www.youtube.com/v/lcYzh7IjJj0",
      "snippet": "",
      "anchor": "<b>Test</b> 10 fotoğraf yardımıyla IQ testi",
      "service": "YouTube"
    },
    {
      "embed": "<iframe src=\"//www.youtube.com/embed/VD2h2YUY_WQ?enablejsapi=1&amp;wmode=opaque\" frameborder=\"0\" scrolling=\"no\" allowfullscreen=\"1\" allow=\"autoplay; fullscreen; accelerometer; gyroscope; picture-in-picture\" aria-label=\"Video\"></iframe>",
      "link": "http://www.youtube.com/watch?v=VD2h2YUY_WQ",
      "snippet": "",
      "anchor": "Online <b>Test</b> Pad -kendi başınıza nasıl <b>test</b>",
      "service": "YouTube"
    },
    {
      "embed": "<iframe src=\"//www.youtube.com/embed/UPOUE8ObCy8?enablejsapi=1&amp;wmode=opaque\" frameborder=\"0\" scrolling=\"no\" allowfullscreen=\"1\" allow=\"autoplay; fullscreen; accelerometer; gyroscope; picture-in-picture\" aria-label=\"Video\"></iframe>",
      "link": "http://www.youtube.com/watch?v=UPOUE8ObCy8",
      "snippet": "",
      "anchor": "Basit eğitici <b>test</b>.  Online <b>Test</b> Pad",
      "service": "YouTube"
    },
    {
      "embed": "<iframe src=\"//www.youtube.com/embed/Ha9Q1kHqCHA?enablejsapi=1&amp;wmode=opaque\" frameborder=\"0\" scrolling=\"no\" allowfullscreen=\"1\" allow=\"autoplay; fullscreen; accelerometer; gyroscope; picture-in-picture\" aria-label=\"Video\"></iframe>",
      "link": "http://www.youtube.com/watch?v=Ha9Q1kHqCHA",
      "snippet": "",
      "anchor": "Online <b>testler</b> ile <b>Test</b> Pad #2",
      "service": "YouTube"
    }
  ],
  "query": "test"
}]

ipucu

"Prepend text" ve "Append text" seçeneklerinin Görev Düzenleyici'de kullanılabilir olması için "More options"i etkinleştirmeniz gerekir.

Olası ayarlar

not

Tüm veri kazıyıcılar için ortak ayarlar

Parametre	Varsayılan değer	Açıklama
Pages count	`5`	Veri çekme için sayfa sayısı
New videos	`☐`	Yeni videolar
Short videos	`☐`	Kısa videolar

Veri kazıyıcı incelemesi​

Toplanan veriler​

Özellikler​

Kullanım durumları​

Sorgular​

Sorgu değişimleri​

Sonuç çıktı seçenekleri​

Varsayılan çıktı​

CSV tablosuna çıktı​

SQL formatında kaydetme​

Sonuçları JSON'a dökme​

Olası ayarlar​

Veri kazıyıcı incelemesi

Toplanan veriler

Özellikler

Kullanım durumları

Sorgular

Sorgu değişimleri

Sonuç çıktı seçenekleri

Varsayılan çıktı

CSV tablosuna çıktı

SQL formatında kaydetme

Sonuçları JSON'a dökme

Olası ayarlar