Adlandırılmış varlık ayıklama içgörüleri alma
Adlandırılmış varlık ayıklama
Adlandırılmış varlık ayıklama, medya dosyalarındaki ses ve görüntülerde görünen konumlar, kişiler ve markalar hakkında içgörüler elde etmek için Doğal Dil İşleme (NLP) kullanır. Adlandırılmış varlık ayıklama içgörüleri transkripsiyon ve optik karakter tanıma (OCR) kullanır.
Adlandırılmış varlıklar kullanım örnekleri
- Bağlamsal reklam, örneğin İtalya'daki görüntüleri takip eden bir Pizza zinciri için reklam vermek.
- Haberler için özellik hikayeleri oluşturmak üzere kişiler veya konumlar hakkında içgörüler için derin arama medya arşivleri.
- Görme engelliler için erişilebilirliği geliştirmek için OCR işleme yoluyla görüntülerin sözlü bir açıklamasını oluşturma( örneğin filmlerdeki bir arka plan anlatıcısı).
- Marka adlarına ilişkin içgörüler ayıklama.
Web portalı ile içgörü JSON'unu görüntüleme
Bir videoyu karşıya yükleyip dizine ekledikten sonra, web portalını kullanarak indirmek için JSON biçiminde içgörüler sağlanır.
- Kitaplık sekmesini seçin.
- Çalışmak istediğiniz medyayı seçin.
- İndir'i ve İçgörüler 'i (JSON) seçin. JSON dosyası yeni bir tarayıcı sekmesinde açılır.
- Örnek yanıtta açıklanan anahtar çiftini arayın.
API’yi kullanma
- Video Dizini Al isteğini kullanın. geçirmenizi
&includeSummarizedInsights=falseöneririz. - Örnek yanıtta açıklanan anahtar çiftlerini arayın.
Örnek yanıt
namedPeople: [
{
referenceId: "Satya_Nadella",
referenceUrl: "https://en.wikipedia.org/wiki/Satya_Nadella",
confidence: 1,
description: "CEO of Microsoft Corporation",
seenDuration: 33.2,
id: 2,
name: "Satya Nadella",
appearances: [
{
startTime: "0:01:11.04",
endTime: "0:01:17.36",
startSeconds: 71,
endSeconds: 77.4
},
{
startTime: "0:01:31.83",
endTime: "0:01:37.1303666",
startSeconds: 91.8,
endSeconds: 97.1
},
Önemli
Tüm VI özellikleri için saydamlık notunun genel bakışını okumak önemlidir. Her içgörüde kendi saydamlık notları da vardır:
Adlandırılmış varlıklar notları
- Daha doğru algılamaları teşvik etmek, ses ve görüntülerin kalitesini denetlemek, düşük kaliteli ses ve görüntüler algılanan içgörüleri etkileyebilir.
- Adlandırılmış varlıklar yalnızca ses ve görüntülerdeki içgörüleri algılar. Marka adında logolar algılanmayabilir.
- Kolluk kuvvetleri tarafından adlandırılmış varlıklar kullanılırken her zaman sesin parçalarını algılamayabileceğini dikkatli bir şekilde göz önünde bulundurun. Adil ve yüksek kaliteli kararlar almak için, adlandırılmış varlıkları her zaman insan gözetimiyle birleştirin.
- Kişiler ve gruplar üzerinde ciddi olumsuz etkileri olabilecek kararlar için adlandırılmış varlıkları kullanmayın. Metin ayıklayan makine öğrenmesi modelleri algılanmamış veya yanlış metin çıkışına neden olabilir. Yanlış çıkışa dayalı kararlarınızın, kaçınılması gereken ciddi olumsuz etkileri olabilir. Bireyler üzerinde ciddi etkilere neden olabilecek belirlemeleri her zaman insan incelemesine dahil etmelisiniz.
Bileşenler
Adlandırılmış varlık ayıklama yordamı sırasında medya dosyası aşağıdaki gibi işlenir:
| Bileşen | Tanım |
|---|---|
| Kaynak dosya | Kullanıcı dizin oluşturmak için kaynak dosyayı karşıya yükler. |
| Metin ayıklama | - Ses dosyası, transkripsiyonu ayıklamak için Konuşma Hizmetleri API'sine gönderilir. - Örneklenen çerçeveler, OCR'yi ayıklamak için Azure AI Vision API'sine gönderilir. |
| Analiz | İçgörüler daha sonra varlıkları ayıklamak için Metin Analizi API'sine gönderilir. Örneğin, Microsoft, Paris veya Paul veya Sarah gibi bir kişinin adı. |
| İşleme ve birleştirme | Sonuçlar daha sonra işlenir. Uygun olduğunda Wikipedia bağlantıları eklenir ve markalar Video Indexer yerleşik ve özelleştirilebilir marka listeleri aracılığıyla tanımlanır. |
| Güvenilirlik değeri | Her adlandırılmış varlığın tahmini güvenilirlik düzeyi 0 ile 1 arasında bir aralık olarak hesaplanır. Güvenilirlik puanı, sonucun doğruluğundaki kesinliği temsil eder. Örneğin, %82'lik bir kesinlik 0,82 puanı olarak gösterilir. |