Arc tarafından etkinleştirilen Azure AI Video Indexer nedir? (Önizleme)

Arc tarafından etkinleştirilen Azure AI Video Indexer, uç cihazlarda video ve ses analizi çalıştıran Azure Arc uzantısı etkinleştirilmiş bir hizmettir. Çözüm, Azure Arc özellikli Kubernetes üzerinde çalışacak şekilde tasarlanmıştır ve MP4 ve diğer yaygın biçimler de dahil olmak üzere birçok video formatını destekler. Sesle ilgili tüm temel modellerde çeşitli dilleri destekler. Bir Video Indexer hesabının tek bir uzantıyla eşlendiğini varsayar.

Azure AI Video Indexer'ı henüz bilmiyorsanız, önce bulut hizmetini tanımanız önerilir.

Ayrıca Arc tarafından etkinleştirilen Azure AI Video Indexer ile çalışmaya başlamadan önce kullanım kısıtlamalarını anlamak için saydamlık notunu gözden geçirin.

Önemli

Azure AI Video Indexer uzantısını başarıyla dağıtmak için Azure abonelik kimliğinizin önceden onaylanması zorunludur. Önce bu formu kullanarak kaydolmanız gerekir.

Azure Arc ve Azure Arc özellikli Kubernetes nedir?

Azure Arc, tutarlı bir çoklu bulut ve şirket içi yönetim platformu sunarak veri merkezleri, birden çok bulut ve uç genelinde genişleten karmaşık ortamların idaresini ve yönetimini kolaylaştırır.

Azure Arc özellikli Kubernetes, her yerde çalışan Kubernetes kümelerini azure'da yönetebilmeniz ve yapılandırabilmeniz için eklemenize olanak tanır. Tüm Kubernetes kaynaklarınızı tek bir denetim düzleminde yöneterek, buluta özel uygulamaları her yerde ve herhangi bir Kubernetes platformunda çalıştırmak için daha tutarlı bir geliştirme ve işlem deneyimi sağlayabilirsiniz.

Azure Arc aracıları kümeye dağıtıldığında, aktarımdaki verilerin güvenliğini sağlamak için endüstri standardı SSL kullanılarak Azure'a giden bağlantı başlatılır.

Kümeler Azure'a bağlandıktan sonra Azure Resource Manager'da (ARM) kendi kaynakları olarak temsil edilir ve kaynak grupları ve etiketleme kullanılarak düzenlenebilir.

Azure Arc ve Azure Arc özellikli Kubernetes hakkında daha fazla bilgi edinmek için bu makalelere bakın.

Azure Arc uzantısı nedir?

Sanal makine (VM) uzantıları, Azure VM'lerinde dağıtım sonrası yapılandırma ve otomasyon görevleri sağlayan küçük uygulamalardır. Örneğin, bir sanal makine yazılım yüklemesi, virüsten koruma veya içinde bir betik çalıştırma gerektiriyorsa, bir VM uzantısı kullanılabilir. Uzantılar hakkında daha fazla bilgi edinmek için bkz . Azure Arc özellikli sunucularla sanal makine uzantısı yönetimi.

Azure AI Video Indexer uzantısı, Azure AI Video dizin oluşturucusunu yükler ve Kubernetes kümesine dağıtır.

Arc tarafından etkinleştirilen tüm Azure AI Video Indexer yalnızca Azure Resource Manager (ARM) hesaplarını destekler. ARM işlemleri video içgörü işlemlerinden ayrılmıştır. Bu tasarım, medya varlıklarınızı Azure'a yüklemenize gerek kalmadan uç cihazlarınızda analiz gerçekleştirmenizi sağlar.

Arc tarafından etkinleştirilen Azure AI Video Indexer klasik hesapları desteklemez. Klasik hesapların kullanımdan kaldırılması hakkında daha fazla bilgi için bkz . AMS'yi kullanımdan kaldırmaya hazırlanma: VI geçişi ve güncelleştirme kılavuzu

Uzantı yalnızca doğrudan bağlantı modu senaryolarında desteklenir. Denetim düzlemi bilgileri, izleme, kullanım gibi buluta gönderilir. Yeni uzantı sürümleri buluttan indirilir. Hangi videoların dizine eklendiği gibi müşteri verileri uç konumdan buluta gönderilmez.

Kullanım örnekleri

• Veri idaresi : Yapay zekayı içeriğe getirmek yerine tam tersini getirebilirsiniz. Aşağıdaki nedenlerden dolayı dizine alınan içeriği şirket içinden buluta taşıyamıyorsanız Arc tarafından etkinleştirilen Azure AI Video Indexer'ı kullanın:
  • Düzenleme.
  • mimari kararları.
  • veri deposu çok büyük olduğundan, lift and shift önemli bir çaba gerektirir.
• Şirket içi iş akışı : Dizin oluşturma işleminiz şirket içi iş akışının bir parçasıdır ve akışı etkileyen dizin oluşturma süresi gecikme süresini azaltmak istiyorsunuz.
• Önceden dizin oluşturma : İçeriği buluta yüklemeden önce dizin oluşturmak istiyorsunuz. Netlik sağlamak için şirket içi video ve/veya ses arşivinizi önceden sıralayabilir ve ardından yalnızca bulutta standart ve/veya gelişmiş dizin oluşturma amacıyla karşıya yükleyebilirsiniz.

Örnek dağıtım

Aşağıdaki blok diyagramında Azure Arc üzerinde çalışan Azure AI Video Indexer uzantısı gösterilmektedir. Üç tür vardır:

1. Mağaza türü A, hem görüntü hem de ses ön ayarlarını kullanır.
2. Depolama türü B yalnızca görüntü önayarlarını kullanır. Ayrıca özel bir modeli vardır. Arc tarafından etkinleştirilen Azure AI Video Indexer ile özel model kullanma hakkında daha fazla bilgi için bkz . Kendi Yapay Zeka Modelinizi Getirin.
3. C Deposu yalnızca ses ön ayarlarını kullanır.

Uzantı her uç cihazda depolanır ve her cihaz, Azure Arc ve bulut ile arabirim oluşturan tek bir Azure AI Video Indexer hesabıyla ilişkilendirilir.

Desteklenen yapay zeka ön ayarları

Arc tarafından etkinleştirilen Azure AI Video Indexer aşağıdaki dizin oluşturma ön ayarlarını destekler:

Model	Temel Video	Temel Ses	Temel Video ve Ses
Döküm		✔️	✔️
Çeviri		✔️	✔️
Açıklamalı Alt Yazı		✔️	✔️
Anahtar çerçeve algılama	✔️		✔️
OCR	✔️		✔️
Nesne algılama	✔️		✔️
Sahne algılama	✔️		✔️
Çekim algılama	✔️		✔️

En düşük donanım gereksinimleri

Arc tarafından etkinleştirilen Video Indexer, Arc özellikli herhangi bir Kubernetes ortamında çalışacak şekilde tasarlanmıştır.

Uzantı tek dil desteği içeriyorsa aşağıdaki liste en düşük ve önerilen gereksinimlerdir. Çeşitli dillere sahip birden çok konuşma ve çeviri kapsayıcısı yüklerseniz donanım gereksinimlerini buna göre artırın.

Not

Bunlar, üretim ortamı için en düşük gereksinimlerdir. Yüksek kullanılabilirlik ve ölçeklenebilirlik için en az 2 düğümlü küme önerilir. Önerilen ayarlar küme genelindeki ayarlara başvurur; bu nedenle, örneğin, 2 düğümleriniz varsa, her düğümün 16 çekirdeği ve 32 GB RAM'i olmalıdır. VI Çözümünü barındırmak için ayrılmış bir düğüm havuzu / otomatik ölçeklendirme grupları oluşturmanızı öneririz.

Yapılandırma	VM Sayısı	Düğüm CPU Çekirdek Sayısı	Düğüm Ram'i	Düğüm Depolama	Açıklamalar
Minimum	1	32 Çekirdek	64 GB	50 GB	Depolama Depolama Sınıfını desteklemesi ReadWriteMany gerekiyor
Önerilir	2	48-64 Çekirdek	256 GB	100 GB	Depolama Depolama Sınıfını desteklemesi ReadWriteMany gerekiyor

En düşük yazılım gereksinimleri

Bileşen	En Düşük Gereksinimler
İşletim Sistemi	Ubuntu 22.04 LTS veya linux uyumlu işletim sistemleri
Kubernetes	1.26
Azure CLI	2.48.0

Desteklenen giriş biçimleri ve codec bileşenleri

Video biçimleri

• AVI (.avi)
• FLV (H.264 ve AAC codec'leri ile) (.flv)
• ISMV (.isma, .ismv)
• Matroska/WebM (.mkv)
• MP4 (.mp4, .m4a, .m4v)
• MXF (.mxf)
• MPEG2-TS
• QuickTime (.mov)
• WAVE/WAV (.wav)
• Webm
• Windows Media Video (WMV)/ASF (.wmv, .asf)

Video codec'leri

Alfabetik listeniz aşağıdadır:

• AVC 8 bit/10 bit, AVCIntra dahil 4:2:2'ye kadar
• Dijital video (DV) (AVI dosyalarında)
• DVCPro/DVCProHD (MXF kapsayıcısında)
• HEVC/H.265
• MPEG-1
• MPEG-2 (Sony XDCAM, Sony XDCAM HD, Sony XDCAM IMX, CableLabs ve D10 gibi varyantlar® dahil olmak üzere 422 Profile ve Yüksek Düzeye kadar)
• MPEG-4 Bölüm 2
• VC-1/WMV9

İki parçaya kadar ses codec'leri

• AAC (AAC-LC, AAC-HE ve AAC-HEv2)
• FLAC
• MPEG Katman 2
• MP3 (MPEG-1 Ses Katmanı 3)
• VORBİS
• WAV/PCM
• Windows Media Audio

Desteklenen diller

• Arapça (Suudi Arabistan)
• Arapça Mısır
• Basitleştirilmiş Çince
• English (US)
• Fransızca
• Almanca
• İtalyanca
• İspanyolca

Kendi modelinizi getirin

Arc tarafından etkinleştirilen Azure AI Video Indexer, kendi modelinizi getirmeyi de destekler. Ayrıntılar için Kendi Modelinizi Getirin (BYO) makalesine bakın.

Sınırlamalar

• Dizin oluşturma için desteklenen dosya boyutu en fazla 2 GB'tır.
• Uzantı yükseltiliyor:
  • Uzantı desteği yalnızca en son sürüm için geçerlidir.
  • Bu auto-upgrade özelliği olarak trueayarlamanızı öneririz. Bu ayar uzantıyı güncel tutar.
  • Otomatik yükseltme ayarı false olarak ayarlanırsa, sürüm yükseltmesi artımlı olarak yapılmalıdır. Sürümler arasında geçiş yapmak dizin oluşturma işlemlerinin başarısız olmasına neden olabilir.
• Uzantı yükleme veya yükseltme işleminden sonra ilk dizin\çeviri işlemi süresinin daha uzun olmasını bekleyebilirsiniz. Daha uzun süre yapay zeka modeli görüntüsünün indirilmesinden kaynaklanır. Süre, ağ hızına bağlı olarak değişir.
• Arc özellikli Kubernetes kümesi başına yalnızca bir Video Indexer uzantısı dağıtılabilir.
• Kümenin birim performansı (depolama sınıfına göre) özellikle çerçeve ayıklama tüm kareleri birime yazdığından dizin oluşturma işinin ciro süresini önemli ölçüde etkiler.
• Yalnızca Azure portalından alınan bulut hesabı erişim belirteçlerini kullanabilirsiniz. Bulut video erişim belirteçleri desteklenmez, ancak API ile uzantı erişim belirteçleri kullanılabilir ve tüm türleri destekliyoruz.
• Video hata iletileri bellek sınırlamaları nedeniyle depolanmaz.

İlgili makaleler

• GitHub'da Arc örneği tarafından etkinleştirilen Azure AI Video Indexer'i deneyin
• Arc Jumpstart ile etkinleştiren Azure AI Video Indexer'i deneyin
• Arc hızlı başlangıcı tarafından etkinleştirilen Azure AI Video Indexer'ı kullanarak Azure portalında dağıtmayı deneyin