Mit engedélyez az Azure AI Video Indexer az Arc által? előzetes verziója?

  • Cikk

Az Arc által engedélyezett Azure AI Video Indexer egy Azure Arc-bővítményt engedélyező szolgáltatás, amely video- és hangelemzést futtat peremeszközökön. A megoldás úgy lett kialakítva, hogy az Azure Arc-kompatibilis Kubernetesen fusson, és számos videoformátumot támogat, beleértve az MP4-et és más gyakori formátumokat. Számos nyelvet támogat az összes alapszintű hangalapú modellben. Feltételezi, hogy egy Video Indexer-fiók egy bővítményre van leképezve.

Ha még nem ismeri az Azure AI Video Indexert, javasoljuk, hogy először ismerkedjen meg a felhőszolgáltatással.

Mielőtt elkezdené használni az Arc által engedélyezett Azure AI Video Indexert, tekintse át az átláthatósági megjegyzést a használati korlátozások megértéséhez.

Fontos

Az Azure AI Video Indexer bővítmény sikeres üzembe helyezéséhez kötelező előzetesen jóváhagyni az Azure-előfizetés azonosítóját. Először ezzel az űrlappal kell regisztrálnia.

Mi az Az Azure Arc és az Azure Arc-kompatibilis Kubernetes?

Az Azure Arc egy egységes többfelhős és helyszíni felügyeleti platform biztosításával leegyszerűsíti az adatközpontokra, több felhőre és peremhálózatra kiterjedő összetett környezetek irányítását és felügyeletét.

Az Azure Arc-kompatibilis Kubernetes lehetővé teszi, hogy bárhová tartozó Kubernetes-fürtöket csatoljon, így kezelheti és konfigurálhatja őket az Azure-ban. Ha egyetlen vezérlősíkon kezeli az összes Kubernetes-erőforrást, konzisztensebb fejlesztési és üzemeltetési élményt biztosít a natív felhőbeli alkalmazások bárhol és bármely Kubernetes-platformon való futtatásához.

Amikor az Azure Arc-ügynökök üzembe vannak helyezve a fürtben, a rendszer kimenő kapcsolatot létesít az Azure-ral, iparági szabványnak megfelelő SSL használatával az átvitel közbeni adatok védelméhez.

Miután a fürtök csatlakoztak az Azure-hoz, saját erőforrásként jelennek meg az Azure Resource Managerben (ARM), és erőforráscsoportok és címkézés használatával rendszerezhetők.

Ezekkel a cikkekkel többet is megtudhat az Azure Arc és az Azure Arc-kompatibilis Kubernetes szolgáltatásról.

Mi az Az Azure Arc-bővítmény?

A virtuálisgép-bővítmények kis alkalmazások, amelyek üzembe helyezés utáni konfigurációs és automatizálási feladatokat biztosítanak az Azure-beli virtuális gépeken. Ha például egy virtuális géphez szoftvertelepítésre, vírusvédelemre vagy szkript futtatására van szükség, virtuálisgép-bővítmény használható. A bővítményekkel kapcsolatos további információkért tekintse meg az Azure Arc-kompatibilis kiszolgálók virtuálisgép-bővítménykezelését.

Az Azure AI Video Indexer bővítmény telepíti és telepíti az Azure AI Video Indexert a Kubernetes-fürtön.

Az Arc által engedélyezett Összes Azure AI Video Indexer csak az Azure Resource Manager-fiókokat (ARM) támogatja. Az ARM-műveletek elválasztva vannak a videóelemzési műveletektől. Ez a kialakítás lehetővé teszi, hogy elemzést végezzen a peremeszközökön anélkül, hogy fel kellene töltenie a médiaeszközöket az Azure-ba.

Az Arc által engedélyezett Azure AI Video Indexer nem támogatja a klasszikus fiókokat. További információ a klasszikus fiókok kivonásáról: Felkészülés az AMS-kivonásra: VI migrálási és frissítési útmutató

A bővítmény csak közvetlen kapcsolati módban támogatott. A vezérlősík információi a felhőbe kerülnek, például figyelés, használat. Az új bővítményverziók a felhőből töltődnek le. A rendszer nem küld ügyféladatokat, például az indexelt videókat a peremhálózati helyről a felhőbe.

Használati esetek

  • Adatszabályozás – Az AI-t a tartalomhoz viheti, nem pedig fordítva. Használja az Arc által engedélyezett Azure AI Video Indexert, ha nem tudja áthelyezni az indexelt tartalmakat a helyszínről a felhőbe az alábbiak miatt:
    • Rendelet.
    • architektúra-döntéseket.
    • az adattár túl nagy, ami jelentős erőfeszítést jelent.
  • Helyszíni munkafolyamat – Az indexelési folyamat egy helyszíni munkafolyamat része, és csökkenteni szeretné a folyamatot befolyásoló indexelési időtartam késését.
  • Előzetes indexelés – Indexelni szeretne, mielőtt feltöltené a tartalmat a felhőbe. Az egyértelműség érdekében előre megválogathatja a helyszíni video- és/vagy hangarchívumot, majd csak normál és/vagy speciális indexelés céljából töltheti fel a felhőbe.

Példa üzembe helyezésre

Az alábbi blokkdiagram az Azure Arcon futó Azure AI Video Indexer bővítményt mutatja be. Három típus létezik:

  1. Az "A" tárolótípus vizuális és hangbeállításokat is használ.
  2. A B tárolótípus csak látási beállításokat használ. Emellett egyéni modellel is rendelkezik. Az egyéni modell Arc által engedélyezett Azure AI Video Indexerrel való használatáról további információt a Saját AI-modell használata című témakörben talál.
  3. A C tároló csak hangbeállításokat használ.

A bővítményt minden peremeszköz tárolja, és minden eszköz egyetlen Azure AI Video Indexer-fiókkal van társítva, amely az Azure Archoz és a felhőhöz kapcsolódik.

VI Arc blokkdiagram

Támogatott AI-készletek

Az Arc által engedélyezett Azure AI Video Indexer a következő indexelési beállításokat támogatja:

Modell Alapszintű videó Alapszintű hang Alapszintű videó > hang
Átírás ✔️ ✔️
Fordítás ✔️ ✔️
Képszöveg ✔️ ✔️
Kulcskeretek észlelése ✔️ ✔️
OCR ✔️ ✔️
Objektumészlelés ✔️ ✔️
Jelenetészlelés ✔️ ✔️
Felvételészlelés ✔️ ✔️

Az Arc által engedélyezett grafikus Azure AI Video Indexer már felsorolt elérhető készletek

Minimális hardverkövetelmények

Az Arc által engedélyezett Video Indexer bármilyen Arc-kompatibilis Kubernetes-környezetben futtatható.

Az alábbi lista a minimális és ajánlott követelmények, ha a bővítmény egynyelvű támogatást tartalmaz. Ha több beszéd- és fordítástárolót telepít több nyelvvel, ennek megfelelően növelje a hardverkövetelményeket.

Feljegyzés

Ezek az éles környezetekre vonatkozó minimális követelmények. A magas rendelkezésre állás és a méretezhetőség érdekében legalább kétcsomópontos fürt használata ajánlott. Az ajánlott beállítások a fürtszintű beállításokra vonatkoznak, így például ha 2 csomópontja van, minden csomópontnak 16 maggal és 32 GB RAM-mal kell rendelkeznie. Javasoljuk, hogy hozzon létre egy dedikált csomópontkészletet/automatikus méretezési csoportokat a VI-megoldás üzemeltetéséhez.

Konfiguráció Virtuális gépek száma Csomópont CPU-magok száma Csomópont ramja Node Storage Megjegyzések
Minimum 0 32 mag 64 GB 50 GB A Tárolónak támogatnia ReadWriteMany kell a tárolási osztályt
Ajánlott 2 48-64 mag 256 GB 100 GB A Tárolónak támogatnia ReadWriteMany kell a tárolási osztályt

Minimális szoftverkövetelmények

Összetevő Minimumkövetelmények
Operációs rendszer Ubuntu 22.04 LTS vagy bármely Linux-kompatibilis operációs rendszer
Kubernetes 1,26
Azure CLI 2.48.0

Támogatott bemeneti formátumok és kodekek

Videóformátumok

  • AVI (.avi)
  • FLV (H.264 és AAC kodekekkel) (.flv)
  • ISMV (.isma, .ismv)
  • Matroska/WebM (.mkv)
  • MP4 (.mp4, .m4a, .m4v)
  • MXF (.mxf)
  • MPEG2-TS
  • QuickTime (.mov)
  • WAVE/WAV (.wav)
  • Webm
  • Windows Media Video (WMV)/ASF (.wmv, .asf)

Videó-kodekek

Íme a betűrendbe szedett lista:

  • AVC 8 bites/10 bites, legfeljebb 4:2:2, beleértve az AVCIntrát
  • Digitális videó (DV) (AVI-fájlokban)
  • DVCPro/DVCProHD (MXF-tárolóban)
  • HEVC/H.265
  • MPEG-1
  • MPEG-2 (legfeljebb 422 profil és magas szintű; beleértve az olyan változatokat, mint a Sony XDCAM, a Sony XDCAM HD, a Sony XDCAM IMX, a CableLabs® és a D10)
  • MPEG-4 2. rész
  • VC-1/WMV9

Hangkódok legfeljebb két zeneszámig

  • AAC (AAC-LC, AAC-HE és AAC-HEv2)
  • FLAC
  • MPEG 2. réteg
  • MP3 (MPEG-1 Audio Layer 3)
  • VORBIS
  • WAV/PCM
  • Windows Media Audio

Támogatott nyelvek

  • Arab (Szaúd-Arábia)
  • Arab Egyiptom
  • Kínai (egyszerűsített)
  • Angol (Egyesült Államok)
  • Francia
  • Német
  • Olasz
  • Spanyol

Saját modell használata

Az Arc által engedélyezett Azure AI Video Indexer a saját modell használatát is támogatja. A részletekért tekintse meg a Saját modell (BYO) című cikket.

Korlátozások

  • Az indexelés támogatott fájlmérete legfeljebb 2 GB lehet.
  • A bővítmény frissítése:
    • A bővítménytámogatás csak a legújabb verzióra vonatkozik.
    • Javasoljuk, hogy ezt a tulajdonságot állítsa be a auto-upgrade /> értékre true. Ez a beállítás naprakészen tartja a bővítményt.
    • Ha az automatikus frissítés beállítása hamis, a verziófrissítést növekményesen kell elvégezni. A verziók közötti váltás az indexelési folyamatok sikertelenségéhez vezethet.
  • A bővítmény telepítése vagy frissítése után az első index\fordítási folyamat időtartama hosszabb lesz. A hosszabb időtartam az AI-modell képének letöltésének köszönhető. Az időtartam a hálózati sebességtől függően változik.
  • Arc-kompatibilis Kubernetes-fürtönként csak egy Video Indexer-bővítmény helyezhető üzembe.
  • A fürt kötetteljesítménye (a tárolási osztály alapján) jelentős hatással van az indexelési feladat forgalmi időtartamára, különösen azért, mert a keret kinyerése az összes keretet a kötetbe írja.
  • Csak az Azure Portalon beszerzett felhőfiók-hozzáférési jogkivonatokat használhatja. A felhőalapú videóelérési jogkivonatok nem támogatottak, de az API-val a bővítmény-hozzáférési jogkivonatok elérhetők, és minden típust támogatunk.
  • A videós hibaüzenetek memóriakorlátozások miatt nem lesznek tárolva.