Azure AI 影片索引器版本資訊

重新瀏覽此頁面以檢視最新的更新。

為了隨時掌握最新的 Azure AI 影片索引器開發,本文提供下列相關信息:

  • 最新版本
  • 已知問題
  • 錯誤修正
  • 過時的功能

2024 年 3 月

武器的物件偵測

Azure AI 影片索引器現在會偵測到武器。 武器類別包括手槍和步槍。 如需 [特定類別注意事項] 物件偵測檔下武器類別的限制。

2024 年 2 月

無AMS帳戶和移轉指引

  • 所有新的 VI 帳戶視訊封裝、串流和編碼都是由 VI 執行,而且您將無法再建立以 AMS 為基礎的 VI 帳戶。 請參閱新的帳戶建立指南
  • VI 編碼/封裝以 1% 的一般費率計費,免費串流。
  • 您可以將 VI 帳戶從 AMS 型更新為新的無 AMS 帳戶類型。
  • 您可以選擇讓AMS VI資產由VI重新處理和移轉,以便繼續存取您的影片和深入解析。 移轉將於 3 月下旬開始。
  • 影片索引器 webapp 和 Widget 會使用高效能且不再使用 Azure 媒體播放器 的新媒體播放機。

下列文件會引導您完成帳戶和資產移轉程式:

TLS1.3 支援

我們支援 TLS 1.3,這是傳輸層安全性 (TLS) 通訊協定的最新版本,該通訊協定會加密數據,以提供兩個端點之間的安全通道。

部署在瑞典中部和美國西部的 Azure AI 影片索引器3

您現在可以在瑞典中部和美國西部 3 區域中建立 Azure AI 影片索引器付費帳戶。

2024 年一月

新增 LLM 提示內容

您現在可以將影片深入解析連線到大型語言模型(LLM),以取得摘要和問答等工作。 API 會將影片深入解析轉換成「提示就緒」文字格式,以搭配 LLM 使用。 如需詳細資訊,請參閱 使用 LLM 提示的 Azure AI 影片索引器。

2023 年 12 月

新增預設選項 - 基本影片

影片索引器已新增索引預設選項基本影片。 在雲端中編製索引,或使用影片索引器 Azure Arc 延伸模組的邊緣時可以使用。 它是低成本的索引選項,其中包含許多實用的 AI 見解,包括 OCR、物件偵測和視覺標籤。 基本視訊可用來與基本音訊(基本音訊和視訊)或本身一起產生深入解析(僅限基本視訊)。 若要深入瞭解索引編製選項,請參閱 索引設定指南

取得框架 API

您現在可以透過提出 FramesSasUrls 要求,從所選取視訊區段的索引視訊擷取畫面。 如需詳細資訊,請參閱 FrameSelection

自備模型 (預覽)

  • 已新增自定義深入解析的UI支援。
  • 已新增自定義深入解析的搜尋支援。

如需詳細資訊,請參閱 自備 AI 模型

在 Azure AI 影片索引器網站和 API 上依物件搜尋

您現在可以使用搜尋功能,在 Azure AI 影片索引器網站上搜尋具有特定物件(例如汽車、摩托車等)的影片,或使用搜尋要求。

2023 年 11 月

影片索引器已在 11 月發行下列事項:

已開啟 Arc 的 Azure AI 影片索引器 (預覽)

您可以將影片索引器裝載於 Kubernetes 叢集中的內部部署,以用於混合式案例。 如需詳細資訊,請參閱 由 Arc 啟用的 Azure AI 影片索引器概觀。 您也可以遵循教學課程來試用延伸模組。

自備模型 (預覽)

您可以使用自己的自定義 AI 模型,並將數據與影片索引器模型整合。 如需詳細資訊,請參閱 自備 AI 模型

每個影片的自訂標籤和免費文字 (預覽)

您可以將自定義標籤和自由文字新增為影片元數據至影片索引器帳戶中的任何影片。 這可讓您使用與您和企業相關的任何資訊來分類和標註您的影片。 例如,您可以新增標籤,例如「產品示範」、「客戶證詞」或「內部訓練」或免費文字,例如「此影片顯示如何使用我們的新功能 X」或「此影片已於 Y 年會上錄製」。 影片編製索引之後,即可將其新增至影片下方的區域。

根據自訂標籤和自由文字進行搜尋 (預覽)

您可以根據影片的自定義標籤和自由文字來搜尋影片。 這可讓您更輕鬆地且快速地尋找符合準則的影片。 您可以根據所有支持語言的自定義標籤和自由文字進行搜尋,並可將它們與其他搜尋篩選條件結合,例如關鍵詞、臉部、標籤、表情等。您也可以使用進階搜尋語法來執行更複雜的查詢。 例如,您可以搜尋具有卷標 「product demo」 和任意文字 「feature X」 的影片。

我們已新增一些自定義人員模型的改善,可改善整體體驗和精確度。 人員 模型是封閉式 AI 模型,可讓您定型自己的模型,以辨識影片中的特定人員。 新增專案如下:

人員模型品質的指示 (預覽)

您可以取得自定義 人員 模型品質的指示(可憐、公平、良好)。 質量取決於用於標記影像的影像數目,以及您用來標記人員之影像的數目,正確識別人員的機率越高。 例如,識別具有24個已標記影像的人員機率高於識別具有2個已標記影像的人員機率。 您可以在自訂的 人員 模型頁面中看到用於標記每個人的影像數目。

選擇自訂人員模型作為預設值 (預覽)

您現在可以在 VI 帳戶用戶層級上選擇自訂的 人員 模型,因此您不必繼續選取每個影片上傳的模型名稱。 當您上傳需要由自定義 人員 模型分析的影片時,這會節省您的時間和精力。

影片中的未知人員群組 (預覽)

您可以在影片中看到依其外觀相似性分組的未知人員。 這可協助您更輕鬆地且快速地為未知的人員加上標籤,並改善自定義 人員 模型的精確度。 您可以在自定義頁面中 > 看到未知人員的群組選擇 人員 ,然後流覽至 [未知的人員 ] 索引標籤。例如,這可以協助您為當地名人或當地政治家加上標籤。

具有已識別人員名稱最大信賴分數的搜尋結果 (預覽)

您可以搜尋已識別人員的名稱,並在影片中出現人員時取得,且信賴分數上限。 這可協助您決定要探索哪些最相關的影片。 例如,您可以搜尋 「John Smith」,並取得自定義 人員 模型可辨識 John Smith 的影片,以及每個影片的信賴分數。

避免重複的索引上傳

您偶爾會不小心提交相同的索引作業多次。 若要避免這種情況,已新增新的選擇性查詢參數: preventDuplicates。 當設定為 true時,服務會拒絕檔案上傳,並在索引已編製索引時傳回衝突。

如果存在 RFC 1864,上傳 URL MD5 重複檢查會依賴伺服器回應 Content-md5 標頭:儲存提供者常用的 Content-MD5 標頭字段

如果您要重複上傳相同的影片,您可以將 參數設定為 false

2023 年 10 月

新深入解析 - 物件偵測

影片索引器已將新的深入解析物件偵測新增至標準和進階視訊預設。 它可以用來識別和追蹤各種出現在影片中的物件。 若要深入瞭解,請參閱 Azure AI 影片索引器對象偵測概觀

2023 年 9 月

由於2024年6月30日 Azure 媒體服務(AMS)退休,視頻索引器已經宣佈了一些相關的退休。 其中包括 2024 年 6 月 30 日淘汰影片索引器傳統帳戶、API 變更,以及不再支援自適性比特率。 如需完整詳細數據,請參閱與 Azure 媒體服務 (AMS) 淘汰相關的變更。

2023 年 7 月

使用 Azure AI 影片索引器 API 來修訂臉部

您現在可以使用 Azure AI 影片索引器 API 來修訂臉部。 如需詳細資訊,請參閱 使用 Azure AI 影片索引器 API 來修訂臉部。

API 要求限制增加

影片索引器已將 API 要求限制從每分鐘 60 個要求增加到 120 個。

2023 年 6 月

常見問題 - 遵循 Azure 媒體服務 淘汰公告

如需詳細資訊,請參閱 AMS取代常見問題

2023 年 5 月

API 更新

我們引進了可能需要變更現有查詢邏輯的行為變更。 變更位於 [清單] 和 [搜尋 API] 中,尋找下表中目前與新行為之間的詳細變更。 您可能需要更新程序代碼,以利用 新的 API

API 目前 新增 更新
列出影片 • 根據 『IsBase』 布爾參數列出所有影片/專案。 如果未定義 『IsBase』,請列出兩者。
• 傳回所有狀態的影片(進行中/Proccessed/Failed)。
• 列出影片 API 只會傳回所有狀態的影片(含分頁)。
• 列出專案 API 只會傳回專案(具有分頁)。
• 列出影片 API 分為兩個新的 API 清單影片清單專案
• 『IsBase』 參數不再具有意義。
搜尋影片 • 根據 『IsBase』 布爾參數搜尋所有影片/專案。 如果未定義 『IsBase』,請搜尋兩者。
• 在所有州搜尋影片 (進行中/Proccessed/Failed)。
僅搜尋已處理過的影片。 • 搜尋影片 API 只會搜尋影片,而非專案。
• 『IsBase』 參數不再具有意義。
• 搜尋影片 API 只會搜尋已處理過的影片(而不是失敗/InProgress 影片。)

支援 HTTP/2

已新增數據 平面 API 的 HTTP/2 支援。 HTTP/2 透過 HTTP/1.1 提供數個優點,可繼續支援回溯相容性。 HTTP/2 的主要優點之一是提高效能、提高可靠性和降低透過 HTTP/1.1 的系統資源需求。 有了這項變更,我們現在支援影片索引器 入口網站 和數據平面 API 的 HTTP/2。 建議您更新您的程序代碼,以利用這項變更。

主題深入解析改善

我們現在支援IPTC本體學的所有五個層級。

2023 年 4 月

資源健康狀態支援

Azure AI 影片索引器現在已與 Azure 資源健康狀態 整合,可讓您查看每個 Azure AI 影片索引器資源的健康情況和可用性。 Azure 資源健康狀態 也有助於診斷和解決問題,而且您可以設定警示,以在資源受到影響時收到通知。 如需詳細資訊,請參閱 Azure 資源健康狀態 概觀

動畫字元辨識模型已淘汰

動畫 字元辨識 模型已於 2023 年 3 月 1 日淘汰。 針對任何相關問題,請透過 Azure 入口網站 開啟支援票證。

排除敏感性 AI 模型

遵循 Microsoft 負責任 AI 議程,Azure AI 影片索引器現在可讓您在編製媒體檔案索引時排除特定的 AI 模型。 敏感性 AI 模型清單包括:臉部偵測、觀察到的人員、表情、標籤識別。

這項功能目前可透過 API 取得,而且可在進階預設以外的所有預設中使用。

觀察到的人員追蹤改善

如需詳細資訊,請參閱 選擇使用案例時的考慮和限制。

2023 年 3 月

支援防火牆後方的記憶體

最好鎖定記憶體帳戶並停用公用存取,以增強或遵守企業安全策略。 影片索引器現在可以使用受控識別的 Azure 信任服務 例外狀況來存取非公用可存取的記憶體帳戶。 您可以在我們的作法深入瞭解如何設定。

新的自訂語音和發音訓練

Azure AI 影片索引器已新增自訂語音模型體驗。 此體驗包括能夠使用自定義發音數據集來改善辨識錯誤字組、片語或名稱的能力。 自定義模型可用來改善具有產業特定術語的內容轉譯品質。 若要深入瞭解,請參閱 自定義語音模型概觀

觀察到的人員品質改善

觀察的人現在支援坐著的人。 這是除了現有支援站立或行走的人。 這項改進可讓觀察到的人模型更具彈性,並適用於更廣泛的使用案例。 我們也已將模型重新識別和分組演算法改善 50%。 模型現在可以更準確地追蹤和分組多個相機檢視的人員。

觀察到的人員編製索引持續時間優化

我們已將觀察到人員模型的記憶體使用量優化,在使用進階影片分析預設時,索引編製持續時間會降低 60%。 您現在可以更有效率地處理影片畫面,並更快取得結果。

2023 年 2 月

定價

在 2023 年 1 月 1 日,我們引進了進階預設值的進階音訊和視訊 SKU。 這是為了報告每個預設、基本、標準和進階的使用方式,並在 Azure 計費帳單上有自己的相異計量。 您也可以在 Azure 成本分析報告中看到這一點。

從 2 月 1 日起,我們很高興在基本音訊分析、音訊分析和視訊分析 SKU 上宣佈降價 40%。 我們考慮了客戶和市場趨勢的意見反應,以做出會讓他們受益的變更。 藉由降低價格並引進新的進階 SKU,我們提供具競爭力的定價和更多選項,讓客戶能夠平衡成本和功能。 此外,隨著我們持續改善並新增更多 AI 功能,客戶在執行新的或重新編製索引作業時,將能夠利用這些節省成本。

這項變更會自動實作,而且已有 Azure 折扣的客戶除了新的定價之外,還會繼續收到這些變更。

充電 基本音訊分析 標準音訊分析 進階音訊分析 標準影片分析 進階影片分析
每一輸入分鐘 $0.0126 $0.024 $0.04 $0.09 $0.15

網路服務標籤

影片索引器支援使用網路安全性標籤,以允許來自影片索引器IP的網路流量進入您的網路。 從 1 月 22 日起,我們將網路安全性服務標籤從 AzureVideoAnalyzerForMedia 重新命名為 VideoIndexer。 這項變更會要求您更新部署腳本和/或現有的組態。 如需詳細資訊,請參閱我們的 網路安全性檔

2023 年 1 月

通知體驗

Azure AI 影片索引器網站現在有通知面板,可讓您隨時瞭解重要的產品更新,例如服務影響事件、新版本等等。

文字標誌偵測

文字標誌偵測 可讓您自定義要在影片中偵測到的文字標誌。 如需詳細資訊,請參閱 偵測文字標誌

切換目錄

您現在可以使用 Azure AI 影片索引器網站,切換 Entra ID 目錄,並跨租使用者管理 Azure AI 影片索引器帳戶。

語言支援

  • 現在支援新語言:愛爾蘭文、保加利亞文、加泰羅尼亞文、希臘文、愛沙尼亞文、克羅埃西亞文、拉脫維亞文、羅馬尼亞文、斯洛伐克文、斯洛維尼亞文、泰魯古語、馬來亞拉姆語、坎納達、冰島文、亞美尼亞文、古吉拉提文、馬來語和泰米爾語。
  • 使用 API 取得所有支援的語言: 取得支持的語言

如需詳細資訊,請參閱 支援的語言

臉部分組

大幅減少UI中低品質臉部偵測次數,並 insights.json。 透過改善的群組演算法來提升品質和可用性。

2022 年 11 月

演講者的名稱現在可以從 Azure AI 影片索引器網站編輯

您現在可以使用 Azure AI 影片索引器網站,新增說話者、重新命名已識別的說話者,以及修改指派給特定文字記錄行的說話者。 如需如何從 [時程表] 窗格編輯演講者的詳細資訊,請參閱 使用 Azure AI 影片索引器網站編輯演講者。

Azure AI 影片索引器 上傳影片索引 API 提供相同的功能。

2022 年 10 月

新的內建角色:影片索引器受限制查看器

有限的存取視 訊索引器受限制查看器 角色適用於 Azure AI 影片索引器網站 使用者。 角色的允許動作與 Azure AI 影片索引器網站體驗有關

如需詳細資訊,請參閱 使用影片索引器受限制查看器角色管理存取權。

Slate 偵測深入解析 (預覽)

使用進階索引選項為影片編製索引時,會自動識別下列平板偵測 (電影後製作後) 見解:

  • 使用元數據擷取的 Clapperboard 偵測。
  • 數位模式偵測,包括色條。
  • 無文字石板偵測,包括場景比對。

如需詳細資訊,請參閱 Slate 偵測

現在支援 STT(語音轉換文字)、翻譯和搜尋烏克蘭和越南文的來源語言。 這表示 Azure AI 影片索引器網站、Widget 和 API 也支援這些語言的轉譯、翻譯和搜尋功能。

如需詳細資訊,請參閱 支援的語言

透過 API 編輯說話者的名稱

您現在可以使用 Azure AI 影片索引器 API 編輯轉譯中說話者的名稱。

具有信賴分數的文字層級時間批注

現在支援信賴分數的文字層級時間批注。

批註是新增至現有文字的任何類型其他資訊,無論是音訊檔案或源檔的轉譯。

如需詳細資訊,請參閱 檢查文字層級轉譯資訊

啟用索引編製記錄的 Azure 監視器整合

下面所述的新記錄集可讓您更妥善地監視編製索引管線。

Azure AI 影片索引器現在支援索引事件的診斷設定。 您現在可以透過診斷設定將監視上傳的記錄導出至 Azure Log Analytics、儲存體、事件中樞或第三方解決方案,以重新編製媒體檔案的索引。

透過 Azure AI 影片索引器 API 擴充 LID 和 MLID 中支援的語言

使用 Azure AI 影片索引器 API 擴充 LID (語言識別) 和 MLID (多語言識別) 中支援的語言。

下列語言現在可透過 API 支援:阿拉伯文(阿拉伯聯合大公國)、阿拉伯文現代標準、阿拉伯文埃及、阿拉伯文(伊拉克)、阿拉伯文(約旦)、阿拉伯文(科威特)、阿拉伯文(阿曼)、阿拉伯文(卡達)、阿拉伯文(沙烏地阿拉伯)、阿拉伯文、丹麥文、德文、澳大利亞英文、英國英文、英文 美國、西班牙文、西班牙文(墨西哥)、芬蘭文、法文(加拿大)、法文、希伯來文、印度文、義大利文、日文、韓文、挪威文、荷蘭文、波蘭文、葡萄牙文(葡萄牙)、俄文、瑞典文、泰文、土耳其文、烏克蘭文、越南文、中文(簡體)、中文(粵語、繁體中文)。

若要指定在自動偵測時由 LID 或 MLID 識別的語言清單,請呼叫 上傳影片 API,並將 參數設定 customLanguages 為包含上述支援語言最多 10 種語言。 請注意,中指定的 customLanguages 語言會與語言層級進行比較,因此每個語言應該只包含一個地區設定。

如需詳細資訊,請參閱 支援的語言

使用 API 在人員模型中設定信賴等級

使用修補程式人員模型 API 來設定人員模型內臉部辨識的信賴等級。

在封閉式 標題 中檢視喇叭

您現在可以在 Azure AI 影片索引器媒體播放機的封閉式 標題 中檢視喇叭。 如需詳細資訊,請參閱在 Azure AI 影片索引器網站中檢視已關閉的 標題。

使用參數控制臉部和人員周框方塊

新的 boundingBoxes URL 參數會控制在內嵌播放機時設定周框方塊的選項。 如需詳細資訊,請參閱 內嵌小工具

從帳戶設定控制自動執行

控制使用 webapp 開啟時,媒體檔案是否會透過使用者設定自動執行。 流覽至 Azure AI 影片索引器網站 - > 齒輪圖示 (右上角) ->使用者設定 ->自動播放媒體檔案。

從播放程序檢視複製影片標識碼

當您在 Azure AI 影片索引器網站中選取影片時,可以使用複製影片識別碼

原生 Azure 色彩中的新深色主題

在 Azure AI 影片索引器網站選取所需的主題。 選取齒輪圖示 (右上角) ->用戶設定

搜尋或篩選帳戶清單

您可以使用帳戶名稱或區域來搜尋或篩選帳戶清單。 選取 Azure AI 影片索引器網站右上角的 [用戶帳戶]。

2022 年 9 月

以 ARM 為基礎的帳戶正式運作

使用以 Azure 資源管理 (ARM) 為基礎的 付費(無限制) 帳戶,您就可以使用:

若要建立 ARM 型帳戶,請參閱 建立帳戶

2022 年 8 月

更新主題推斷模型

Azure AI 影片索引器主題推斷模型已更新,現在我們會擷取超過 650 萬個主題(例如,涵蓋 Covid 病毒等主題)。 若要受益於最近的模型更新,您需要重新編製影片檔案的索引。

Azure Government 現已提供主題推斷模型

您現在可以在弗吉尼亞州和亞利桑那州的 Azure Government運用 Azure AI 影片索引器付費帳戶中的主題推斷模型。 在此版本中,我們已完成 Azure 全域與 Azure Government 之間的 AI 同位。 若要受益於模型更新,您需要重新編製影片檔案的索引。

Azure AI 影片索引器網站中的會話長度現在是 30 天

Azure AI 影片索引器網站會話長度已延長至 30 天。 您可以保留會話,而不需要每隔 1 小時重新登入一次。

2022 年 7 月

精選服裝深入解析可啟用更有針對性的廣告放置。

深入解析會提供影片中個人所穿的主要項目資訊,以及服裝出現時間戳。 這可讓高品質的影片內內容廣告,其中相關服裝廣告會與影片中檢視的特定時間相符。

若要檢視觀察人員的精選服裝,您必須使用 Azure AI 影片索引器進階影片設定來編製影片索引。 如需精選服裝影像排名方式以及如何檢視此見解的詳細資訊,請參閱 精選服裝

2022 年 6 月

在 Azure 入口網站 中建立影片索引器刀鋒視窗改善

Azure AI 影片索引器現在支援使用系統指派的受控識別或系統,以及使用者為相同資源指派的受控識別來建立新的資源。

您也可以使用 Azure 入口網站 中的 [身分識別] 索引標籤來變更主要受控識別。

名人辨識和臉部識別特徵的有限存取

作為 Microsoft 負責任 AI 承諾的一部分,我們正在設計和發行 Azure AI 影片索引器 – 識別和名人辨識功能。 這些功能旨在保護個人和社會的權利,並促進透明的人類計算機互動。 因此,Azure AI 影片索引器的存取和使用有限 – 識別和名人辨識功能。

身分識別和名人辨識功能需要註冊,且僅適用於 Microsoft 受控客戶和合作夥伴。 想要使用此功能的客戶必須套用並提交 受理表單。 如需詳細資訊,請參閱 Azure AI 影片索引器有限存取

另請參閱下列內容: 公告部落格文章臉部辨識的投資和保護。

2022 年 5 月

文字記錄中的分行

改善換行邏輯,以更好地將文字記錄分割成句子。 新的編輯功能現在可透過 Azure AI 影片索引器網站取得,例如新增一行並編輯該行的時間戳。 如需詳細資訊,請參閱 插入或移除文字記錄行

Azure 監視器整合

Azure AI 影片索引器現在支援稽核事件的診斷設定。 稽核事件的記錄現在可以透過診斷設定導出至 Azure Log Analytics、儲存體、事件中樞或第三方解決方案。

新增專案可讓您更輕鬆地分析數據、監視資源作業,以及建立自動流程以處理事件。 如需詳細資訊,請參閱 監視 Azure AI 影片索引器

影片深入解析改善

物件字元讀取器 (OCR) 改善 60%。 臉部偵測已改善 20%。 卷標精確度在各種影片中提高了 30%。 這些改進功能可立即在所有區域中使用,且不需要客戶進行任何變更。

服務標籤

Azure AI 影片索引器現在是網路服務標籤的一部分。 影片索引器通常需要存取其他 Azure 資源(例如,儲存體)。 如果您使用網路安全組保護您的資源輸入流量,您現在可以選取影片索引器作為內建服務標籤的一部分。 這可簡化安全性管理,因為我們將公用IP填入服務標籤。

名人辨識切換

您現在可以在帳戶層級啟用或停用名人辨識模型(僅限傳統帳戶)。 若要開啟或關閉模型,請移至 模型自定義> 切換開關或關閉模型。 停用模型之後,影片索引器深入解析將不會包含名人模型的輸出,也不會執行名人模型管線。

顯示名人辨識切換的螢幕快照。

Azure AI 影片索引器存放庫名稱

自 5 月 1 日起,我們新更新的 Azure AI 影片索引器小工具存放庫已重新命名。 請改用 https://www.npmjs.com/package/@azure/video-indexer-widgets

2022 年 4 月

已將 媒體 的 Azure 影片分析器重新命名回 Azure AI 影片索引器

截至目前為止,適用於媒體的 Azure 影片分析器產品名稱是 Azure AI 影片索引器和 所有相關資產(入口網站、行銷數據)。 這是對 API 和鏈接沒有任何影響的回溯相容變更。 Azure AI 影片索引器的新標誌:

新標誌

2022 年 3 月

隱藏式輔助字幕檔案現在支援包括說話者的屬性

Azure AI 影片索引器可讓您根據您選擇的封閉式 標題 檔案來包含說話者的特性。 若要包含說話者的屬性,請選取 [下載 -> 隱藏式輔助字幕] -> 選擇關閉的 標題 可下載檔格式 (SRT、VTT、TTML、TXT 或 CSV),然後核取 [包含說話者] 複選框。

小工具供應專案的改善

已進行下列改善:

  • Azure AI 影片索引器小工具在小工具的參數中支持超過1個地區設定。
  • Insights 小工具支援初始搜尋參數和多個排序選項。
  • 深入解析小工具也包含確認步驟,再刪除臉部以避免錯誤。
  • 小工具自定義現在支援寬度作為字串(例如 100%,100vw)。

2022 年 2 月

根據政府雲端中的 ARM 公開預覽 Azure AI 影片索引器帳戶管理

Azure AI 影片索引器網站現在支援以 ARM 為基礎的公開預覽版帳戶管理(請參閱 2021 年 11 月的版本資訊)。

利用開放原始碼來建立 ARM 型帳戶

新增了新的程式碼範例,包括 HTTP 呼叫,以針對解決方案開發人員使用 Azure AI 影片索引器建立、讀取、更新和刪除 (CRUD) ARM API。

2022 年 1 月

改善的音訊效果偵測

已改善音訊效果偵測功能,以在下列類別中提供更好的偵測速率:

  • 人群的反應(歡呼、鼓掌和噓聲),
  • 槍聲或爆炸,
  • 笑聲

如需詳細資訊,請參閱 音訊效果偵測

網站上 STT、翻譯和搜尋的新來源語言支援

Azure AI 影片索引器會在 Azure AI 影片索引器網站上介紹 STT (語音轉換文字)、翻譯和搜尋的來源語言,以及希伯來文 (he-IL)、葡萄牙文 (pt-PT) 和波斯文 (fa-IR) 。 這表示 Azure AI 影片索引器網站和 Widget 也支援這些語言的轉譯、翻譯和搜尋功能。

2021 年 12 月

專案功能現已正式推出

專案功能現已正式推出,並已準備好進行生產力使用。 與「預覽至 GA」轉換相關的定價沒有影響。 請參閱 將影片剪輯新增至您的專案

新來源語言支援 STT、翻譯和 API 層級的搜尋

Azure AI 影片索引器引進了 API 層級上 STT(語音轉換文字)、翻譯和搜尋的來源語言支援(he-IL)、葡萄牙文(pt-PT)和波斯文(fa-IR)。

比對人員偵測功能

使用 Azure AI 影片索引器進階影片設定編製影片索引時,您可以檢視新的相符人員偵測功能。 如果您的媒體檔案中有人員觀察到,您現在可以透過媒體播放機來檢視符合每個人員的特定人員。

2021 年 11 月

根據 ARM 公開預覽 Azure AI 影片索引器帳戶管理

Azure AI 影片索引器引進 Azure Resource Manager (ARM) 型帳戶管理的公開預覽。 您可以利用 ARM 型 Azure AI 影片索引器 API,從 Azure 入口網站 建立、編輯和刪除帳戶。

注意

Government 雲端包含 Azure AI 影片索引器 API 和 Azure 入口網站 中 CRUD ARM 型帳戶的支援。

Azure AI 影片索引器 網站目前不支援。

如需詳細資訊,請移至 建立 Azure AI 影片索引器帳戶

人員 的服裝偵測

使用 Azure AI 影片索引器進階影片設定編製影片索引時,您可以檢視新人的服裝偵測功能。 如果您的媒體檔案中偵測到有人,您現在可以檢視他們透過媒體播放機所穿的服裝類型。

臉部周框方塊 (預覽)

您現在可以在媒體檔案的索引編製期間開啟偵測到臉部的周框方塊。 選擇標準、基本進階索引預設值,即可使用臉部周框方塊功能來為檔案編製索引。

您可以透過播放機啟用周框方塊。

2021 年 10 月

使用 Azure AI 影片索引器套件在應用程式中內嵌小工具

使用新的 Azure AI 影片索引器 (AVAM) @azure/video-analyzer-for-media-widgets npm 套件,將小工具新增 insights 至您的應用程式,並根據您的需求加以自定義。

新的 AVAM 套件可讓您輕鬆地在小工具與應用程式之間內嵌和通訊,而不是新增 iframe 元素來內嵌深入解析小工具。 在應用程式中內嵌和自定義 Azure AI 影片索引器小工具中深入瞭解。 

2021 年 8 月

重新編製視訊或音訊檔案的索引

現在有一個選項可用來重新編製索引編製索引程式期間失敗的視訊或音訊檔案。

改善輔助功能支援

已修正與 CSS、主題和輔助功能相關的 Bug:

  • 高對比度
  • 入口網站中的帳戶設定和深入解析檢視。

2021 年 7 月

自動調整媒體保留單元

從 2021 年 8 月 1 日起,Azure AI 影片索引器會透過 Azure 媒體服務 啟用媒體保留單元(MRU)自動調整,因此您不需要透過 Azure AI 影片索引器加以管理。 這將允許價格優化,例如在許多情況下,根據業務需求進行自動調整時降價。

2021 年 6 月

部署在六個新區域中的 Azure AI 影片索引器

您現在可以在法國中部、美國中部、巴西南部、美國中西部、韓國中部和日本西部區域建立 Azure AI 影片索引器付費帳戶。

2021 年 5 月

Azure AI 影片索引器現在支援 STT、翻譯、 中文(粵語)('zh-HK')、荷蘭(荷蘭)('Nl-NL')、捷克文('Cs-CZ')、波蘭文('Pl-PL')、瑞典文(瑞典)('Sv-SE')、挪威文() 'nb-NO')、芬蘭文('fi-FI')、加拿大法語('fr-CA')、泰文('th-TH')、阿拉伯文:(阿拉伯聯合綃長國)('ar-AE'、'ar-EG')、(伊拉克) ('ar)(伊拉克) ('ar) -IQ')、(約旦)('ar-JO')、(科威特)(科威特)(黎巴嫩)(黎巴嫩)('ar-LB')、(阿曼)('ar-OM')、(卡達)('ar-QA')、(巴勒斯坦權力機構)('ar-PS')、(敘利亞)('ar-SY')、 和土耳其文(『tr-TR』)。

這些語言可在 API 和 Azure AI 影片索引器網站中使用。 從 [影片來源語言] 底下的 下拉式方塊中選取語言

Azure AI 影片索引器的新主題

新的主題可供使用:「Azure」以及「淺色」和「深色主題」。 若要選取主題,請在網站右上角的齒輪圖示上選取,在 [用戶設定] 底下尋找主題。

您可以利用新的開放原始碼程序代碼

我們的 GitHub 存放庫提供三個新的 Git-Hub 專案:

在玩家上切換周框方塊的新選項(適用於觀察的人)

透過進階影片設定編製影片索引時,您可以檢視我們觀察到的新人員功能。 如果您的媒體檔案中偵測到人員,您可以透過媒體播放機在偵測到的人員上啟用周框方塊。

2021 年 4 月

影片索引器服務已重新命名為 Azure AI 影片索引器。

改善入口網站中的上傳體驗

Azure AI 影片索引器在網站中有新的上傳體驗。 若要上傳媒體檔案,請按 [媒體檔案] 索引標籤[上傳] 按鈕。

gov-cloud 中提供的新開發人員入口網站

Azure AI 影片索引器 API 開發人員入口網站現在也適用於美國政府的 Azure。

觀察人員追蹤 (預覽)

Azure AI 影片索引器現在會偵測影片中觀察到的人員,並提供資訊,例如人員在視訊畫面中的位置,以及人員出現時確切的時間戳(開始、結束)。 API 會針對偵測到的每個人員實例傳回周框方塊座標(以像素為單位),包括其信賴度。

例如,如果視訊包含人員,偵測作業會列出人員外觀及其在視訊畫面中的座標。 您可以使用這項功能來判斷影片中的人員路徑。 它也可讓您判斷影片中是否有多個相同人員的實例。

新增的觀察人員追蹤功能可在索引檔案時使用,方法是選擇 [進階] 選項 ->[進階視訊] 或 [進階視訊 + 音訊預設] (在 [視訊 + 音訊索引] 下)。 標準和基本索引預設不會包含這個新的進階模型。

當您選擇在 Azure AI 影片索引器網站上看到影片的深入解析時,觀察到的 人員 追蹤會顯示在頁面上,並顯示所有偵測到的人員縮圖。 您可以選擇人員的縮圖,並查看該人員出現在視訊播放程式的位置。

此功能也適用於 Azure AI 影片索引器所產生的 JSON 檔案。 如需詳細資訊,請參閱 追蹤影片中觀察到的人員。

偵測到聲場事件與 音訊效果偵測 (預覽)

您現在可以在已關閉的 標題 檔案中看到偵測到的聲場事件。 您可以從 Azure AI 影片索引器網站下載檔案,並在 GetArtifact API 中以成品的形式提供。

音訊效果偵測 (預覽)元件會偵測各種聲場事件,並將其分類為不同的原音類別(例如槍聲、尖叫聲、人群反應等)。 如需詳細資訊,請參閱 音訊效果偵測

2021 年 3 月

音訊分析

音訊分析現在可在不同價格點提供其他新的音訊功能組合。 新的基本音訊分析預設提供低成本選項,僅擷取語音轉譯、翻譯和格式輸出 標題 和字幕。 基本音訊預設會在帳單上產生兩個不同的計量,包括轉譯的行,以及用於 標題 和副標題格式的個別行。 如需定價的詳細資訊,請參閱 媒體服務 定價頁面。

新增的套件組合可在編製索引或重新編製檔案索引時使用,方法是選擇 [進階] 選項 ->Basic Audio 預設值 (在 [視訊 + 音訊索引編製] 下拉式方塊底下)。

新的開發人員入口網站

Azure AI 影片索引器有新的 開發人員入口網站。 試用新的 Azure AI 影片索引器 API,並在一個地方尋找所有相關資源:GitHub 存放庫Stack 溢位、具有相關部落格文章的 Azure AI 影片索引器技術社群Azure AI 影片索引器常見問題使用者語音,提供您的意見反應和建議功能,以及小工具程式代碼範例的 'CodePen' 連結

深入解析小工具的進階自定義功能

SDK 現在可以在您自己的服務中內嵌 Azure AI 影片索引器深入解析小工具,並自定義其樣式和數據。 SDK 支援標準的 Azure AI 影片索引器深入解析小工具,以及完全可自定義的深入解析小工具。 Azure AI 影片索引器 GitHub 存放庫中提供程式碼範例。 透過此進階自定義功能,解決方案開發人員可以套用自定義樣式,並攜帶客戶自己的 AI 數據,並在深入解析小工具中呈現該資料(使用或不使用 Azure AI 影片索引器深入解析)。

部署在美國中北部、美國西部和加拿大中部的 Azure AI 影片索引器

您現在可以在美國中北部、美國西部和加拿大中部區域建立 Azure AI 影片索引器付費帳戶。

語音轉換文字的新來源語言支援,翻譯和搜尋

Azure AI 影片索引器現在支持丹麥文('da-DK')、挪威文('nb-NO')、瑞典文('sv-SE')、芬蘭文('fi-FI')、加拿大法文('fr-CA')、泰文('th-TH')、阿拉伯文('ar-BH'、 'ar-EG'、'ar-IQ'、'ar-JO'、'ar-KW'、'ar-LB'、'ar-OM'、'ar-QA'、'ar-S'和 'ar-SY'),以及土耳其文('tr-TR')。 這些語言可在 API 和 Azure AI 影片索引器網站中使用。

在 Azure AI 影片索引器網站中依主題搜尋

您現在可以使用 Azure AI 影片索引器網站頁面頂端的搜尋功能來搜尋具有特定主題的影片。

2021 年 2 月

多個帳戶擁有者

帳戶擁有者角色已新增至 Azure AI 影片索引器。 您可以新增、變更和移除使用者;變更其角色。 如需如何共享帳戶的詳細資訊,請參閱 邀請使用者

音訊事件偵測 (公開預覽)

注意

此功能僅適用於試用版帳戶。

Azure AI 影片索引器現在會在內容的非語音區段中偵測到下列音訊效果:槍聲、玻璃破碎、警報器、警笛、爆炸、狗樹皮、尖叫、笑聲、人群反應(歡呼、拍打和噓聲)和沉默。

新增的音訊會影響功能,方法是選擇 [進階] 選項 ->[進階音訊預設] #[視訊 + 音訊索引] 下方的 [進階音訊] 選項來編製檔案索引。 標準索引只會包括 沉默人群反應

先前音訊效果模型中包含的擷取事件類型,現在會擷取人群反應事件類型的一部分

當您選擇在 Azure AI 影片索引器網站上看到影片的深入解析時,音訊效果會顯示在頁面上。

音訊事件偵測

具名實體增強功能

擷取的人員與位置清單已一般擴充和更新。

此外,此模型現在包含內容中不出名的人和位置,例如影片中的「山姆」或「首頁」。

2021 年一月

Azure AI 影片索引器部署在美國政府雲端

您現在可以在弗吉尼亞州和亞利桑那地區的美國政府雲端上建立 Azure AI 影片索引器付費帳戶。 上述區域不提供 Azure AI 影片索引器試用供應專案。 如需詳細資訊,請移至 Azure AI 影片索引器檔。

部署在印度中部地區的 Azure AI 影片索引器

您現在可以在印度中部區域建立 Azure AI 影片索引器付費帳戶。

適用於 Azure AI 影片索引器網站體驗的新深色模式

Azure AI 影片索引器網站體驗現在可在深色模式中使用。 若要啟用深色模式,請開啟設定面板,然後在 [ 深色模式 ] 選項上切換。

深色模式設定

2020 年 12 月

部署在瑞士西部和瑞士北部的 Azure AI 影片索引器

您現在可以在瑞士西部和瑞士北部區域建立 Azure AI 影片索引器付費帳戶。

2020 年 10 月

規劃的 Azure AI 影片索引器網站驗證變更

從 2021 年 3 月 1 日起,您將無法再使用 Facebook 或 LinkedIn 註冊並登入 Azure AI 影片索引器網站開發人員入口網站

您將能夠使用下列其中一個提供者註冊和登入:Entra ID、Microsoft 和 Google。

注意

線上至 LinkedIn 和 Facebook 的 Azure AI 影片索引器帳戶在 2021 年 3 月 1 日之後將無法存取。

您應該邀請 Entra ID、Microsoft 或 Google 將您自己的電子郵件傳送至 Azure AI 影片索引器帳戶,以便您仍然可以存取。 您可以新增支援提供者的其他擁有者,如邀請中所述
或者,您可以建立付費帳戶並移轉數據。

2020 年 8 月

Azure AI 影片索引器網站的行動設計

Azure AI 影片索引器網站體驗現在支持行動裝置。 用戶體驗會回應您的行動螢幕大小(不包括自定義UI)。

輔助功能改善和錯誤修正

作為 WCAG(Web 內容輔助功能指導方針)的一部分,Azure AI 影片索引器網站體驗與 C 級一致,是 Microsoft 輔助功能標準的一部分。 已解決與鍵盤流覽、程式設計存取和螢幕助讀程式相關的數個 Bug 和改善。

2020 年 7 月

多重語言識別的 GA

多語言識別已從預覽移至 GA,並準備好提高生產力。

與「預覽至 GA」轉換相關的定價沒有影響。

Azure AI 影片索引器網站改善

已新增具有其他篩選功能之深入解析搜尋的新搜尋列。 搜尋結果也已增強。

新的清單檢視,能夠使用多個檔案來排序和管理影片封存。

用於輕鬆選取和設定的新面板

已新增方便選取和使用者設定的側邊面板,允許簡單且快速建立和共享帳戶,以及設定組態。

側邊面板也用於使用者喜好設定和說明。

2020 年 6 月

依主題搜尋

您現在可以使用搜尋 API 來搜尋具有特定主題的影片(僅限 API)。

主題會新增為 (選擇性參數) 的 textScope 一部分。 如需詳細資訊,請參閱 API

標籤增強功能

標籤器已升級,現在包含可識別的更多視覺標籤。

2020 年 5 月

部署在美國東部的 Azure AI 影片索引器

您現在可以在美國東部區域建立 Azure AI 影片索引器付費帳戶。

Azure AI 影片索引器 URL

Azure AI 影片索引器區域端點全都統一,只能從 www 開始。 不需要任何動作專案。

從現在起,您可以連線 到 www.videoindexer.ai ,無論是內嵌小工具還是登入 Azure AI 影片索引器 網站。

也會將 wus.videoindexer.ai 重新導向至 www。 您可以在應用程式中內嵌 Azure AI 影片索引器小工具中取得詳細資訊。

2020 年 4 月

新的小工具參數功能

Insights 小工具包含新的參數:languagecontrol

Player 小工具有新的locale參數。 和 language 參數都會locale控制玩家的語言。

如需詳細資訊,請參閱 小工具類型 一節。

新玩家皮膚

新的玩家皮膚推出與更新的設計。

準備即將進行的變更

  • 今天,下列 API 會傳回帳戶物件:

    Account 物件具有指向 Url Azure AI 影片索引器網站位置的欄位。 對於付費帳戶, Url 欄位目前指向內部 URL,而不是公用網站。 在未來幾周內,我們將變更它,並傳回 所有帳戶的 Azure AI 影片索引器網站 URL(試用和付費)。

    請勿使用內部 URL,您應該使用 Azure AI 影片索引器公用 API

  • 如果您要將 Azure AI 影片索引器 URL 內嵌在應用程式中,且 URL 不會指向 Azure AI 影片索引器網站或 Azure AI 影片索引器 API 端點 (https://api.videoindexer.ai),而是重新產生 URL 的區域端點。 https://wus2.videoindexer.ai

    您可以執行下列其中一項動作:

    • 將 URL 取代為指向 Azure AI 影片索引器小工具 API 的 URL(例如 深入解析小工具

    • 使用 Azure AI 影片索引器網站來產生新的內嵌 URL:

      [播放 ] 以移至影片的頁面 -> 選取 </> [內嵌 ] 按鈕 -> 將 URL 複製到您的應用程式:

    不支援區域 URL,未來幾周將會遭到封鎖。

2020 年 1 月

其他語言的自定義語言支援

Azure AI 影片索引器現在支援 、和 en-AU (僅限 API) 的ar-SYen-UK自定義語言模型。

刪除帳戶時間範圍動作更新

刪除帳戶動作現在會在 90 天內刪除帳戶,而不是 48 小時。

新的 Azure AI 影片索引器 GitHub 存放庫

新的 Azure AI 影片索引器 GitHub 具有不同的專案、入門指南和程式代碼範例現已推出: https://github.com/Azure-Samples/media-services-video-indexer

Swagger 更新

Azure AI 影片索引器會將驗證作業整合至單一 Azure AI 影片索引器 OpenAPI 規格(swagger)。 開發人員可以在 Azure AI 影片索引器開發人員入口網站中找到 API。

2019 年 12 月

使用新的 API 更新文字記錄

使用 Update-Video-Index API 更新文字記錄中的特定區段。

修正 Azure AI 影片索引器網站的帳戶設定

您現在可以更新 媒體服務 連線設定,以自助處理下列問題:

  • 不正確的 Azure 媒體服務 資源
  • 密碼變更
  • 媒體服務 資源在訂用帳戶之間移動

若要修正帳戶設定,請在 Azure AI 影片索引器網站中,流覽至 [設定 > 帳戶] 索引卷標(作為擁有者)。

設定自定義視覺帳戶

使用 Azure AI 影片索引器網站在付費帳戶上設定自定義視覺帳戶(先前,API 僅支援此帳戶)。 若要這樣做,請登入 Azure AI 影片索引器網站,選擇 [模型自定義 ><模型>> 設定]。

場景、鏡頭和主要畫面格 – 現在位於一個深入解析窗格中

場景、鏡頭和主要畫面格現在會合併成一個深入解析,以方便取用和流覽。 當您選取所需的場景時,您可以看到它所包含的鏡頭和主要畫面格。

關於長視訊名稱的通知

當影片名稱超過80個字元時,Azure AI 影片索引器會在上傳時顯示描述性錯誤。

串流端點已停用通知

停用串流端點時,Azure AI 影片索引器會在播放程式頁面上顯示描述性錯誤。

錯誤處理改善

狀態代碼 409 現在會從 重新編製索引影片更新影片索引 API 傳回,以防影片主動編製索引,以避免意外覆寫目前的重新編製 索引變更。

2019 年 11 月

  • 韓文自定義語言模型支援

    Azure AI 影片索引器現在在 API 和入口網站中都支援韓文 (ko-KR) 中的自定義語言模型。

  • 語音轉換文字支援的新語言(STT)

    Azure AI 影片索引器 API 現在支援阿拉伯文 Levantine (ar-SY)、英國英文地區語言 (en-GB) 和英文澳大利亞地區語言 (en-AU) 中的 STT。

    針對影片上傳,我們已將 zh-HANS 取代為 zh-CN,這兩者都受到支援,但建議使用 zh-CN,且更精確。

2019 年 10 月

  • 搜尋資源庫中的動畫字元

    編製動畫字元的索引時,您現在可以在帳戶的視訊大管中搜尋它們。

2019 年 9 月

IBC 2019 宣佈多項進展:

  • 動畫字元辨識 (公開預覽)

    透過與自定義視覺整合,偵測群組廣告辨識動畫內容中的字元的能力。

  • 多語言識別 (公開預覽)

    偵測音訊播放軌中多種語言的區段,並根據它們建立多語系文字記錄。 初始支援:英文、西班牙文、德文和法文。 如需詳細資訊,請參閱自動識別並轉譯多語言內容

  • 人員 和位置的具名實體擷取

    透過自然語言處理從語音和視覺文字中擷取品牌、位置和人員。

  • 編輯拍攝類型分類

    標記具有編輯類型的鏡頭,例如特寫、中鏡頭、兩槍、室內、戶外等。如需詳細資訊,請參閱 編輯拍攝類型偵測

  • 主題推斷增強 - 現在涵蓋層級 2

    主題推斷模型現在支援IPTC分類法的更深入數據粒度。 閱讀 Azure 媒體服務 新的 AI 技術創新的完整詳細數據

2019 年 8 月更新

部署在英國南部的 Azure AI 影片索引器

您現在可以在英國南部區域建立 Azure AI 影片索引器付費帳戶。

新的編輯鏡頭類型深入解析可用

新增至影片拍攝的新標籤會提供編輯「拍攝類型」,以識別它們與內容建立工作流程中使用的常見編輯片語,例如:極端特寫、特寫、寬、中、兩次拍攝、戶外、室內、左臉和右臉(JSON 中可用)。

可用的新 人員 和位置實體擷取

Azure AI 影片索引器會透過影片 OCR 和轉譯中的自然語言處理 (NLP) 識別具名位置和人員。 Azure AI 影片索引器會使用機器學習演算法來辨識特定位置(例如埃菲爾鐵塔)或人員(例如 John Doe)在影片中被叫出。

原生解析度中的主要畫面格擷取

Azure AI 影片索引器擷取的主要畫面格可在影片的原始解析度中使用。

用於從影像定型自定義臉部模型的 GA

將臉部從影像從預覽模式移至 GA(可透過 API 和入口網站取得)。

注意

與「預覽至 GA」轉換相關的定價沒有影響。

用戶可以選擇從入口網站隱藏資源庫索引標籤(類似於隱藏範例索引標籤)。

增加的 URL 大小上限

支援索引影片的 URL 查詢字串 4096 (而不是 2048)。

支援多語系專案

您現在可以根據以不同語言編製索引的影片來建立專案(僅限 API)。

2019 年 7 月

編輯器作為小工具

Azure AI 影片索引器 AI 編輯器現在可作為要內嵌在客戶應用程式中的小工具。

從入口網站更新關閉 標題 檔案的自定義語言模型

客戶可以在入口網站的自定義頁面中,提供 VTT、SRT 和 TTML 檔案格式作為語言模型的輸入。

2019 年 6 月

部署至日本東部的 Azure AI 影片索引器

您現在可以在日本東部區域建立 Azure AI 影片索引器付費帳戶。

建立與修復帳戶 API (預覽)

新增了可讓您更新 Azure 媒體服務連線端點或密鑰的新 API

改善上傳時的錯誤處理

如果基礎 Azure 媒體服務 帳戶設定錯誤,則會傳回描述性訊息。

播放機時間軸主要畫面格預覽

您現在可以在玩家的時間軸上看到每次的影像預覽。

編輯器半選取

您現在可以在編輯器中選擇特定深入解析時間範圍,查看選取的所有深入解析預覽。

2019 年 5 月

從關閉 標題 檔案更新自定義語言模型

建立自定義語言模型和更新自定義語言模型 API 現在支援 VTT、SRT 和 TTML 檔案格式作為語言模型的輸入。

呼叫 更新影片文字記錄 API 時,會自動新增文字記錄。 與影片相關聯的定型模型也會自動更新。 如需如何自定義和定型語言模型的資訊,請參閱 使用 Azure AI 影片索引器自定義語言模型。

新的下載文字記錄格式 – TXT 和 CSV

除了已經支援的封閉式 標題 格式外,Azure AI 影片索引器現在還支援以 TXT 和 CSV 格式下載文字記錄。