Azure AI 影片索引器常見問題

本文會回答 Azure AI 影片索引器的相關常見問題。

一般問題

什麼是 Azure AI 影片索引器?

Azure AI 影片索引器是 Azure AI 服務的一部分,是雲端應用程式,可讓您使用 Azure AI 影片索引器影片和音訊模型,從影片中擷取深入解析。 如需詳細資訊,請參閱概觀

我可以使用 Azure AI 影片索引器做什麼?

Azure AI 影片索引器可以在媒體檔案上執行的一些作業包括:

  • 識別和擷取語音並識別說話者。
  • 識別並擷取影片中的螢幕文字。
  • 偵測視訊檔案中的物件。
  • 從視訊中的音訊曲目和螢幕文字識別品牌(例如:Microsoft)。
  • 從名人資料庫偵測和辨識臉部,以及臉部的使用者定義資料庫。
  • 擷取討論但不一定在音訊和視訊內容中提及的主題。
  • 從音訊播放軌建立封閉 標題 或字幕。

如需詳細資訊和更多 Azure AI 影片索引器功能,請參閱 概觀

如何? 開始使用 Azure AI 影片索引器嗎?

Azure AI 影片索引器包含試用供應專案,可讓您在使用 Azure AI 影片索引器網站或 Azure AI 影片索引器 API 時提供 2,400 分鐘的免費索引編製分鐘(請參閱 開發人員入口網站)。

若要大規模編製影片和音訊的索引,您可以將 Azure AI 影片索引器連線到付費的 Microsoft Azure 訂用帳戶。 您可以在定價 頁面上找到定價 的詳細資訊。

您可以在開始使用中找到開始使用的詳細資訊。

我需要程式代碼撰寫技能才能使用 Azure AI 影片索引器嗎?

您可以使用 Azure AI 影片索引器 Web 型介面來評估、設定及管理您的帳戶,而 不需要撰寫程式代碼。 當您準備好開發更複雜的應用程式時,您可以使用 Azure AI 影片索引器 API,使用 Azure Logic Apps 或 Azure Functions 等無伺服器技術,將 Azure AI 影片索引器整合到您自己的應用程式、網站或自定義工作流程中。

什麼是 Azure AI 影片索引器的限制存取功能,以及如何註冊?

Azure AI 影片索引器臉部識別和名人辨識功能是需要註冊的有限存取功能。

如需有關有限存取 的註冊窗體和詳細資訊,請參閱這篇文章

另請參閱下列內容: 公告部落格文章臉部辨識部落格文章的投資和保護。

我需要機器學習技能才能使用 Azure AI 影片索引器嗎?

否,Azure AI 影片索引器提供將多個機器學習模型整合到一個管線中。 透過 Azure AI 影片索引器編製視訊或音訊檔案的索引,會擷取一個共用時間軸上擷取的完整深入解析集,而不需要任何機器學習技能或客戶所需演算法的知識。

Azure AI 影片索引器支援哪些媒體格式?

Azure AI 影片索引器支援最常見的媒體格式。 請參閱 Azure AI 影片索引器支援矩陣和服務限制

如何? 將媒體檔案上傳至 Azure AI 影片索引器,以及有哪些限制?

在 Azure AI 影片索引器 Web 入口網站中,您可以使用 [檔案上傳] 對話框或指向直接裝載來源檔案的 URL 來上傳媒體檔案。 任何使用 iFrame 或內嵌程式代碼裝載媒體內容的 URL 將無法運作(請參閱 範例)。

如需詳細資訊,請參閱本 操作指南

我可以在專案中縫合和轉譯多少個檔案?

在 Azure AI 影片索引器中,您可以建立專案並新增多個檔案,以縫合併轉譯為新檔案。 來源檔案的數目在網站設定為 10,而 API 中則設定為 100 個。

Azure AI 影片索引器需要多久的時間才能從媒體擷取見解?

使用 Azure AI 影片索引器 API 和 Azure AI 影片索引器 Web 介面來編製視訊或音訊檔案索引所需的時間,取決於多個參數,例如檔案長度和品質、檔案中找到的深入解析數目等等。 建議您使用自己的內容執行一些測試檔案,並取得更好的想法。

我可以建立自定義工作流程,以使用 Azure AI 影片索引器將程式自動化嗎?

是,您可以將 Azure AI 影片索引器整合到無伺服器技術,例如 Logic Apps、Flow 和 Azure Functions。 您可以在這裡找到適用於 Azure AI 影片索引器邏輯應用程式和Flow 連接器的更多詳細數據。 您可以在 Azure AI 影片索引器範例存放庫中看到合作夥伴完成的一些自動化專案。

Azure AI 影片索引器可在哪一個 Azure 區域中使用?

我可以針對特定使用案例自定義 Azure AI 影片索引器模型嗎?

是。 在 Azure AI 影片索引器中,您可以自定義一些可用的模型,以更符合您的需求。

例如,我們的人員模型支持現成的 1,000,000 張名人辨識臉部,但您也可以將它定型以辨識不在該資料庫中的其他臉部。

如需詳細資訊,請參閱自定義 人員品牌語言 模型的文章。

我可以編輯文件庫中的影片嗎?

是。 從媒體 櫃顯示按編輯視訊 按鈕,或 從播放程式顯示開啟編輯器 按鈕,以取得 [專案 ] 索引標籤。您可以建立新專案,並從文檔庫新增更多影片,以一起編輯影片,完成之後,即可轉譯影片並下載。

如果您想要取得新影片的深入解析,請使用 Azure AI 影片索引器為其編製索引,且其深入解析會出現在您的文檔庫中。

我可以編製多個音訊串流或通道的索引嗎?

如果有多個音訊串流,Azure AI 影片索引器會採用它遇到的第一個音訊串流,且只會處理此串流。 在任何音訊串流中,Azure AI 影片索引器進程都會採用不同的通道(如果有的話),並將它們一起處理為單聲道。 針對數據流/通道操作,您可以在檔案上使用 ffmpeg 命令,再編製索引。

在 Azure AI 影片索引器網站上的帳戶清單中找不到我的新 ARM 帳戶。

如需如何切換至正確網域的詳細描述,請參閱 在租用戶之間切換。

Arc 問題所啟用的 Azure AI 影片索引器

什麼是已啟用 Azure AI 影片索引器 Arc 的擴充功能?

在已啟用 Arc 的 Kubernetes 容器中執行的應用程式,可在 Azure 外部部署,以從您的媒體檔案擷取和取用音訊深入解析。 未來的版本也會提供影片深入解析。

什麼是 Azure Arc?

Azure Arc 是延伸 Azure 平台的橋樑,可協助您建置應用程式和服務,並彈性地跨數據中心、邊緣和多雲端環境中執行。 使用一致的開發、作業和安全性模型來開發雲端原生應用程式。

參與預覽需要什麼?

若要參與預覽,您需要作用中的 Azure 訂用帳戶、與 Azure 的連線、能夠執行擴充功能的環境(請參閱快速入門中的 [需求,以及加入預覽的許可權]。 您可以在這裡提交加入預覽的要求。

如何開始使用Arc所啟用的 Azure AI 影片索引器?

您可以遵循快速入門,並使用 Azure Arc Jumpstart 體驗已啟用 Azure Arc 的 Kubernetes 自動化案例。

為什麼下載這麼大?

在安裝擴充功能期間,機器學習容器會下載到邊緣計算。 其中一些容器的大小可能為數 GB,而下載時間將取決於網路狀況。 在某些情況下,下載可能需要超過15分鐘的時間。

我需要設定 Kubernetes 叢集的記憶體嗎?

Arc 所啟用的視訊索引器需要以 readwritemany 設定 儲存類別。 如果記憶體類別已在安裝期間設定為叢集的預設值,則會使用它。 否則,如果您需要設定不同的記憶體,您可以在延伸模組安裝期間將它當做屬性傳遞。

我需要設定影片索引器擴充功能的前端端點嗎?

是。 影片索引器擴充功能的 API 可透過前端擴充功能取得。 您可以限制對 IP 位址或 FQDN 的存取。 此外,由於所有通訊都是透過安全的流量通訊協定完成,因此建議使用有效的 CA 憑證,以及設定 NSG 或防火牆等安全性層來限制此端點的存取。

如何針對 Arc 安裝所啟用的 Azure AI 影片索引器進行疑難解答?

隱私權問題

Azure AI 影片索引器如何加密網路流量?

用戶端應用程式與 Azure AI 影片索引器帳戶之間的通訊會使用傳輸層安全性 (TLS) 加密。 TLS 為標準密碼編譯通訊協定,可確保網際網路上用戶端與服務之間的隱私權和資料完整性。 如需 TLS 的詳細資訊,請參閱傳輸層安全性。 影片索引器會強制執行至少 TLS v1.2。 客戶無法控制加密套用,我們會挑選客戶端與伺服器之間的第一個比對,從強到弱。

Azure AI 影片索引器會編製視訊和音訊檔案的索引嗎?

是,除非您使用 Azure AI 影片索引器網站或 API 從 Azure AI 影片索引器中刪除檔案,否則會儲存您的視訊和音訊檔案。 針對試用版,您編製索引的視訊和音訊檔案會儲存在美國東部的 Azure 區域。 否則,您的視訊和音訊檔案會儲存在 Azure 訂用帳戶的記憶體帳戶中。

Azure AI 影片索引器會在哪裡儲存客戶數據?

根據預設,您的數據會復寫到您已部署 Azure AI 影片索引器實例的配對區域。 針對具有數據落地需求的區域,您的數據一律會保留在相同的區域內。 如需詳細資訊,請參閱 本節中的其他隱私權問題

我可以刪除儲存在 Azure AI 影片索引器網站中的檔案嗎?

是,您一律可以刪除視訊和音訊檔案,以及 Azure AI 影片索引器從中擷取的任何元數據和深入解析。 一旦您從 Azure AI 影片索引器刪除檔案,檔案及其元數據和見解就會從 Azure AI 影片索引器永久移除。 不過,如果您已在 Azure 記憶體中實作自己的備份解決方案,檔案會保留在您的 Azure 記憶體中。

我可以控制使用者對 Azure AI 影片索引器帳戶的存取嗎?

是,只有帳戶管理員可以邀請和取消邀請人員加入其帳戶,以及指派具有編輯許可權和具有唯讀存取權的人員。

神秘 可以存取已由 Azure AI 影片索引器編製索引和/或儲存的視訊和音訊檔案,以及擷取的元數據和見解?

任何具有視訊或音訊內容連結的視訊或音訊內容及其見解的人都可以存取公開作為隱私權設定的視訊或音訊內容。 只有受邀加入視訊或音訊內容帳戶的使用者,才能存取私人作為其隱私權設定的視訊或音訊內容。 您內容的隱私權設定也適用於 Azure AI 影片索引器擷取的元數據和深入解析。 上傳視訊或音訊檔案時,您會指派隱私權設定。 您也可以在編製索引之後變更隱私權設定。

Microsoft 對於 Azure AI 影片索引器已編製索引和/或儲存的視訊或音訊檔案,以及擷取的元數據和深入解析,Microsoft 有哪些存取權?

根據 Azure 在線服務條款 (OST),您完全擁有您的內容,而 Microsoft 只會根據 OST 和 Microsoft 隱私聲明,存取您的內容和 Azure AI 影片索引器從內容中擷取的元數據和見解。

我在 Azure AI 影片索引器帳戶中建置的自定義模型是否可供其他帳戶使用?

否,您在帳戶中建立的自定義模型無法供任何其他帳戶使用。 Azure AI 影片索引器目前可讓您在帳戶中建置自定義 品牌語言人員 模型。 這些模型僅適用於您建立模型的帳戶。

影片索引器所編製的內容是否保留在我使用影片索引器所在的 Azure 區域中?

是,除非您在 Azure 訂用帳戶中有使用多個 Azure 區域的手動設定,否則內容及其深入解析會保留在 Azure 區域內(新加坡和巴西南部區域除外)。

基於 BCDR 原因,將區域中的客戶數據複寫到 配對的區域

Azure AI 影片索引器有哪些隱私策略?

Microsoft 隱私聲明涵蓋 Azure AI 影片索引器。 隱私聲明說明 Microsoft 處理個人資料、Microsoft 處理方式,以及 Microsoft 處理其用途。 若要深入了解隱私權,請造訪 Microsoft 信任中心

Azure AI 影片索引器有哪些認證?

Azure AI 影片索引器目前具有SOC認證。 若要檢閱 Azure AI 影片索引器認證,請參閱 Microsoft 信任中心

私人和公用影片之間的差異為何?

將影片上傳至 Azure AI 影片索引器時,您可以從兩個隱私權設定中選擇:私人和公用。 公用視訊可供任何人存取,包括匿名和不明的使用者。 私人帳戶只能限制為帳戶成員。

我試圖將視頻上傳為公眾,它被標幟為不當或冒犯性內容,這是什麼意思?

將影片上傳至 Azure AI 影片索引器時,演算法和模型會執行自動內容分析,以確保不會公開顯示任何不適當的內容。 如果發現視訊可疑為包含明確內容,則無法將其設定為公用內容。 不過,帳戶成員仍然可以以私人影片的形式存取它(檢視它、下載深入解析和擷取的成品,以及執行帳戶成員可用的其他作業)。

警告

不建議您直接從 artifacts 資料夾使用數據做為生產用途。 成品是編製索引程式的中繼輸出。 它們基本上是分析影片的各種 AI 引擎的原始輸出;成品架構可能會隨著時間而變更。 建議您使用取得影片索引 API,如取得 API 所產生的深入解析和成品中所述

若要設定公用存取的影片,您可以:

  • 建置您自己的介面層(例如應用程式或網站),並用它來與 Azure AI 影片索引器服務互動。 如此一來,影片在我們的網站仍然保持私人,而您的使用者可以透過您的介面與其互動。 例如,您仍然可以取得深入解析,或允許在您自己的介面中檢視影片。

  • 要求人工檢閱內容,這會導致移除限制,假設內容不明確。

    如果您的使用者直接使用 Azure AI 影片索引器網站作為介面層,以及用於公用(未經驗證)檢視,則可以探索此選項。

API 問題

Azure AI 影片索引器提供哪些 API?

Azure AI 影片索引器 API 可讓您編製索引、擷取元數據、資產管理、翻譯、內嵌、自定義模型等等。 若要尋找使用 Azure AI 影片索引器 API 的詳細資訊,請參閱 Azure AI 影片索引器開發人員入口網站

Azure AI 影片索引器提供哪些用戶端 SDK?

目前沒有提供任何用戶端 SDK。 Azure AI 影片索引器小組正在研究 SDK,並計劃儘快提供 SDK。

如何? 開始使用 Azure AI 影片索引器 API 嗎?

什麼是 API 存取令牌,以及為何需要它?

Azure AI 影片索引器 API 包含授權 API 和 Operations API。 授權 API 包含可讓您存取令牌的呼叫。 對 Operations API 的每個呼叫都應該與存取令牌相關聯,並符合呼叫的授權範圍。

需要存取令牌,才能基於安全性目的使用 Azure AI 影片索引器 API。 這可確保任何呼叫都來自您或具有您帳戶訪問許可權的人員。

帳戶存取令牌、使用者存取令牌和影片存取令牌之間的差異為何?

  • 帳戶層級 – 帳戶層級存取令牌可讓您在帳戶層級或視訊層級上執行作業。 例如,上傳影片、列出所有影片、取得影片深入解析。
  • 用戶層級 - 使用者層級存取令牌可讓您在使用者層級上執行作業。 例如,取得相關聯的帳戶。
  • 影片層級 – 視訊層級存取令牌可讓您在特定視訊上執行作業。 例如,取得影片深入解析、下載 標題、取得小工具等。

我需要多久才能取得新的存取令牌? 存取令牌何時到期?

存取令牌每小時到期,因此您必須每小時產生新的存取令牌。

Azure AI 影片索引器開發人員入口網站的登入選項為何?

請參閱有關 登入信息的發行附注。

一旦您使用識別提供者註冊電子郵件帳戶,就無法將此電子郵件帳戶與另一個識別提供者搭配使用。

JSON 資產(例如深入解析、文字記錄等)與已編製索引的影片相關聯,儲存在哪裡?

它們會由 Azure AI 影片索引器服務儲存,並可透過 取得影片索引取得影片成品下載 URL API 來擷取。

影片編製索引之後,呼叫 API 是否有任何額外費用?

Azure AI 影片索引器不需要額外的費用來呼叫 API。

計費問題

Azure AI 影片索引器的成本是多少?

Azure AI 影片索引器會根據您編製索引的內容輸入持續時間,使用簡單的隨用隨付定價模型。 編碼、串流、記憶體、網路使用量和媒體保留單元可能會收取額外費用。 如需詳細資訊,請參閱價格網頁

何時使用 Azure AI 影片索引器?

使用者在傳送影片編製索引時,必須定義影片的索引是視訊分析、音訊分析或這兩者。 這決定要收費的 SKU。 處理期間若發生嚴重等級的錯誤,將會傳回錯誤碼作為回應。 當發生此狀況時,將不收取任何費用。 嚴重錯誤可能是我們的程式碼包含的 Bug 所致,也可能是服務內部相依性失敗所引起。 諸如識別錯誤或見解擷取等情況,將不會視為嚴重錯誤,而且會傳回回應。 只要傳回了有效的回應 (不是錯誤碼),就會收費。

Azure AI 影片索引器是否提供試用帳戶?

是,Azure AI 影片索引器提供試用帳戶,可讓您在使用 Azure AI 影片索引器網站或 Azure AI 影片索引器 API 時提供 2,400 分鐘的免費索引編製分鐘(請參閱 開發人員入口網站)。

如何退出宣告特定 AI 模型的結果

如何從公用 AI 模型退出特定結果?

將要求的詳細說明傳送至「影片索引器客戶支援」 visupport@microsoft.com。 包括:您參考的 AI 模型、您想要退出的結果、我們應該退出退出結果的原因,以及為何要詢問此結果的說明。

需要多久時間?

處理要求可能需要數周的時間。