分享方式:


文字轉換語音虛擬人偶概觀 (預覽版)

注意

文字轉換語音虛擬人偶目前處於公開預覽狀態。 此預覽版是在沒有服務等級協定的情況下提供,不建議用於生產工作負載。 可能不支援特定功能,或可能已經限制功能。 如需詳細資訊,請參閱 Microsoft Azure 預覽版增補使用條款

文字轉換語音虛擬人偶會將文字轉換為自然發音且逼真的人類數位影片 (預先建置的虛擬人偶或自訂文字轉換語音虛擬人偶)。 文字轉換語音虛擬人偶影片可以非同步或即時合成。 開發人員可以透過 API 建立與文字轉換語音虛擬人偶整合的應用程式,或使用 Speech Studio 上的內容建立工具來建立影片內容,而無需進行編碼。

透過文字轉換語音虛擬人偶的進階類神經網路模型,此功能可讓使用者為各種應用程式提供更真實且高品質的合成對話虛擬人偶影片,同時遵循負責任 AI 做法

Azure AI 文字轉換語音虛擬人偶功能包括:

  • 將文字轉換成逼近真人說話的數位影片,並使用由 Azure AI 文字轉換語音提供的自然聲音說話。
  • 提供預先建置虛擬人偶的集合。
  • 虛擬人偶的語音是由 Azure AI 文字轉換語音所產生。 如需詳細資訊,請參閱虛擬人偶語音和語言
  • 使用批次合成 API 或以非同步文字轉換語音轉換為虛擬人偶影片,或即時轉換。
  • 在 Speech Studio 中提供 內容創作工具 ,讓您無須撰寫程式碼即可建立影片內容。
  • 在 Speech Studio 中透過即時聊天虛擬人偶工具啟用即時虛擬人偶交談。

透過文字轉換語音虛擬人偶的進階類神經網路模型,此功能可讓您為各種應用程式提供更真實且高品質的合成對話虛擬人偶影片,同時遵循負責任 AI 做法。

提示

若要使用無程式碼方法來進行文字轉換語音,請嘗試 Speech Studio 中的文字轉換語音虛擬人偶工具

虛擬人偶語音和語言

您可以從虛擬人偶的預先建置語音範圍中選擇。 文字轉換語音虛擬人偶支援的語言與文字轉換語音的支援語言相同。 如需詳細資料,請參閱語音服務的語言和語音支援。 預先建置的文字轉換語音虛擬人偶可以透過 Speech Studio 入口網站 或透過 API 存取。

合成視訊中的語音可以是 Azure AI 語音上預先建置的神經語音,或由您選取的自訂神經語音語音配音員。

虛擬人偶影片輸出

批次合成和即時合成解析度都是 1920 x 1080,每秒的畫面格 (FPS) 為 25。 如果格式為 mp4,批次合成編解碼器可以是 h264 或 h265,如果格式為 webm,可以將轉碼器設定為 vp9;只有 webm 可以包含 Alpha色板。 即時合成轉碼器為 h264。 您可以針對要求中的批次合成和即時合成設定影片位元速率;預設值為 2000000;您可以在範例程式碼中找到更詳細的設定。

批次合成 即時合成
解決方法 1920 x 1080 1920 x 1080
FPS 25 25
Codec h264/h265/vp9 h264

自訂文字轉換語音虛擬人偶

您可以建立自訂文字轉換語音虛擬人偶,這些虛擬人偶是產品或品牌特有。 只需要 10 分鐘的影片錄製內容即可開始使用。 如果您也正在為演員建立自訂神經語音,則虛擬人偶可以非常逼真。 如需詳細資訊,請參閱什麼是自訂字轉換語音虛擬人偶

自訂神經語音自訂文字轉換語音虛擬人偶是不同的功能。 您可以單獨或一起使用。 如果您也打算將自訂神經語音搭配文字轉換語音虛擬人偶使用,則必須將自訂神經語音模型部署或複製到其中一個虛擬人偶支援的區域

範例指令碼

您可以在 GitHub 上取得文字轉換語音虛擬人偶的範例程式碼。 這些範例涵蓋最熱門的案例:

定價

  • 使用文字轉換語音虛擬人偶功能時,將會根據影片輸出的分鐘數產生費用。 不過,使用即時虛擬人偶時,費用是以虛擬人偶啟用的分鐘數為基礎,而不論虛擬人偶是主動說話還是保持沉默。 若要將即時虛擬人偶使用量的成本最佳化,請參閱範例程式碼中提供的秘訣 (搜尋「使用本機影片進行閒置」)。
  • 在虛擬人偶即時工作階段或批次內容建立期間,文字轉換語音、語音轉換文字、Azure OpenAI 或其他 Azure 服務會分別收費。
  • 如需詳細資訊,請參閱語音服務價格。 請注意,只有提供此功能的服務區域才會顯示虛擬人偶定價,包括東南亞、北歐、西歐、瑞典中部、美國中南部和美國西部 2。

可用的位置

文字轉換語音虛擬人偶功能現在只支援下列服務區域:東南亞、北歐、西歐、瑞典中部、美國中南部和美國西部 2。

負責 AI

我們關心技術,但我們也關心使用 AI 的人以及會受到其影響的人。 如需詳細資訊,請參閱責任 AI 透明度資訊公開語音和虛擬人偶配音員

下一步