Windows Copilot Runtime 概觀
Windows Copilot Runtime 是一套工具,可讓開發人員在 Windows 上建立 AI 體驗,包括與操作系統互動的新方式。
可Windows Copilot Runtime APIs讓 Windows 應用程式開發人員存取在作業系統本機執行的 AI 功能,而不需要尋找、執行或優化您自己的 機器學習 (ML) 模型。 Windows Copilot RuntimeAPIs目標為 2025 年 1 月計劃發行的 Windows 應用程式 SDK 1.7 實驗 2 版本。 深入瞭解 Windows 應用程式 SDK。
皮矽 包含在這些 APIs中。 Phi Phone 是由 Microsoft Research 所建立的裝置上語言模型,提供許多在大型語言模型 (LLM) 中找到的相同功能,但更精簡且更有效率,以便可在 Windows 本機執行。
Text Recognition或光學字元辨識(OCR),可辨識和擷取影像中存在的文字,將可作為與 Phi 矽一致運作的 API。
Recall,AI 輔助搜尋功能,可讓您在 Windows 裝置上搜尋過去的活動,以便挑選您離開的位置、無論是使用應用程式、編輯檔或響應電子郵件。
Studio Effects 增強具有相容類神經處理單元 (NPU) 的 Windows 裝置相機和音訊功能,以套用 AI 驅動的背景效果、眼部接觸校正、自動框架、語音焦點、模糊、光源和創意篩選器,以維持快速的效能速度。
即時輔助字幕翻譯 可協助 Windows 上的所有人,包括耳聾或聽障人士,透過檢視口語內容的輔助字幕來進一步瞭解音訊,即使音訊內容與系統慣用的語言不同也一樣。
除了 AI 支援Windows Copilot RuntimeAPIs之外,我們還提供如何使用 機器學習 (ML) 模型增強應用程式的工具和指引。
AI Toolkit 在 Visual Studio Code 中,可讓您使用 、PyTorch 或 WebNN 等 ONNX Runtime架構來整合自己的 ML 模型,並存取硬體加速,以提升效能並透過 DirectML 進行調整。
深入了解:
- Windows 應用程式如何運用 ML 模型?
- 哪裡可以找到網路上 開放原始碼 ML 模型?
- 如何? 優化 ML 模型,以在我的 Windows 應用程式中使用?
- 如何使用自己的自定義數據來微調 ML 模型?
- 如何使用 AI 功能利用硬體加速來提升效能?
使用Windows Copilot Runtime裝置上產生的 AI 模型開發負責任 AI 應用程式,以協助強制執行本機內容安全性功能,例如有害內容的裝置上分類引擎和預設封鎖清單。 Microsoft優先支持開發人員在 Windows 上建置安全且值得信任的 AI 體驗。 在建立在 Windows 裝置 上執行的應用程式和 AI 輔助功能時,深入瞭解要套用的負責任開發做法,請參閱在 Windows 上開發負責任 Ai 應用程式和功能指引。
對於有興趣使用 Windows 應用程式整合 AI 功能或模型之開發人員的其他資源,包括:
Windows 範例庫上的 AI:示範如何將 AI 整合到 Windows 應用程式中的範例。
關於搭配 Windows 使用 AI 的常見問題:關於在 Windows 內容中使用 AI 的相關術語和概念常見問題,涵蓋「什麼是 DirectML?」、「什麼是 ONNX?」、「什麼是 ORT?」、「什麼是 NPU?」、「什麼是 SLM?」、「什麼是推斷?」、「什麼是微調?」等問題。
使用 OnnxRuntime Generative AI 在 Windows 應用程式中開始使用 Phi3 和其他語言模型