다음을 통해 공유

Windows Copilot Runtime개요

  • 아티클

Windows Copilot Runtime 에서는 MICROSOFT Research에서 만든 SLM(Small Language Model)인 피 실리카(Phi Silica)와 같이 AI를 활용하는 운영 체제와 상호 작용하는 새로운 방법을 소개합니다.

개발자는 앱을 AI 기반 Windows 환경 Recall 과 통합하고, 디바이스 Windows Copilot Library모델에서 제공하는 새로운 API를 활용하고Studio Effects, ML(Machine Learning) 모델을 검색하여 Visual Studio Code에서 사용하여 AI Toolkit 사용자 지정 데이터로 미세 조정하고, 프레임워크, PyTorch 또는 WebNN과 같은 ONNX Runtime프레임워크를 사용하여 고유한 ML 모델을 통합하고, DirectML을 통해 성능 및 규모를 향상하기 위해 하드웨어 가속에 액세스할 수 있습니다.

참고 항목

현재 모든 기능을 사용할 수 있는 것은 아닙니다. 가용성에 대한 최신 정보는 Microsoft 개발자 소셜 채널 및 커뮤니티 이벤트를 따르세요.

Windows Copilot Runtime 및 Windows Copilot Library

AI를 사용하여 Windows 환경을 개선하고 재정의하는 새로운 혁신이 있으며, 일부 AI 혁신은 Windows 및 앱 개발자가 앱 기능에 통합하는 데 사용할 수 있는 다른 기능으로 바로 구워졌습니다. WINDOWS 앱에 AI를 통합하는 이러한 새로운 방법은 다음을 포함하여 즉시 사용할 수 있는 AI 지원 기능 및 API 목록을 형성 Windows Copilot Library합니다.

  • Studio Effects: 빠른 성능 속도를 유지하기 위해 디바이스 NPU에서 실행되는 AI 기반 배경 효과, 눈 접촉 보정, 자동 프레이밍, 음성 포커스, 흐림, 조명 및 크리에이티브 필터를 사용하여 Windows 디바이스의 카메라 및 오디오 기능을 향상시킵니다.
  • Recall: Windows 장치에서 과거 활동을 검색할 수 있도록 하여 앱을 사용하든, 문서를 편집하든, 전자 메일에 응답하든, 중단한 위치를 선택할 수 있습니다.
  • Phi Silica: 앱이 Windows 앱 SDK 사용하여 자연어 처리 작업(채팅, 수학, 코드, 추론)을 위해 디바이스 내 Phi 모델과 연결할 수 있도록 합니다.
  • Text Recognition: 광학 문자 인식 또는 OCR을 사용하면 이미지 및 문서에서 텍스트를 추출할 수 있습니다. PDF, 종이 문서 또는 교실 화이트보드의 그림을 편집 가능한 디지털 텍스트로 변환하는 것과 같은 작업을 상상해 보세요.
  • 라이브 캡션 번역: 청각 장애가 있거나 청각 장애가 있는 사용자를 포함하여 Windows의 모든 사용자가 오디오 콘텐츠가 시스템의 기본 언어와 다른 언어로 된 경우에도 음성 콘텐츠의 캡션을 확인하여 오디오를 더 잘 이해할 수 있도록 도와줍니다.

개발자는 Windows 앱 SDK 일부로 이러한 API에 액세스할 수 있습니다.

즉시 사용할 수 있는 Windows Copilot LibraryAI 지원 API 외에도 ML(Machine Learning) 모델을 사용하여 앱을 개선하는 방법에 대한 지침이 있습니다. 다음은 다음과 같은 항목을 다룹니다.

책임 및 예제를 사용하여 선도

또한 샘플 갤러리, 책임 있는 AI 사용에 대한 가이드 및 일부 용어 및 개념의 압축을 푸는 데 도움이 될 수 있는 몇 가지 고급 FAQ를 제공하여 AI를 Windows 애플리케이션에 통합하려는 개발자를 지원하는 리소스를 만들었습니다.

  • Windows의 AI 샘플 갤러리: AI를 Windows 앱에 통합하는 방법을 보여주는 샘플입니다.

  • Windows에서 책임 있는 생성 AI 애플리케이션 및 기능 개발: Windows에서 AI를 사용하고 책임 있는 AI를 Windows 앱에 통합하는 데 도움이 될 수 있는 리소스 및 지침입니다.

  • Windows에서 AI를 사용하는 방법에 대한 FAQ: Windows 컨텍스트에서 AI 사용과 관련된 용어 및 개념에 대한 질문과 "DirectML이란?", "ONNX란?", "ORT란?", "NPU란?", "SLM이란?", "추론이란 무엇인가요?", "미세 조정이란?"과 같은 질문을 다룹니다.

Windows 앱에 모델 추가 시작