Bagikan melalui

Windows Copilot Runtime Ikhtisar

  • Artikel

Tumpukan Microsoft Copilot di Windows mendemokratisasi kemampuan untuk bereksperimen, membangun, dan menjangkau orang-orang dengan pengalaman AI terobosan, menempatkan pengembang dalam kontrol. Salinan di Windows muncul sebagai bilah samping yang ditambatkan di desktop Windows dan dirancang untuk membantu pengguna menyelesaikan masalah dalam sistem operasi (seperti mengubah pengaturan Windows). Lihat Mengelola Copilot di Windows untuk mempelajari selengkapnya tentang mengonfigurasi Copilot di Windows untuk lingkungan komersial.

Windows Copilot Runtime memperkenalkan cara baru untuk berinteraksi dengan sistem operasi yang menggunakan AI, seperti Phi Silica, Model Bahasa Kecil (SLM) yang dibuat oleh Microsoft Research yang mampu menawarkan banyak kemampuan yang sama yang ditemukan dalam Model Bahasa Besar (LLM), tetapi lebih ringkas dan efisien sehingga dapat berjalan secara lokal di Windows.

Sebagai pengembang, Anda dapat mengintegrasikan aplikasi Anda dengan pengalaman Windows yang didukung AI seperti Recall dan Studio Effects, memanfaatkan API baru yang didukung oleh model perangkat melalui Windows Copilot Library, menemukan model Pembelajaran Mesin (ML) untuk menyempurnakan dengan data Anda sendiri yang disesuaikan menggunakan AI Toolkit di Visual Studio Code, mengintegrasikan model ML Anda sendiri menggunakan kerangka kerja seperti ONNX Runtime, PyTorch, atau WebNN, dan mengakses akselerasi perangkat keras untuk performa dan skala yang lebih baik melalui DirectML.

Windows Copilot Runtime dan Windows Copilot Library

Ada inovasi baru yang menggunakan AI untuk meningkatkan dan menentukan ulang pengalaman Windows, dengan beberapa inovasi AI dipanggang langsung ke dalam menggunakan Windows dan yang lain yang tersedia bagi Pengembang Aplikasi untuk diintegrasikan ke dalam fitur aplikasi mereka. Cara baru mengintegrasikan AI ke dalam aplikasi Windows ini membentuk Windows Copilot Library, daftar fitur dan API yang didukung AI yang siap digunakan, termasuk:

  • Studio Effects: Meningkatkan kemampuan kamera dan audio perangkat Windows dengan efek latar belakang bertenaga AI, koreksi kontak mata, pembingkaian otomatis, fokus suara, kabur, pencahayaan, dan filter kreatif yang dijalankan pada NPU perangkat untuk mempertahankan kecepatan performa yang cepat.
  • Recall: Membuat aktivitas sebelumnya di perangkat Windows Anda dapat dicari, sehingga Anda dapat mengambil tempat yang Anda tinggalkan, baik yang menggunakan aplikasi, mengedit dokumen, atau merespons email.
  • Phi Silica: Memungkinkan aplikasi Anda terhubung dengan model Phi di perangkat untuk tugas pemrosesan bahasa alami (obrolan, matematika, kode, penalaran) menggunakan SDK Aplikasi Windows.
  • Text Recognition: Pengenalan Karakter Optik, atau OCR, memungkinkan ekstraksi teks dari gambar dan dokumen. Bayangkan tugas seperti mengonversi PDF, dokumen kertas, atau gambar papan putih ruang kelas menjadi teks digital yang dapat diedit.
  • Terjemahan Keterangan Langsung: Membantu semua orang di Windows, termasuk mereka yang tuli atau sulit mendengar, lebih memahami audio dengan melihat keterangan konten lisan, bahkan ketika konten audio dalam bahasa yang berbeda dari bahasa pilihan sistem.

Pengembang akan dapat mengakses API ini sebagai bagian dari SDK Aplikasi Windows.

Selain API yang didukung AI yang siap digunakan di Windows Copilot Library, kami memiliki panduan tentang cara meningkatkan aplikasi Anda menggunakan model Pembelajaran Mesin (ML). Ini mencakup topik seperti:

Memimpin dengan tanggung jawab dan contoh

Kami juga telah membuat sumber daya untuk mendukung pengembang kami yang ingin mengintegrasikan AI ke dalam aplikasi Windows Anda dengan menyediakan Galeri Sampel, panduan untuk penggunaan AI yang Bertanggung Jawab, dan beberapa FAQ tingkat tinggi yang dapat membantu membongkah beberapa terminologi dan konsep.

Mulai menambahkan model ke aplikasi Windows Anda