Windows Copilot Runtime Ikhtisar
Windows Copilot Runtime memperkenalkan cara baru untuk berinteraksi dengan sistem operasi yang menggunakan AI, seperti Phi Silica, Model Bahasa Kecil (SLM) yang dibuat oleh Microsoft Research yang mampu menawarkan banyak kemampuan yang sama yang ditemukan dalam Model Bahasa Besar (LLM), tetapi lebih ringkas dan efisien sehingga dapat berjalan secara lokal di Windows.
Sebagai pengembang, Anda dapat mengintegrasikan aplikasi Anda dengan pengalaman Windows yang didukung AI seperti Recall dan Studio Effects, memanfaatkan API baru yang didukung oleh model perangkat melalui Windows Copilot Library, menemukan model Pembelajaran Mesin (ML) untuk menyempurnakan dengan data Anda sendiri yang disesuaikan menggunakan AI Toolkit di Visual Studio Code, mengintegrasikan model ML Anda sendiri menggunakan kerangka kerja seperti ONNX Runtime, PyTorch, atau WebNN, dan mengakses akselerasi perangkat keras untuk performa dan skala yang lebih baik melalui DirectML.
Catatan
Tidak semua fitur tersedia saat ini. Ikuti saluran sosial pengembang Microsoft dan acara komunitas untuk informasi terbaru tentang ketersediaan.
Windows Copilot Runtime dan Windows Copilot Library
Ada inovasi baru yang menggunakan AI untuk meningkatkan dan menentukan ulang pengalaman Windows, dengan beberapa inovasi AI dipanggang langsung ke dalam menggunakan Windows dan yang lain yang tersedia bagi Pengembang Aplikasi untuk diintegrasikan ke dalam fitur aplikasi mereka. Cara baru mengintegrasikan AI ke dalam aplikasi Windows ini membentuk Windows Copilot Library, daftar fitur dan API yang didukung AI yang siap digunakan, termasuk:
- Studio Effects: Meningkatkan kemampuan kamera dan audio perangkat Windows dengan efek latar belakang bertenaga AI, koreksi kontak mata, pembingkaian otomatis, fokus suara, kabur, pencahayaan, dan filter kreatif yang dijalankan pada NPU perangkat untuk mempertahankan kecepatan performa yang cepat.
- Recall: Membuat aktivitas sebelumnya di perangkat Windows Anda dapat dicari, sehingga Anda dapat mengambil tempat yang Anda tinggalkan, baik yang menggunakan aplikasi, mengedit dokumen, atau merespons email.
- Phi Silica: Memungkinkan aplikasi Anda terhubung dengan model Phi di perangkat untuk tugas pemrosesan bahasa alami (obrolan, matematika, kode, penalaran) menggunakan SDK Aplikasi Windows.
- Text Recognition: Pengenalan Karakter Optik, atau OCR, memungkinkan ekstraksi teks dari gambar dan dokumen. Bayangkan tugas seperti mengonversi PDF, dokumen kertas, atau gambar papan putih ruang kelas menjadi teks digital yang dapat diedit.
- Terjemahan Keterangan Langsung: Membantu semua orang di Windows, termasuk mereka yang tuli atau sulit mendengar, lebih memahami audio dengan melihat keterangan konten lisan, bahkan ketika konten audio dalam bahasa yang berbeda dari bahasa pilihan sistem.
Pengembang akan dapat mengakses API ini sebagai bagian dari SDK Aplikasi Windows.
Selain API yang didukung AI yang siap digunakan di Windows Copilot Library, kami memiliki panduan tentang cara meningkatkan aplikasi Anda menggunakan model Pembelajaran Mesin (ML). Ini mencakup topik seperti:
- Bagaimana aplikasi Windows dapat memanfaatkan model ML?
- Di mana saya dapat menemukan model ML sumber terbuka di web?
- Bagaimana cara mengoptimalkan model ML untuk digunakan di aplikasi Windows saya?
- Bagaimana cara menyempurnakan model ML dengan data kustom saya sendiri?
- Bagaimana cara memanfaatkan akselerasi perangkat keras untuk performa yang lebih baik dengan fitur AI?
Memimpin dengan tanggung jawab dan contoh
Kami juga telah membuat sumber daya untuk mendukung pengembang kami yang ingin mengintegrasikan AI ke dalam aplikasi Windows Anda dengan menyediakan Galeri Sampel, panduan untuk penggunaan AI yang Bertanggung Jawab, dan beberapa FAQ tingkat tinggi yang dapat membantu membongkah beberapa terminologi dan konsep.
AI di Galeri Sampel Windows: Sampel yang menunjukkan cara untuk mengintegrasikan AI ke dalam aplikasi Windows.
Mengembangkan Aplikasi dan Fitur AI Generatif yang Bertanggung Jawab di Windows: Sumber daya dan panduan untuk membantu Anda bekerja dengan AI di Windows dan menggabungkan AI secara bertanggung jawab ke dalam aplikasi Windows Anda.
Tanya Jawab Umum tentang menggunakan AI dengan Windows: Tanya jawab umum tentang terminologi dan konsep yang terkait dengan penggunaan AI dalam konteks Windows, mencakup pertanyaan seperti "Apa itu DirectML?", "Apa itu ONNX?", "Apa itu ORT?", "Apa itu NPU?", "Apa itu SLM?", "Apa itu inferensi?", "Apa itu penyempurnaan?", dll.