AI di Galeri Sampel Windows
Kumpulan sampel yang menunjukkan berbagai cara untuk meningkatkan aplikasi Windows Anda menggunakan model API lokal dan Pembelajaran Mesin (ML), akselerasi perangkat keras lokal menggunakan DirectML, dan menggunakan API berbasis cloud.
Saat menggunakan fitur AI, kami sarankan Anda meninjau: Mengembangkan Aplikasi dan Fitur AI Generatif yang Bertanggung Jawab di Windows.
Sampel ini akan membantu Anda meningkatkan aplikasi Windows dengan AI menggunakan API lokal dan model Pembelajaran Mesin.
Repositori GitHub: Editor Audio Berbasis AI Sampel
Deskripsi: Editor Audio yang didukung AI menunjukkan pembuatan aplikasi pengeditan audio WinUI 3 yang menggunakan AI untuk mencocokkan cuplikan audio dengan kueri yang relevan. Contoh kasus penggunaan bisa menjadi pembuat podcast yang ingin membuat klip audio pendek konten mereka untuk dipromosikan di Media Sosial. Sampel menggunakan inferensi model ML lokal untuk menangani transkripsi dan pencarian semantik.
Fitur: Inferensi Model Lokal dengan ONNX Runtime, Model Whisper, Model Embeddings
Repositori GitHub : Aplikasi Sampel Catatan yang didukung AI
Deskripsi: Aplikasi pencatatan bertenaga AI ini menunjukkan penggunaan API termasuk Pengenalan Teks OCR, Transkripsi Audio melalui model ML lokal, Pencarian Semantik melalui model penyematan lokal, penggunaan model bahasa lokal dengan Phi3 untuk ringkasan, pelengkapan otomatis, dan penalaran teks, serta Pengambilan yang Ditingkatkan dengan Generasi (RAG) untuk membumikan model bahasa pada data nyata.
Fitur: Pencarian semantik dengan model lokal, Transkripsi audio dengan model lokal, Local Retreval Augmented generation (RAG) dengan Phi3, Ringkasan dan penalaran Teks Lokal dengan Phi3, Ekstraksi teks dari gambar dengan OCR API
Repositori GitHub : aplikasi sampel RAG PDF Analyzer WPF
Deskripsi: Aplikasi sampel WPF ini menunjukkan cara membangun pengalaman dengan model bahasa lokal (seperti Phi3) untuk menjawab pertanyaan tentang konten dalam dokumen PDF. Sampel menemukan jawaban dengan merujuk pangkalan pengetahuan di luar data pelatihan model sendiri sebelum menghasilkan respons. Pola ini, yang disebut Retrieval Augmented Generation (RAG), adalah contoh cara membumikan model bahasa ke data otoritatif dunia nyata.
Fitur: Pengambilan Augmented Generation (RAG), ONNX Runtime Generative AI, DirectML
Jenis Aplikasi
Repositori GitHub: Sampel Phi3 Chat WinUI 3
Deskripsi: Sampel aplikasi WinUI 3 ini menunjukkan cara menggunakan pustaka AI Generatif Runtime ONNX untuk membangun pengalaman obrolan dengan model bahasa lokal, khususnya Model Bahasa Kecil Phi3 (SLM).
Fitur
GitHub Repo: contoh aplikasi Windows Studio Effects
Description: Pelajari cara mengontrol Efek Studio Kamera dari aplikasi Windows Anda dalam sampel kode ini. Periksa apakah kamera yang didukung tersedia pada sistem (memerlukan perangkat dengan NPU dan kamera bawaan), lalu mendapatkan dan mengatur kontrol kamera yang diperluas yang terkait dengan Efek Windows Studio, seperti Kabur Latar Belakang, Koreksi Tatapan Mata, dan Pembingkaian Otomatis.
Fitur: Efek Windows Studio
Jenis Aplikasi
Repo GitHub: WebNN Stable Diffusion Turbo
Description: Sampel ini memperagakan cara menggunakan WebNN dengan ONNX Runtime web untuk menjalankan Stable Diffusion secara lokal pada GPU dengan DirectML. SD-Turbo adalah model generatif teks-ke-gambar cepat yang dapat menghasilkan gambar fotorealistik dari prompt teks dalam satu evaluasi jaringan. Dalam demo, Anda dapat menghasilkan gambar dalam 2 detik pada perangkat PC AI dengan memanfaatkan Api WebNN, API tingkat rendah khusus untuk akselerasi perangkat keras inferensi jaringan neural.
Fitur
Jenis Aplikasi
GitHub Repo: WebNN Segmen Apa Pun
Deskripsi: Sampel ini menunjukkan cara menggunakan WebNN dengan ONNX Runtime web untuk menjalankan Segment Anything secara lokal di GPU dengan DirectML. Segment Anything adalah model AI baru dari Meta AI yang dapat "memotong" objek apa pun. Dalam demo, Anda dapat mengegmentasi objek apa pun dari gambar yang diunggah.
Fitur
Jenis Aplikasi
Repositori GitHub: WebNN Whisper Base
Deskripsi: Sampel ini menggambarkan cara menggunakan WebNN dengan ONNX Runtime web untuk menjalankan kemampuan model Whisper mengubah ucapan menjadi teks secara lokal pada GPU atau NPU dengan DirectML. Whisper Base adalah model yang telah dilatih sebelumnya untuk pengenalan ucapan otomatis (ASR) dan terjemahan ucapan. Dalam demo, Anda dapat mengalami fitur ucapan ke teks dengan menggunakan inferensi pada perangkat yang didukung oleh WebNN API dan DirectML, terutama akselerasi NPU.
Fitur: Ucapan ke teks lokal, WebNN, DirectML
Jenis Aplikasi
Penggunaan akselerasi perangkat keras dan model-model bahasa ONNX Runtime yang telah dioptimalkan sebelumnya (Phi3, Llama3, dll) dengan DirectML
Repositori GitHub : contoh DirectML dalam repositori Olive
Description: Sampel ini menggambarkan cara menjalankan model bahasa ONNX Runtime (ORT) yang telah dioptimalkan sebelumnya secara lokal pada GPU dengan DirectML. Sampel mencakup instruksi tentang cara menyiapkan lingkungan Anda, mengunduh model bahasa terbaru yang telah dilatih sebelumnya menggunakan ORT Generate API dan menjalankan model di aplikasi Gradio.
Fitur: Akselerasi Perangkat Keras, GenAI, ONNX, ONNX Runtime, DirectML
Jenis Aplikasi: Python, Gradio
Repo GitHub : sampel DirectML PyTorch
Description: Sampel ini menggambarkan cara menjalankan model bahasa PyTorch secara lokal pada GPU dengan DirectML. Sampel mencakup instruksi tentang cara menyiapkan lingkungan Anda, mengunduh model bahasa terbaru yang telah dilatih sebelumnya dan menjalankan model di aplikasi Gradio. Sampel ini mendukung berbagai model bahasa sumber terbuka seperti model Llama, Phi3-mini, Phi2 dan Mistral-7B.
Fitur
Jenis Aplikasi: Python, Gradio
Sampel API berbasis cloud lainnya dapat ditemukan dalam dokumentasi layanan Azure AI .
Tutorial: Menambahkan penyelesaian obrolan OpenAI ke aplikasi WinUI 3 / Windows App SDK Anda
Deskripsi: Mengintegrasikan kemampuan penyelesaian obrolan OpenAI ke dalam aplikasi desktop WinUI 3 / Windows App SDK.
Fitur: Penyelesaian percakapan OpenAI
Tutorial: Tambahkan DALL-E ke aplikasi desktop WinUI 3 / Windows App SDK Anda
Deskripsi: Mengintegrasikan kemampuan pembuatan gambar OpenAI DALL-E ke dalam aplikasi desktop WinUI 3 / Windows App SDK.
Fitur
Tutorial: Membuat aplikasi rekomendasi dengan .NET MAUI dan ChatGPT
Deskripsi: Mengintegrasikan kemampuan penyelesaian obrolan OpenAI ke dalam aplikasi desktop .NET MAUI.
Fitur
Tutorial: Tambahkan DALL-E ke aplikasi desktop Windows .NET MAUI Anda
Description: Mengintegrasikan kemampuan pembuatan gambar OpenAI DALL-E ke dalam aplikasi desktop .NET MAUI.
Fitur
Repositori GitHub : contoh WinML di GitHub
Deskripsi: WinML terus didukung, tetapi sampel ini belum diperbarui untuk mencerminkan penggunaan AI modern.