Visão geral Windows Copilot Runtime
Importante
Aplicativos não empacotados não são suportados no momento.
Windows Copilot Runtime fornece uma variedade de recursos baseados em IA disponíveis via APIs, permitindo que você utilize recursos de IA sem a necessidade de encontrar, executar ou otimizar seu próprio modelo de Machine Learning (ML). Os modelos que alimentam Windows Copilot Runtime em PCs Copilot+ são executados localmente e continuamente em segundo plano.
Ao utilizar recursos de IA, recomendamos que você revise: Desenvolvendo aplicativos e recursos de IA generativa responsável no Windows.
Windows Copilot Runtime recursos, APIs para aplicações do Windows
Windows Copilot Runtime inclui os seguintes recursos e APIs com suporte de IA (no SDK de Aplicações para Windows ), alimentados por modelos executados localmente no dispositivo Windows.
Phi Silica: O APIs Phi Silica será lançado no Windows App SDK. Semelhante ao GPT Large Language Model (LLM) da OpenAI que alimenta o ChatGPT, o Phi é um Small Language Model (SLM) desenvolvido pela Microsoft Research para executar tarefas de processamento de linguagem em um dispositivo local. O Phi Silica foi projetado especificamente para dispositivos Windows com uma Unidade de Processamento Neural (NPU), permitindo que os recursos de geração de texto e conversação sejam executados de forma acelerada por hardware de alto desempenho diretamente no dispositivo.
Text Recognition com OCR: O Text RecognitionAPIs (também conhecido como Reconhecimento Ótico de Caracteres ou OCR) será fornecido no SDK de Aplicativo Windows. Esses APIs permitem o reconhecimento de texto em uma imagem e a conversão de diferentes tipos de documentos (como documentos em papel digitalizados, arquivos PDF ou imagens capturadas por uma câmera digital) em dados editáveis e pesquisáveis em um dispositivo local.
Imaging APIs: O sistema de Imaging aprimorado por IA APIs será disponibilizado no SDK de Aplicações do Windows . Esses APIs executam uma variedade de ações, como dimensionar imagens de forma inteligente e identificar objetos dentro delas.
Studio Effects: Dispositivos Windows com Unidades de Processamento Neural (NPUs) compatíveis integram Studio Effects nas configurações integradas de câmera e microfone do dispositivo. Aplique efeitos especiais que utilizam IA, incluindo: Desfoque de fundo, correção de contato visual, enquadramento automático, correção de luz de retrato, filtros criativos ou foco de voz para filtrar o ruído de fundo.
Recall: Recall permite que os usuários encontrem rapidamente coisas de suas atividades anteriores, como documentos, imagens, sites e muito mais. Os desenvolvedores podem enriquecer a experiência Recall do usuário com seu aplicativo adicionando informações contextuais ao banco de dados vetorial subjacente com a API de atividade do usuário . Essa integração ajudará os usuários a continuar de onde pararam em seu aplicativo, melhorando o envolvimento com o aplicativo e o fluxo contínuo do usuário entre o Windows e seu aplicativo.
Live Caption Translations ajudam todos no Windows, incluindo aqueles que são surdos ou com dificuldades auditivas, a entender melhor o áudio visualizando legendas de conteúdo falado (mesmo quando o áudio está numa língua diferente da língua preferida do sistema).
Moderação de Conteúdo: Saiba como Windows Copilot Runtime modera o conteúdo e como ajustar filtros de sensibilidade.
Integre IA em aplicativos corporativos usando o Windows Copilot RuntimeAPIs
Assista à sessão de demonstração Integrar IA em aplicativos corporativos usando Windows Copilot RuntimeAPIs da Conferência Ignite de novembro de 2024.
Recursos adicionais
- Introdução à IA no Windows: Windows Copilot Runtime implementa uma API de moderação de conteúdo de texto para sinalizar e filtrar conteúdo potencialmente prejudicial. Saiba mais sobre esse recurso e como ajustar a sensibilidade do filtro.
- Desenvolvimento de Aplicações e Funcionalidades de IA Generativa Responsável no Windows: Orientação para o desenvolvimento responsável de aplicações que incorporam IA.
- AI na Galeria de Exemplos do Windows: Uma coleção de exemplos que demonstram várias maneiras de aprimorar seus aplicativos do Windows usando IA.