Modo de pesquisa do HoloLens
O Modo de Pesquisa foi introduzido em dispositivos HoloLens (1ª Geração) para dar acesso aos principais sensores, especificamente para aplicativos de pesquisa que não se destinam à implantação. O Modo de Pesquisa para HoloLens 2 mantém os recursos do HoloLens 1, mas adiciona acesso aos seguintes fluxos:
Câmeras de acompanhamento de ambiente de luz visível – câmeras em escala cinza usadas pelo sistema para acompanhamento de cabeça e construção de mapa.
Câmera de Profundidade – opera em dois modos:
- AHAT, sensoriamento de alta frequência (45 FPS) de quase profundidade usado para acompanhamento manual. Diferentemente do modo de lançamento curto da primeira versão, o AHAT fornece pseudo-profundidade com encapsulamento de fase além de 1 metro.
- Detecção de profundidade de 1 a 5 FPS de baixa frequência usada pelo Mapeamento Espacial
Duas versões do fluxo de refletitividade de IR – usadas pelo HoloLens para calcular a profundidade. Essas imagens são iluminadas por infravermelho e não afetadas pela luz visível ambiente.
Se você estiver usando um HoloLens 2, também terá acesso às entradas adicionais abaixo:
- Acelerômetro – usado pelo sistema para determinar a aceleração linear ao longo dos eixos X, Y e Z e gravidade.
- Giro – usado pelo sistema para determinar rotações.
- Magnetômetro – usado pelo sistema para estimar a orientação absoluta.
Importante
O Modo de Pesquisa está atualmente em Visualização Pública.
Uma captura de realidade misturada de um aplicativo de teste que exibe os oito fluxos de sensor disponíveis no Modo de Pesquisa
Uso
O Modo de Pesquisa foi projetado para pesquisadores acadêmicos e industriais explorando novas ideias nas áreas de Pesquisa Visual Computacional e Robótica. Ele não se destina a aplicativos implantados em ambientes corporativos ou disponíveis por meio da Microsoft Store ou de outros canais de distribuição.
Além disso, a Microsoft não fornece garantias de que o Modo de Pesquisa ou funcionalidade equivalente terá suporte em atualizações futuras de hardware ou sistema operacional. No entanto, não deixe que isso o impeça de usá-lo para desenvolver e testar novas ideias!
Segurança e desempenho
Habilitar o Modo de Pesquisa usa mais energia da bateria do que usar o HoloLens 2 em condições normais, mesmo que o aplicativo que usa os recursos do Modo de Pesquisa não esteja em execução. Habilitar esse modo também pode reduzir a segurança geral do seu dispositivo porque os aplicativos podem usar os dados do sensor incorretamente. Você pode encontrar mais informações sobre a segurança do dispositivo nas Perguntas frequentes sobre segurança do HoloLens.
Suporte a dispositivos
| Recurso | HoloLens 1ª geração | HoloLens 2 |
| Câmeras de rastreamento de cabeça | ✔️ | ✔️ |
| Câmera de IR de & de profundidade | ✔️ | ✔️ |
| Acelerômetro | ❌ | ✔️ |
| Girômetro | ❌ | ✔️ |
| Magnetômetro | ❌ | ✔️ |
Habilitando o modo de pesquisa (holoLens primeira geração e HoloLens 2)
O Modo de Pesquisa é uma extensão do Modo de Desenvolvedor. Antes de começar, os recursos do desenvolvedor do dispositivo precisam ser habilitados para acessar as configurações do Modo de Pesquisa:
- Abra As Configurações do Menu > Iniciar e selecione Atualizações.
- Selecione Para Desenvolvedores e habilite o Modo de Desenvolvedor.
- Role para baixo e habilite o Portal de Dispositivos.
Depois que os recursos do desenvolvedor estiverem habilitados, conecte-se ao portal do dispositivo para habilitar os recursos do Modo de Pesquisa:
- Acesse o Modo de Pesquisa do Sistema > no Portal de Dispositivos.
- Selecione Permitir acesso ao fluxo do sensor.
- Reinicie o dispositivo a partir do item de menu Ligar/Ligar /Desliga na parte superior da página.
Depois de reiniciar o dispositivo, os aplicativos carregados por meio do Portal de Dispositivos poderão acessar fluxos do Modo de Pesquisa.
Janela Modo de Pesquisa no Portal de Dispositivos do HoloLens
Importante
O Modo de Pesquisa para HoloLens 2 está disponível a partir do build 19041.1364 . Se você precisar de acesso em uma compilação anterior, inscreva-se em nosso programa Insider Preview . Você pode encontrar mais detalhes no repositório GitHub do Modo de Pesquisa.
Usando dados de sensor em seus aplicativos
Os aplicativos podem acessar os dados de fluxo do sensor da mesma forma que o Media Foundation acessa fluxos de câmeras de fotos e vídeos.
Todas as APIs que funcionam para o desenvolvimento do HoloLens também estão disponíveis no Modo de Pesquisa. Em particular, o aplicativo sabe precisamente onde o HoloLens está no espaço 6DoF em cada tempo de captura de quadro do sensor.
Temos aplicativos de exemplo mostrando o acesso ao fluxo do Modo de Pesquisa, usando os intrínsecos e extrínsecos e os fluxos de gravação:
Suporte
Para o HoloLens (primeira geração), use o rastreador de problemas no repositório HoloLensForCV para postar comentários e acompanhar problemas conhecidos.
Para HoloLens 2, use o rastreador de problemas no repositório HoloLens2ForCV para postar comentários e acompanhar problemas conhecidos.