Mano e tracciamento oculare articolato in Unity

HoloLens 2 ha introdotto alcune nuove e eccitanti funzionalità, ad esempio La mano articolata e il rilevamento degli occhi.

Il modo più semplice per sfruttare la nuova funzionalità in Unity è tramite MRTK. Esistono anche alcune scene di esempio per iniziare.

Blocchi predefiniti che supportano mani, occhi e altri in MRTK

MRTK v2 offre un set di controlli dell'interfaccia utente e blocchi predefiniti per accelerare lo sviluppo.

Pulsante Rettangolo di selezione casella di selezione Gestore manipolazione manipolazione
Controllo pulsante, che supporta vari metodi di input, tra cui la mano articolata di HoloLens2 Interfaccia utente standard per la modifica di oggetti nello spazio 3D Script per la modifica di oggetti con una o due mani
Slate Slate Tastieradel sistema di sistema Interazionebile
Piano di stile 2D, che supporta lo scorrimento con input di mano articolato Script di esempio dell'uso della tastiera di sistema in Unity Uno script per rendere gli oggetti interagisci con gli stati visivi e il supporto del tema
Risolutorerisolutore Insiemedi oggetti raccolta oggetti Descrizione comando Descrizione comando
Vari comportamenti di posizionamento degli oggetti, ad esempio tag-lungo, blocco corpo, dimensioni della visualizzazione costante e magnetismo della superficie Script per la creazione di una matrice di oggetti in una forma tridimensionale Interfaccia utente di annotazione con sistema di ancoraggio/pivot flessibile, che può essere usato per etichettare controller di movimento e oggetto.
Barra delle app della barradelle app della barra delle app Puntatori puntatori Visualizzazione dellapunta della punta della mano
Interfaccia utente per l'attivazione manuale di Bounding Box Informazioni su vari tipi di puntatori L'accesso visivo alla punta di mano, che migliora la fiducia per l'interazione diretta
Rilevamento oculare: Rilevamento oculare di selezione di destinazione: selezione di destinazione Rilevamento oculare: rilevamentodegli occhi di spostamento: navigazione
Combinare gli occhi, la voce e l'input della mano per selezionare rapidamente e senza sforzo gli ologrammi nella scena Informazioni su come scorrere automaticamente il testo o lo zoom sul contenuto incentrato in base a ciò che si sta guardando Esempi per la registrazione, il caricamento e la visualizzazione di ciò che gli utenti stanno esaminando nell'app

Scene di esempio

Esplorare i vari tipi di interazioni e controlli dell'interfaccia utente di MRTK in questa scena di esempio.

È possibile trovare altre scene di esempio nella cartella GitHub Realtà mista Toolkit nella cartella Asset/MixedRealityToolkit.Examples/Demos.

Scena di esempio

Successivo checkpoint di sviluppo

Se si sta seguendo il percorso di sviluppo di Unity, si è in corso l'esplorazione dei blocchi predefiniti di MRTK. Da qui è possibile passare al blocco predefinito successivo:

In alternativa, passare alle API e funzionalità della piattaforma di realtà mista:

È sempre possibile tornare ai checkpoint per lo sviluppo con Unity in qualsiasi momento.

Vedere anche