Wprowadzenie
Zestaw narzędzi Mixed Reality Toolkit umożliwia korzystanie z danych wejściowych z różnych źródeł danych wejściowych, takich jak kontrolery, przegubowe ręce lub mowa. Wybranie modelu interakcji najlepiej dopasowanego do środowiska rzeczywistości mieszanej wymaga zidentyfikowania użytkownika, zidentyfikowania ich celów i rozważenia wszelkich czynników sytuacyjnych lub środowiskowych, które mogą mieć wpływ na ich środowisko.
Załóżmy, że projektujesz grę, która wymaga wielu interakcji. Użytkownicy są nieco zaniepokojeni metodą interakcji, ponieważ będzie to męczące korzystanie z kontrolerów w długim okresie. W związku z tym należy wymyślić alternatywne metody wprowadzania danych wejściowych dla powodzenia aplikacji.
W tym module pokazano, jak zintegrować polecenia śledzenia oczu i głosu z zestawem MRTK przy użyciu modelu hologramu Mars Curiosity Rover NASA. W tym miejscu wykonasz następujące czynności:
- Jak włączyć śledzenie oczu dla urządzenia HoloLens 2.
- Dowiedz się, jak wyzwalać akcję za pomocą śledzenia oczu.
- Jak tworzyć polecenia mowy.
- Dowiedz się, jak kontrolować polecenia mowy globalnie i lokalnie.
Po zakończeniu modułu możesz dodać do projektu polecenia śledzenia oczu i głosu przy użyciu zestawu narzędzi MRTK.
Pełny przykład tego samouczka można znaleźć tutaj.