HoloLens-Forschungsmodus

Der Forschungsmodus wurde auf HoloLens-Geräten (1. Generation) eingeführt, um Zugriff auf wichtige Sensoren zu ermöglichen, insbesondere für Forschungsanwendungen, die nicht für die Bereitstellung vorgesehen sind. Der Recherchemodus für HoloLens 2 behält die Funktionen von HoloLens 1 bei, bietet jedoch Zugriff auf die folgenden Datenströme:

  • Überwachungskameras für sichtbare Lichtumgebung – Graustufenkameras, die vom System für die Kopfverfolgung und kartenbasierte Erstellung verwendet werden.

  • Tiefenkamera – Arbeitet in zwei Modi:

    • AHAT, hochfrequente (45 FPS)-Nahtiefenmessung, die für die Handverfolgung verwendet wird. Anders als bei der ersten Version des Kurzwurfmodus bietet AHAT Pseudotiefe mit Phasenumbruch über 1 Meter.
    • Fernen Tiefenmessung mit langer Wurffrequenz (1-5 FPS), die von räumlicher Zuordnung verwendet wird
  • Zwei Versionen des IR-Reflektivitätsdatenstroms : Wird von der HoloLens verwendet, um die Tiefe zu berechnen. Diese Bilder werden durch Infrarot beleuchtet und nicht von sichtbarem Umgebungslicht beeinflusst.

Wenn Sie eine HoloLens 2 verwenden, haben Sie auch Zugriff auf die folgenden zusätzlichen Eingaben:

  • Beschleunigungsmesser : Wird vom System verwendet, um die lineare Beschleunigung entlang der X-, Y- und Z-Achse und der Schwerkraft zu bestimmen.
  • Gyro : Wird vom System verwendet, um Drehungen zu bestimmen.
  • Magnetometer : Wird vom System verwendet, um die absolute Ausrichtung zu schätzen.

Wichtig

Der Recherchemodus befindet sich derzeit in der öffentlichen Vorschau.

Screenshot der App
Eine Mixed Reality-Aufnahme einer Testanwendung, die die acht im Forschungsmodus verfügbaren Sensorströme anzeigt

Verwendung

Der Research Mode ist für wissenschaftlerisch und industrielle Forscher konzipiert, die neue Ideen in den Bereichen maschinelles Sehen und Robotik erforschen. Sie ist nicht für Anwendungen vorgesehen, die in Unternehmensumgebungen bereitgestellt oder über den Microsoft Store oder andere Vertriebskanäle verfügbar sind.

Darüber hinaus bietet Microsoft keine Zusicherungen, dass der Forschungsmodus oder gleichwertige Funktionen in zukünftigen Hardware- oder Betriebssystemupdates unterstützt werden. Lassen Sie sich jedoch nicht davon abhalten, neue Ideen zu entwickeln und zu testen!

Sicherheit und Leistung

Das Aktivieren des Forschungsmodus verbraucht unter normalen Bedingungen mehr Akkuleistung als die Verwendung des HoloLens 2, auch wenn die Anwendung, die die Funktionen des Forschungsmodus verwendet, nicht ausgeführt wird. Das Aktivieren dieses Modus kann auch die Allgemeine Sicherheit Ihres Geräts verringern, da Anwendungen sensorische Daten möglicherweise missbrauchen. Weitere Informationen zur Gerätesicherheit finden Sie in den häufig gestellten Fragen zur HoloLens-Sicherheit.

Geräteunterstützung

Feature HoloLens (1. Generation) HoloLens 2
Kopfverfolgungskameras ✔️ ✔️
Tiefen & IR-Kamera ✔️ ✔️
Beschleunigungsmesser ✔️
Gyroskop ✔️
Magnetometer ✔️

Aktivieren des Forschungsmodus (HoloLens first Gen und HoloLens 2)

Der Recherchemodus ist eine Erweiterung des Entwicklermodus. Bevor Sie beginnen, müssen die Entwicklerfeatures des Geräts aktiviert werden, um auf die Einstellungen für den Recherchemodus zugreifen zu können:

  • Öffnen Sie Einstellungen im Startmenü>, und wählen Sie Updates aus.
  • Wählen Sie Für Entwickler aus, und aktivieren Sie den Entwicklermodus.
  • Scrollen Sie nach unten, und aktivieren Sie Geräteportal.

Nachdem die Entwicklerfeatures aktiviert wurden, stellen Sie eine Verbindung mit dem Geräteportal her , um die Features des Forschungsmodus zu aktivieren:

  • Wechseln Sie im Geräteportal zum Systemforschungsmodus>.
  • Wählen Sie Zugriff auf Sensordatenstrom zulassen aus.
  • Starten Sie das Gerät über das Menüelement Ein/ Aus oben auf der Seite neu.

Nachdem Sie das Gerät neu gestartet haben, können die über das Geräteportal geladenen Anwendungen auf Datenströme im Forschungsmodus zugreifen.

Registerkarte
Fenster "Recherchemodus" im HoloLens-Geräteportal

Wichtig

Der Recherchemodus für HoloLens 2 ist ab Build 19041.1364 verfügbar. Wenn Sie Zugriff in einem früheren Build benötigen, registrieren Sie sich für unser Insider Preview-Programm . Weitere Informationen finden Sie im GitHub-Repository "Research Mode".

Verwenden von Sensordaten in Ihren Apps

Anwendungen können auf die Sensordatenstromdaten genauso zugreifen, wie Media Foundation auf Foto- und Videokamerastreams zugreift.

Alle APIs, die für die HoloLens-Entwicklung funktionieren, sind auch im Forschungsmodus verfügbar. Insbesondere weiß die Anwendung genau, wo sich HoloLens bei jeder Sensorframeaufnahmezeit im 6DoF-Raum befindet.

Wir haben Beispielanwendungen, die den Datenstromzugriff im Forschungsmodus unter Verwendung der systeminternen Daten und extrinsischen Datenströme und Aufzeichnungsdatenströme zeigen:

Support

Verwenden Sie für HoloLens (erste Generation) den Issue Tracker im HoloLensForCV-Repository, um Feedback zu posten und bekannte Probleme nachzuverfolgen.

Verwenden Sie für HoloLens 2 die Problemnachverfolgung im HoloLens2ForCV-Repository, um Feedback zu posten und bekannte Probleme nachzuverfolgen.

Weitere Informationen