Meta arbeitet daran, Quest-Headsets in Fahrzeugen zum Laufen zu bringen
Erfahren Sie mehr über Metas Bemühungen, das Problem des Positionsdrifts bei Quest-Headsets in sich bewegenden Fahrzeugen zu lösen.
Warum tritt Positionsdrift in Fahrzeugen auf?
Markerlose Inside-Out-Tracking-Systeme in Headsets, Brillen und selbstverfolgenden Controllern nutzen sowohl Kameras als auch die Trägheitseinheit (IMU). Die IMU besteht aus einem winzigen Beschleunigungsmesser und Gyroskop, die Aktualisierungen mit einer Frequenz von etwa 1000 Hz liefern, was eine niedrigere Latenz ermöglicht.
Die IMU kann jedoch keine absolute Bewegung direkt erfassen. Sie erfasst die Beschleunigung relativ zur Schwerkraft und berechnet daraus Geschwindigkeit und Verschiebung. Dieser Vorgang wird als Tote Reckoning bezeichnet. Die optischen Komponenten wie Kameras oder Laser-Basisstationen werden verwendet, um kumulative Fehler zu korrigieren, die durch die Rauschhaftigkeit der IMU verursacht werden.
In bewegten Fahrzeugen wie Flugzeugen nimmt der Beschleunigungsmesser die Beschleunigung des Fahrzeugs auf und verwechselt sie mit der Beschleunigung des Headsets. Dies führt zu plötzlichem und rapidem Positionsdrift, wie in einem Video, das von Andrew Fox geteilt wurde, zu sehen ist.
Metas Bemühungen, das Problem zu lösen
Derzeit ist es möglich, die 6DoF-Positionsverfolgung auf Quest-Headsets zu deaktivieren, wodurch jedoch auch die Passthrough-Funktion deaktiviert wird. Meta erwägt möglicherweise, Passthrough zuzulassen, wenn die Positionsverfolgung deaktiviert ist.
Alternativ könnte Meta an einer Lösung arbeiten, um die Positionsverfolgung in bewegten Fahrzeugen zum Laufen zu bringen. Dies könnte bedeuten, dass das System angewiesen wird, sich ausschließlich auf Kamerabilder zu verlassen und die IMU zu ignorieren. Ein früheres Forschungsprojekt von Meta zeigte ein funktionierendes Quest Pro in einem fahrenden BMW durch die Verbindung mit der IMU des Autos.
Auf der anderen Seite hat Apple einen Reisemodus für die Verwendung in Flugzeugen mit seinem Vision Pro-Headset, aber die genaue Funktionalität dieses Modus ist unbekannt. Apple behauptet, dass er die Visuals 'stabilisieren' wird, aber weitere Tests sind erforderlich, um seine Fähigkeiten zu verstehen.
Die Zukunft von Quest-Headsets in bewegten Fahrzeugen
Metas CTO, Andrew Bosworth, hat das Problem anerkannt und erklärt, dass Meta daran arbeitet. Ob sie eine Lösung finden, die Positionsverfolgung in bewegten Fahrzeugen ermöglicht oder Passthrough ohne Positionsverfolgung aktiviert, bleibt abzuwarten.
In der Zwischenzeit können Benutzer Metas Arbeit unterstützen, indem sie ihre Adblocker deaktivieren oder Mitglieder der Plattform werden und damit die laufende Forschung und Entwicklung finanzieren.
Ebenso könnte der Vision Pro von Apple und sein Reisemodus eine Lösung bieten, um Headsets in Flugzeugen zu verwenden, aber weitere Informationen sind erforderlich, um seine Fähigkeiten vollständig zu verstehen.
