Es ist kein Geheimnis, dass Sony an der Entwicklung des Finger-Trackings für einen neuen VR-Motion-Controller gearbeitet hat, aber zum ersten Mal haben wir tatsächlich einen Einblick in die Technologie in Aktion erhalten. Ein neues Video und Forschungsbericht, berechtigt „Evaluierung maschineller Lerntechniken zur Schätzung der Handhaltung auf einem Handgerät mit Näherungssensor“ wurden online veröffentlicht. Es ist wichtig zu wissen, dass die Arbeit von Kazuyuki Arimatsu und Hideki Mori von Sony Interactive Entertainment verfasst wurde, der Abteilung, die speziell für die Marke PlayStation verantwortlich ist.
„Wir haben einen Prototyp mit 62 Elektroden gebaut und Trainingsdatensätze mit einem optischen Tracking-System aufgezeichnet“, heißt es in dem Bericht. „Wir haben eine 2.5D-Darstellung eingeführt, um Faltungs-Neuronale-Netzwerk-Methoden auf ein kapazitives Bild der gekrümmten Oberfläche anzuwenden, und zwei Arten von Netzwerkarchitekturen, die auf jüngsten Errungenschaften im Bereich Computer Vision basieren, wurden mit unserem Datensatz bewertet. Mit dem Prototyp haben wir auch interaktive Echtzeitanwendungen implementiert und die Möglichkeit einer intuitiven Interaktion mit den Fingern in VR-Anwendungen demonstriert. “
Ein Video, das zu zeigen scheint, was der Prototyp des VR-Motion-Controllers in Aktion sein könnte, der online von Upload VR veröffentlicht wurde, zeigt, wie das Finger-Tracking-Update das Gameplay erheblich verbessern würde. Ähnlich wie bei den Index-Controllern von Valve können Sensoren erkennen, wann ein Benutzer das Gerät mit allen Fingern greift und in ähnlicher Weise, wenn ein Finger entfernt wird. Das Video behauptet, dass diese Technik keine externe Sicht verwendet, um die Position der Finger zu verfolgen, wie in der Controller-freien Lösung auf Oculus Quest zu sehen.
Die Gerüchte über Prototypen von Sony VR Motion Controllern gewinnen an Bedeutung, aber es wurde noch nichts bestätigt. Wir wissen nur, dass der PS5-Start noch nicht abgeschlossen ist und Sony sich auf den bislang größten Sommer vorbereitet.
.