Zum Hauptinhalt

Sound Gesture Intelligence

Dr. Greg Beller

Hand Tracking

Various cameras can be used to estimate the absolute position of the joints in the skeleton of the hand. From a simple webcam, to a network of distributed infrared cameras, to depth-sensor cameras, here's an overview of the different sensors that enable you to track hands and fingers in space.

Dieser Inhalt wird von YouTube bereitgestellt.
Beim Abspielen wird eine Verbindung zu den Servern von YouTube hergestellt und der Anbieter kann Cookies einsetzen, die Hinweise über dein Nutzungsverhalten sammeln.
Weitere Informationen zum Datenschutz bei YouTube findest du in der Datenschutzerklärung des Anbieters.

Accessing Theater: Theater und Multimedia – tools - presented by Dr. Greg Beller.

On some XR devices it is possible to get fully articulated information about the user’s hands when they are used as input sources. The WebXR Hand Input module expands the WebXR Device API with the functionality to track articulated hand poses. This API exposes the poses of each of the users' hand skeleton joints. This can be used to do gesture detection or to render a hand model in VR scenarios.

edu sharing object

WebXR Device API: Hand skeleton joints