Handbewegungen erkennen – Gestensteuerung mittels intelligentem Armband
Digitale Technik integriert sich zunehmend in den Alltag aller Menschen – ob im Smart Home, in intelligenten Brillen, Autos oder Assistenzsystemen für Pflege, Arbeit und Freizeit. Allerdings fehlen für diese Geräte und deren Umgebungen oft natürliche Benutzerschnittstellen und Interaktionsparadigmen, die eine einfache, intuitive und niederschwellige Nutzung ermöglichen.
Das Vorhaben WINK zielt darauf ab, diese kritische Lücke in der Mensch-Technik-Interaktion zu schließen. So soll im Projekt ein angenehm zu tragendes, intelligentes Armband entwickelt werden, welches über integrierte Sensorik Finger- und Handbewegungen erkennen kann und damit erstmals eine robuste, intuitive und mobile Gestensteuerung realisiert. Hierfür wird auf Seite der Hardware durch innovative Nutzung von Sensorik eine neuartige Bewegungserfassung möglich. In Verbindung mit modernsten Verfahren des maschinellen Lernens und einem nutzerzentrierten Entwicklungsprozess wird diese in ein Gesamtsystem integriert und in begleitenden Benutzerstudien evaluiert.
Die Hände und Finger als primäre Werkzeuge in der physischen Welt sollen für die Interaktion mit digitalen Geräten nutzbar werden. Das Erkennen von Greifgesten ermöglicht es beispielsweise virtuelle Objekte oder Schaltflächen tatsächlich zu „greifen“. So können Fertigkeiten aus der physischen Welt in die digitale Welt übertragen werden. Dies ermöglicht eine intuitive Nutzung von Technologien über alle Altersstufen und auch sprachliche und kulturelle Hintergründe hinweg.