Gestenparadigmen für intelligente Umgebungen (GrIPSs)

• Antragstellerin: Professorin Dr. Susanne Boll
• Fachliche Zuordnung: Bild- und Sprachverarbeitung, Computergraphik und Visualisierung, Human Computer Interaction, Ubiquitous und Wearable Computing
• Förderung: Förderung seit 2024
• Projektkennung: Deutsche Forschungsgemeinschaft (DFG) - Projektnummer 548194231

Freihandgesten bieten eine leistungsstarke und natürliche Möglichkeit zur Interaktion mit Computern durch Hand- und Körperbewegungen in einer Vielzahl von Anwendungsbereichen wie Spielen, Bildung,intelligenten Räumen und medizinischen Anwendungen. Trotz umfangreicher Forschungsarbeiten zur 3D-Gesteninteraktion in den letzten Jahren konzentrierte sich ein Großteil davon auf bestimmte Geräte in bestimmten Bereichen. Das Fehlen eines standardisierten Gestenvokabulars, das auf verschiedene Geräte und Bereiche angewendet werden kann, macht es für Interaktionsdesigner schwierig zu entscheiden, welche Gesten für eine bestimmte Anwendung verwendet werden sollen. Das GrIPSs-Projekt konzentriert sich auf die Interaktion mit Gesten in der Luft in intelligenten Umgebungen, untersucht ein potenzielles universelles Gestenvokabular und befasst sich mit den Herausforderungen, die mit der Übertragbarkeit von Gesten über verschiedene Domänen und Geräte hinweg verbunden sind. In der Anfangsphase des Projekts haben wir einen Konsensgestensatz erstellt, der in einer Vielzahl von Domänen angewendet werden kann, Gesten entlang der Dimensionen einer Taxonomie klassifiziert, Benutzerpräferenzen in intelligenten Häusern evaluiert, Werkzeuge für die Erfassung von 3D-Gesten entwickelt und einen großen Datensatz von Gesten aus der Luft gesammelt, der die häufigsten Gesten in der Literatur repräsentiert. In dem Erweiterungsvorschlag werden wir verschiedene Aspekte der gestischen Interaktion behandeln. Zunächst werden wir ein standardisiertes Notationssystem einführen, das Labanotation und GestureML verwendet, und eine einfache Grammatik für Gestensequenzen erstellen. Dies zielt darauf ab, die Reproduzierbarkeit und Zugänglichkeit von Gesten zu verbessern. Darüber hinaus werden wir Tools entwickeln und einsetzen und diese für unser annotiertes Gestenkorpus zugänglich machen. Dazu gehören die Entwicklung eines Gesten-Notationseditors zur Bearbeitung des Datenkorpus, eines Grammatik-Editors, der die Semantik von Gestensequenzen bereitstellt, und eines Annotations-Editors, der die Annotation von Gesten entlang verschiedener Dimensionen ermöglicht. Die Werkzeuge werden zusammen mit dem Gestenkorpus der Öffentlichkeit zur Verfügung gestellt, um anderen Forschern die Möglichkeit zu geben, unsere Studien durchzuführen und zu reproduzieren.

• DFG-Verfahren: Sachbeihilfen