SFB EASE - H3

SFB 1320: Everyday Activity Science and Engineering (EASE)

Menschen bewältigen alltägliche Aufgaben mit Leichtigkeit. Sie manipulieren Objekte in ihrer Umwelt und können mit unvollständigen Informationen (z.B. Instruktionen) umgehen. Der Sonderforschungsbereich EASE untersucht, wie Roboter befähigt werden können, alltägliche Aufgaben im Haushalt mit ähnlicher Leichtigkeit zu meistern. Das Unterprojekt H3 untersucht, wie Menschen Aktivitäten durchführen. Basierend auf aufgezeichneten Daten von Menschen bei alltäglichen Tätigkeiten wie z.B. Tisch decken, werden Modelle entwickelt, welche das inherente Wissen über die Durchführung solcher Aktivitäten repräsentieren, um dieses Wissen für den Roboter verfügbar zu machen.

H3: Discriminative and Generative Human Activity Models for Cognitive Architectures

Das Unterprojekt H3 wird in Kooperation mit dem Cognitive System Lab durchgeführt. H3 baut auf den Ergebnissen der ersten Phase auf, insbesondere auf der H-Pipeline, welche ein einheitliches gemeinsames Framework darstellt, um Informationen über menschliche Aktivitäten zu speichern und diese mit Robotern austauschen zu können. Der Fokus in der zweiten Phase liegt auf der Entwicklung von diskriminativen und generativen Modellen von menschlichen Aktivitäten. Hierzu werden kontext-freie Grammatiken mit probabilistischen Action Units und Deep Learning basierte multimodale Neuronale Netze miteinander verbunden, um die Stärken der jeweiligen Ansätze zu kombinieren ohne deren Schwächen ausgesetzt zu sein.

H-Pipeline (Bild: M.Meier)

Publikationen: