GreifbAR

Ziel des Projekts GreifbAR ist es, Mixed-Reality Welten (MR), einschließlich virtueller (VR) und erweiterter Realität („Augmented Reality“ – AR), greifbar und fassbar zu machen, indem die Nutzer mit bloßen Händen mit realen und virtuellen Objekten interagieren können. Die Genauigkeit und Geschicklichkeit der Hand ist für die Ausführung präziser Aufgaben in vielen Bereichen von größter Bedeutung, aber die Erfassung der Hand-Objekt-Interaktion in aktuellen MR-Systemen ist völlig unzureichend. Derzeitige Systeme basieren auf handgehaltenen Controllern oder Erfassungsgeräten, die auf Handgesten ohne Kontakt mit realen Objekten beschränkt sind. GreifbAR löst diese Einschränkung, indem es ein Erfassungssystem einführt, das sowohl die vollständige Handhalterung inklusiv Handoberfläche als auch die Objektpose erkennt, wenn Benutzer mit realen Objekten oder Werkzeugen interagieren. Dieses Erfassungssystem wird in einen Mixed-Reality-Trainingssimulator integriert, der in zwei relevanten Anwendungsfällen demonstriert wird: industrielle Montage und Training chirurgischer Fertigkeiten. Die Nutzbarkeit und Anwendbarkeit sowie der Mehrwert für Trainingssituationen werden gründlich durch Benutzerstudien analysiert.

Verbundkoordinator

Deutsches Forschungszentrum für Künstliche Intelligenz GmbH, Kaiserslautern

Partner

• NMY Mixed-Reality Communication GmbH, Frankfurt am Main
• Charité - Universitätsmedizin Berlin
• Universität Passau

Volumen

1,65 Mio. € (davon 71% Förderanteil durch BMBF)

Forschungsthemen

• Autonome Systeme 
• Image Recognition & Understanding 
• Lernende Systeme 
• Mensch Maschine Interaktion 
• Virtual & Augmented Reality

Anwendungsfelder 

• Gesundheit & Medizin 
• Industrie 4.0

Laufzeit

10/2021 - 09/2024