FB Intelligente Benutzerschnittstellen
In Touch mit dem Förderprogramm THESEUS: CoMET - Collaborative Media Exchange Terminal
CoMET – ein Ergebnis des BMWi-Förderprogramms THESEUS - zeigt, wie mehrere Nutzer über gesprochene Sprache und Gestik gemeinsam und intuitiv an einem Multitouch-Terminal Informationen und Medien austauschen: Bild-, Video- und Musikdateien können gruppiert, annotiert, gemeinsam betrachtet oder einfach nur abgespielt werden.
Das am DFKI Saarbrücken entwickelte CoMET-System (Collaborative Media Exchange Terminal) macht die Faszination des Social Semantic Web oder Web 3.0 erfahrbar. CoMET und seine verschiedenen Modalitäten vermitteln einen Eindruck, wie zukünftige Interaktionen mit dem semantischen Internet aussehen könnten.
Als Eingabemenge für das CoMET-System werden auf einem mobilen Endgerät gespeicherte Medien genutzt. Mit dieser für gewöhnlich heterogenen Datenmenge kann per Geste oder Sprache interagiert werden. Zur weiteren Verarbeitung eines oder mehrerer Medienobjekte dienen intelligente Agenten (Spotlets), die diverse Interaktionsmöglichkeiten bieten, zum Beispiel die Aktivierung semantischer Operationen oder die Abfrage von externen Webservices.
Der Umgang mit den Ansätzen und neuartigen Technologien des Semantic Web ist für Nicht-Spezialisten oftmals sehr komplex. Mittels des einfachen und intuitiven Interaktionskonzepts von CoMET soll der Benutzer in die Lage versetzt werden, mit diesen Technologien umzugehen, ohne dass die Darstellung der Details verwendeter semantischer Technologien dies unnötig verkompliziert. Dazu bietet das Framework Schnittstellen zur multimodalen Interaktion, wie zum Beispiel eine Kombination aus Sprache und Gestik.
Ziel des CoMET-Projekts ist die Entwicklung eines Frameworks, das auf der Grundlage von Technologien des semantischen Internet, Medieninhalte unterschiedlichster Art verarbeiten und austauschen kann. Dieser Ansatz ermöglicht eine flexible Integration des Systems in zahlreiche Kontexte und Anwendungen. Das Framework unterstützt den Benutzer durch einen intuitiven, GUI-basierten Zugang mit gängigen Social Software-Funktionalitäten und intelligenten Tag Recommendation-Verfahren.
Das multimodale Dialogsystem basiert auf ODP-Technologie (Ontology-based Dialogue Platform). Es interpretiert die Eingabemodalitäten Sprache und Gestik, und ermöglicht zudem einen schnellen Zugriff auf die ontologische Repräsentation von extrahierten Mediendaten wie MP3 und Video.
Zur Veranschaulichung und Demonstration der Technologie haben wir in Eigeninitiative ein Video erstellt. Dieses wurde im DFKI Videochannel auf YouTube veröffentlicht und ist unter diesem Link einzusehen.
Referenzen
o CNN
Weitere Informationen und Video
www.dfki.de/iui/advanti/lab
http://tr.im/cometvideo
Kontakt
Simon Bergweiler und Mathieu Deru
E-Mail: advantilab@dfki.de
Tel. +49 (0)681-302 5266