Studium Generale durch Forschungsergebnisse
Multimodale Mensch-Maschine-Kommunikation: Von Tastatur und Maus zu Sprache und Gestik

06.02.02


Zum Starten hier klicken


Inhaltsverzeichnis

Multimodale Mensch-Maschine-Kommunikation: Von Tastatur und Maus zu Sprache und Gestik

Sprachverarbeitung

Code, Medium und Modalität

Die Leitvorstellung multimodaler Interaktion

Drei Stufen der Sprachverarbeitung

Ergebnis der Spracherkennung: Worthypothesengraph

Disambiguierung: Auflösung mehrdeutiger sprachlicher Äußerungen

Verzögerte Disambiguierung Skopusmehr-deutigkeiten auf der Basis von Unterspezifikation

Mobile Dialogübersetzung für Spontansprache

Mobile Dialogübersetzung über Handy mit dem System VERBMOBIL

Von der Eingabeschallwelle zur Ausgabeschallwelle

Vom Sprachdialog zum Multimodalen Dialog

Deep Map: Multimodaler mobiler Touristenführer für Heidelberg Kooperation u.a.: EML - DFKI - ISL

Deep Map: Multimodaler mobiler Touristenführer für Heidelberg

Symbolische und Subsymbolische Fusion von Eingabemodalitäten

Fokusierende Geste zur Disambiguierung der Spracheingabe (Wahlster 1991)

Die SDDP-Interaktionsmetapher für SmartKom

Kombination von Sprache und Gestik in SmartKom

Multimodale Ein- und Ausgabe in SmartKom

Wechselseitige Disambiguierung durch Multiple Eingabemodalitäten

Disambiguierung durch Selektions-restriktionen und Weltwissen

Fusion und Allokation multipler Modalitäten in SmartKom

Modalitätsspezifische Repräsentations- sprachen als Zwischenstufe zur Medienfusion

Fusion von Sprach- und Mimikerkennung in SmartKom

Videobasierte Mimikerkennung auf der Basis von Eigenfaces

Sprecherunabhängie Emotionserkennung

Multimodale Dialoge mit Navigat ionssystemen für Autofahrer und Fußgänger

Multimodale Dialoge mit Navigationssystemen für Autofahrer und Fußgänger

Multomodale Kommunikation mit Unterhaltungselektronik

Unifikationsbasierte Integration von Sprach- und Gestikeingabe (MVPQ, © Johnston 2000, AT&T)

Unifikationsbasierte Integration von Sprach- und Gestikeingabe (MVPQ, © Johnston 2000, AT&T)

Unifikationsbasierte Integration von Sprach- und Gestikeingabe (MVPQ, © Johnston 2000, AT&T)

Sprachtechnologie im Alltag

Klassische Sprachsteuerung im Auto: Kein spontansprachlicher Dialog - Sprachaktivierungstaste

Sprachtechnologie im Alltag

Sprachtechnologie für die Post-PC Ära Personalisierte Benutzeroberflächen

Offene Forschungsprobleme

Autor:Wolfgang Wahlster

E-Mail: wahlster@dfki.de

Homepage: www.dfki.de/~wahlster

Präsentationsquelle herunterladen