| News |
|---|
| Beginn des Blocks (Mi-Fr): 02.April, 14:00, F-432 |
|
18.332 Projekt Multimodale Interaktion (Teil 2)
| Veranstalter |
|---|
| | Frank Schilder
Hedda Schmidtke
|
| Zeit/Ort |
|---|
| | Di 12-15 F-535 |
| Inhalt |
|---|
| |
Im Projekt sollen verschiedene aktuelle Ansätze zur multimodalen Interaktion diskutiert
und auf ihre Einsetzbarkeit in verschiedenen Bereichen der
Mensch-Maschine-Interaktion (z.B. Auskunftssysteme, animierte Tutorien) überprüft
werden. Im Fokus steht dabei das Verhältnis zwischen Wahrnehmung und Modalität: Wie
lassen sich Arten von Wahrnehmung (z.B. Sehen, Hören) so modellieren, dass sie
geeignet sind, Modalitäten der menschlichen Kommunikation kognitiv adäquat zu
unterstützen. In einer Diskussion mit mehreren Teilnehmern z.B. ist Blickkontakt
(Wahrnehmung) eine Möglichkeit, die Bedeutung des Wortes Du innerhalb eines Satzes
zu erfassen. Aber wie lässt sich dies mit konventionellen Eingabemedien wie Maus und
Tastatur realisieren? Und wie könnte ein Programm Blickkontakt herstellen?
Ziel des Projektes ist die Erstellung eines Prototypen, der verschiedenste Aspekte
multimodaler Interaktion integriert. Der Prototyp soll ein charakterbasiertes
Virtual-Storytelling-System sein, d.h. ein Programm, in dem aufbauend auf Plänen und
Gewohnheiten von Charakteren (Agenten) Geschichten in einer virtuellen 3D-Welt
erzählt werden können. Im Prototyp sollen diese intelligenten Agenten miteinander und mit
dem Nutzer in einer natürlichen Art und Weise unter Ausnutzung möglichst vieler
Modalitäten (z.B. Sprache kombiniert mit Gestik) interagieren.
In der ersten Hälfte des Projektes im WiSe 2002/03 wurde die Einarbeitung in die
theoretischen Grundlagen multimodaler Interaktion (z.B. Dialog-, Mimik- und
Gestenverarbeitung) sowie des Virtual-Storytelling geleistet.
In der zweiten Hälfte des Projektes in diesem Semester sollen nun nach einer
Planungsphase die jeweiligen Module des Gesamtsystems zum Virtual-Storytelling
erstellt und ausgetestet werden.
Weitere Informationen unter www.informatik.uni-hamburg.de/WSV/MultiModInt/
|
| Literatur |
|---|
| |
|
| Links |
|---|
| |
|
|
