Prof. Dr. Gerhard Weber
Institut für Angewandte Informatik, Professur Mensch-Computer-Interaktion

Komplexpraktikum Multimodale Interaktion

Einschreibung

Es ist eine Einschreibung über Jexam erforderlich. Die Einschreibung wird am 24.3.2013 um 9 Uhr freigeschaltet.

Inhalt

Ziel dieses Komplexpraktikum ist es, Kenntnisse über verschiedene Softwarearchitekturen, -paradigmen und -werkzeuge für interaktive Systeme anhand der Entwicklung multimodaler Anwendungen zu vertiefen. Dabei finden unterschiedliche Eingabe- (Sprache, Tastatur, Maus, Gesten) und Ausgabemodalitäten (auditiv, taktil, visuell) Verwendung. Beispielhaft sei die mögliche Realisierung eines multimodalen Mathe Editors nach dem Model View Controller Paradigma genannt, welcher MathML als Beschreibungssprache nutzt.

Weitere Informationen

Aktuelle Informationen und die Einschreibung finden sich unter Moodle. Der Einschreibeschlüssel erhalten Sie beim ersten Treffen.

Komplexpraktikum SS 13

Digitale Bücher sind immer weiter auf dem Vormarsch. Auch blinde Nutzer verwenden digitale Bücher bereits seit vielen Jahren und zwar in Form von Daisy Digital Talking Books. Da sich ePub und Daisy in ihrem neuen Standard weiter annähern, werden barrierefreie Interaktionsmechanismen auf flächigen touch-sensitiven Displays zum Lesen von Büchern immer interessanter. Ziel des Komplexpraktikums ist die Entwicklung der grundlegenden Komponenten eines audiohaptischen Leseprogramms für digitale Bücher.

Mögliche Teilziele:

• Auflösung der SMIL-Verknüpfung von XML Textinhalten und Multimedia-Inhalten
• übertragung von digitalen Buchinhalten in das Offscreen-Model des HyperReader-Frameworks
• Rendering von Multimedia-Inhalten in digitalen Büchern, insbesondere Grafiken (auch SVG)
• Anwendungsautomatisierung (automatisches Laden und Verarbeiten von digitalen Büchercontainern sowie Zusammenführung verschiedener Dateien zu einem Gesamtobjekt)
• Weitere interessante Vorschläge könnt ihr gerne selbst einbringen

Welche Anforderungen solltest du erfüllen?

• grundlegende XML-Kenntnisse
• Basisprogrammierkenntnisse
• Spaß am Basteln, Knobeln und gemeinsamen Arbeiten

Was kannst du aus dem Praktikum mitnehmen?

• Objektorientierte Programmiererfahrungen, z.B. Java oder C#
• erweiterte XML-Kenntnisse (XSLT, SVG, SMIL usw.)
• Umgang mit teuren Prototypen (multitouch-fähiges, taktiles Flächendisplay)
• Zusammenarbeit in einem Softwareprojekt innerhalb eines Teams
• angewandte Einblicke in den Bereich der Mensch-Computer Interaktion
• einen Schein über 4 SWS als Komplexpraktikum

Abgeschlossene Komplexpraktika

Komplexpraktikum WS 11 und SS 12

Im Lauf des Komplexpraktikums Multimodale Interaktion entstand das Scribble-Tool SkApp. Dies ist eine Android-Anwendung für Tablets. Sie wurde basierend auf einem Gestenerkenner entwickelt und implementiert grundlegende Zeichenfunktionen. Der Anwender hat neben der Freihandzeichnung die Möglichkeit vorgegebene Objekte z.B. Vierecke oder Kreise zu laden und neue zu speichern. Weiterhin kann jedem Objekt eine beliebige Geste zugeordnet werden, bei deren Eingabe das Objekt dann gezeichnet wird. Objekte können auf der Zeichenfläche hin und hergeschoben werden, gruppiert werden und noch vieles mehr. Besonderen Spaß macht die Benutzung von Farbe und Strichstärke und es lassen sich leicht tolle Bilderwelten entwickeln.