Multimodal Interfaces

Les interfaces multimodales (MMI) coordonnent des modes d'entrée naturels (tel que la voix, le geste, les expressions faciales, etc.) avec des modes de sortie multimédias tel que la vidéo, le son, des visualisations de l'information, des graphiques 3D etc. Ce cours d’approfondissement s’adresse à des étudiants de master et donnera les techniques de base pour concevoir, implémenter et évaluer des interfaces multimodales, ainsi que des connaissances théoriques sur la multimodalité, la représentation et la visualisation de l’information et sur l’ergonomie cognitive. Durant les exercices pratiques, les étudiants auront l'opportunité de construire leurs propres interfaces multimodales.

Learning Outcomes: 

A la fin du cours, un étudiant devra :

  • Être capable de concevoir, programmer et évaluer une interface multimodale grâce à l'expérimentation dans le cadre du cours;
  • Connaître les propriétés des interfaces multimodales;
  • Maîtriser les différents niveaux de fusion multimodale;
  • Connaître les architectures logicielles adaptées aux MMI et être capable d'appréhender les problèmes de synchronicité;
  • Avoir des connaissances théoriques et pratiques sur:
    • la reconnaissance de gestes;   
    • la reconnaissance de la parole;   
    • la visualisation de l'information;   
    • les interfaces tangibles.
  • Connaître et savoir utiliser les méthodes d'évaluation d'interfaces multimodales;
Type: 
Course
Semester: 
S2011
ECTS: 
5
Lecturer: 
Elena Mugellini
Site: 
F
Code: 
03035
33035
Language: 
english
french
Period: 
weekly
Schedule: 
Friday: 13:15 - 16:00
Location: 
UniFr, PER21
Room: 
G230
Evaluation type: 
oral exam
Comment: 

The first lecture will take place on Friday, 25.02.2011 at 13:15 in UniFr, PER21, room G230.

 

Link to the course page in ILIAS: https://ilias.unibe.ch/goto_ilias3_unibe_crs_199066.html