Skip to content
Licensed Unlicensed Requires Authentication Published by De Gruyter Oldenbourg September 25, 2009

Excellence Cluster “Multimodal Computing and Interaction” – Robust, Efficient and Intelligent Processing of Text, Speech, Visual Data, and High Dimensional Representations (Exzellenzcluster “Multimodal Computing and Interaction” – Robuste, effiziente und intelligente Verarbeitung von Text, Audio, Video und Grafik)

  • Hans-Peter Seidel

Summary

The past three decades have brought dramatic changes in the way we live and work. This phenomenon is widely characterized as the advent of the Information Society. Ten years ago, most digital content was textual. Today, it has expanded to include audio, video, and graphical data. The challenge is now to organize, understand, and search this multimodal information in a robust, efficient and intelligent way, and to create dependable systems that allow natural and intuitive multimodal interaction.

The Excellence Cluster on “Multimodal Computing and Interaction”, established by the German Research Foundation (DFG) within the framework of the German Excellence Initiative, addresses this challenge. The term multimodal describes the different kinds of information such as text, speech, images, video, graphics, and high-dimensional data, and the way it is perceived and communicated, particularly through vision, hearing, and human expression.

The cluster comprises the Computer Science and Computational Linguistics and Phonetics departments of Saarland University, the Max Planck Institute for Informatics, the German Research Center for Artificial Intelligence, and the newly established Max Planck Institute for Software Systems.

Zusammenfassung

Unsere Lebens- und Arbeitsumstände haben sich in den letzten drei Jahrzehnten dramatisch verändert. Diese Veränderung wird gemeinhin als Aufbruch in die Informationsgesellschaft beschrieben. Vor zehn Jahren bestanden digitale Inhalte überwiegend aus Text, heute sind diese Inhalte erweitert um Audio, Video und Grafik. Als Herausforderung ergibt sich, diese multimodale Information auf robuste, effiziente und intelligente Weise zu organisieren, zu verstehen und zu durchsuchen, sowie zuverlässige Systeme mit intuitiven multimodalen Interaktionsmöglichkeiten zu schaffen.

Das von der Deutschen Forschungsgemeinschaft (DFG) im Rahmen der Exzellenzinitiative eingerichtete Exzellenzcluster “Multimodal Computing and Interaction” stellt sich dieser Herausforderung. Hierbei bezeichnet der Begriff multimodal sowohl die unterschiedlichen Arten von Information wie Text, Sprache, Bilder, Video, Grafik und hochdimensionale Daten wie auch die Art der Wahrnehmung und Kommunikation, insbesondere durch Sehen, Hören und menschlichen Ausdruck.

Das Cluster umfasst die Fachbereiche für Informatik bzw. Computerlinguistik und Phonetik der Universität des Saarlandes, das Max-Planck-Institut für Informatik, das Deutsche Forschungszentrum für Künstliche Intelligenz sowie das neu gegründete Max-Planck-Institut für Softwaresysteme.

Published Online: 2009-9-25
Published in Print: 2008-7-1

© Oldenbourg Wissenschaftsverlag

Downloaded on 25.4.2024 from https://www.degruyter.com/document/doi/10.1524/itit.2008.0492/html
Scroll to top button