Videobasierte Eingabekomponente eines Sehreibsystems für Gebärdensprache

Zusammenfassung

In dieser Arbeit wird ein System zur videobasierten Erkennung von Gebärden präsentiert. Das Erkennungssystem stellt die natürlichste und intuitivste Eingabemodalität für ein Schreibsystem für Gebärdensprache dar, welches im Rahmen des europäischen Projekts SignPS entwickelt wurde. Das Ziel des Projekts ist es, Gehörlosen den Zugang zu geschriebenen Informationen durch die schriftliche Darstellung von Gebärden zu ermöglichen. Das videobasierte Erkennungssystem erlaubt die automatische Erkennung der manuellen Parameter der Gebärdensprache. Diese lassen sich durch vier Chereme beschreiben: die Handform, die Handorientierung, die Handbewegung und die Ausführungsstelle im Gebärdenraum. Das System benötigt lediglich eine einzelne Farbvideokamera für die Bilddatenerfassung. Die explizite Bestimmung der manuellen Ausdrucksmittel erfolgt durch verschiedene Module, in denen unterschiedliche Erkennungsverfahren eingesetzt werden. Das videobasierte Erkennungssystem wurde mit 19 Probanden validiert, um die Gebrauchstauglichkeit und die Erkennungsleistung zu bestimmen. Das System erreicht Erkennungsraten von über 80% bei einer Vokabulargröße von 300 Gebärden.