Digitale Teilhabe für gehörlose Menschen.
Weltweit leben etwa 70 Millionen gehörlose Menschen. Da Textsprache für sie oft eine Fremdsprache ist, ermöglicht erst die dynamische Darstellung von Inhalten in Gebärdensprache eine echte digitale Teilhabe. Digitale Barrierefreiheit gewinnt damit zunehmend an Bedeutung.
Mithilfe von Künstlicher Intelligenz und digitalen Avataren unterstützen automatisierte Instrumente die Realisierung einer barrierefreien Kommunikation.
Maschinelles Lernen trifft regelbasierte Synthese.
AVASAG entwickelt eine neuartige Gebärdenanimations-Methode für 3D-Avatare. Durch die Kombination von Methoden des maschinellen Lernens mit regelbasierten Synthesemethoden werden Texte in Gebärden abgebildet — unter präziser Auflösung der zeitlichen und räumlichen Abhängigkeiten der Gebärdenelemente.
Als Demonstrator entsteht — unter Einbezug der Gebärdensprach-Community — ein Avatar zur automatisierten Übersetzung im Bereich Reiseinformation mit Fokus auf Verkehr und Tourismus.
Projektleitung und Avatar-Kernkompetenz.
Charamel leitete das Verbundprojekt als Spezialist für interaktive Avatar-basierte Assistenzsysteme — gemeinsam mit yomma, Ergosign, dem DFKI, der TH Köln und der Universität Augsburg. Rund 74 % des Projektvolumens wurden durch das BMBF gefördert.