PROJEKT
Gebärdensprach-avatar
PARTNER
HERAUSFORDERUNG
Laut WHO gibt es weltweit 1,6 Mrd. hörbeeinträchtige Personen, in Deutschland sind es rund 10 Millionen. Für die meisten von ihnen ist auch die Textsprache wie eine Fremdsprache, da sie die Worte nie hören konnten, daher fällt Ihnen das Lesen weniger leicht. Zudem existieren für viele Worte, insbesondere für Fachbegriffe oder Fremdworte, keine entsprechenden Pendants in der Gebärdenspräche. Von vielen wichtigen Informationen, wie z.B. Durchsagen bei öffentlichen Verkehrsmitteln, Nachrichten oder Website-Inhalten, sind Gehörlose damit oft ausgeschlossen.
Der Gesetzgeber hat nun auf den spezifischen Informationsbedarf von Menschen mit Behinderungen reagiert und verpflichtet in Deutschland ab Juni 2025 auch Wirtschaftsakteure wie Produkthersteller, Händler und Dienstleister zu barrierefreier digitaler Kommunikation (Barrierefreiheitsstärkungsgesetz).
LÖSUNG
Die neu geschaffene Lösung soll für Gehörlose und Unternehmen gleichermaßen eine Unterstützung sein, um Inhalte automatisiert zu generieren und so gleichzeitig die Interaktion und Kommunikation auf digitalen Kanälen zu optimieren.
Einbezogen werden dabei nicht nur die Hände (Gestik), sondern auch das Mundbild (Mimik), da Lippenlesen fester Bestandteil der lebendigen Gebärdensprache ist.
Durch verschiedene Transformer Modelle wird Sprache zunächst in Text, dann in eine computerlesbare Notation (HamNoSys), in eine Pose (Avatargerüst mit Ankerpunkten) und zum Schluss in einen 3D-Videoavatar übersetzt.