Gebärdensprachen sind eigenständige Sprachen, die Lautsprachen in Komplexität und Ausdrucksfähigkeit in nichts nachstehen. Die Deutsche Gebärdensprache (DGS) ist damit kein gebärdetes Deutsch. Sie hat ein eigenes Vokabular und eine eigene Grammatik. Für viele DGS-Nutzerist Deutsch deshalb eine Fremdsprache.

Für das Projekt ‘Giga Gebärdensprache’ bedeutet das, dass die Antworten der sprechenden Gesprächsteilnehmer möglichst auch zusätzlich mittels 3D Avatar dargestellt werden können. Wichtige Anforderung: um eine möglichst flüssige Kommunikation zu ermöglichen, muss der Avatar im Gegensatz zu nahezu allen bestehenden Lösungen live gerendert werden.

Das sind unsereArbeitspakete beim 3D Avatar:

·       Definition des Look & Feels des 3D Avatars entsprechend der ermittelten Anforderungen der Zielgruppe

·       Abstimmung mit den Linguisten der UniKöln für die möglichst natürliche und gut verständliche Umsetzung von Mimik, Handgebärden und Körperhaltung des 3D Avatars beim Gebärden der Texte

·       Schnittstellen zur AI für die Anforderungen und Übergabeformat der Texte mit Informationen zu Mimik, Handgebärden und Körperhaltung

·       Definition, Einlesen und Optimierender Mimik, des Gebärdenvokabulars und der Körperhaltungen

·       Technische Umsetzung des Live-Renderns

Der 3D Avatar hat sich im Laufe des Projekts als spannendes und ambitioniertes Arbeitspaket für Cynapsis innerhalb des Gebärdensprachenprojekts herausgestellt. Vor allem die Parallelität der Ebenen Mimik, Handgebärden und Körperhaltung stellt in Kombination mit dem Live-Rendering eine hohe konzeptionelle und technische Herausforderung dar – wir arbeiten mit Hochdruck daran – parallel zum Machine Learning Team der Uni Münster, das die Übersetzung der Audio antworten in Text und DGS erarbeitet.

Mehr Infos zumProjekt ‘Giga Gebärdensprache’: https://giga-gebaerdensprache.cynapsis.io/

‍