SignON ist ein dreijähriges Projekt unter der Leitung von ADAPT an der Dublin City University (DCU), deren Aufgabe es ist, die Kommunikationslücke zwischen Nutzern gesprochener Sprachen und gehörlosen Gebärdensprachnutzern zu schließen. In einer aktuellen Entwicklung hat das von der Tilburg School of Humanities and Digital Sciences gemeinsam koordinierte SignON-Projekt von der Europäischen Union (EU) eine Horizont-2020-Förderung in Höhe von 5.6 Millionen Euro erhalten.
Verwendung der Mittel
Mit den Mitteln haben Prof. Andy Way (Professor für Informatik an der Dublin City University), Irland (Koordinator), und Dr. Dimitar Shterionov, Assistenzprofessor für Kognitionswissenschaft und Artificial Intelligence an der Universität Tilburg, Niederlande (wissenschaftliche Leitung), wird Forschung betreiben und eine mobile Lösung für die automatische Übersetzung zwischen Gebärden- und mündlichen (geschriebenen und gesprochenen) Sprachen entwickeln.
ADAPT ist ein führendes SFI-Forschungszentrum für digitale Medientechnologie, das sich auf die Entwicklung digitaler Technologien der nächsten Generation rund um die Art und Weise konzentriert, wie Menschen kommunizieren, indem es dabei hilft, digitale Daten effektiver für Unternehmen und Einzelpersonen zu analysieren, zu personalisieren und bereitzustellen.
ADAPT-Forscher sind an sieben führenden irischen Hochschuleinrichtungen tätig: Trinity College Dublin, Dublin City University, University College Dublin, Technological University Dublin, Maynooth University, Cork Institute of Technology und Athlone Institute of Technology.
Über das SignON-Projekt
SignON ist ein benutzerorientiertes und gemeinschaftsorientiertes Projekt mit dem Ziel, den Informationsaustausch zwischen gehörlosen und schwerhörigen sowie hörenden Menschen in ganz Europa zu erleichtern. Das Projekt konzentriert sich hauptsächlich auf die irischen, britischen, niederländischen, flämischen und spanischen Gebärdensprachen sowie die mündlichen Sprachen Englisch, Irisch, Niederländisch und Spanisch.
Dem Projekt zufolge gibt es 5,000 gehörlose ISL-Unterzeichner (Irische Gebärdensprache); im Vereinigten Königreich verwenden etwa 87,000 gehörlose Gebärdensprachen die britische Gebärdensprache (BSL); In Flandern, Belgien, verwenden etwa 5,000 gehörlose Menschen die flämische Gebärdensprache (VGT); Es gibt ungefähr 13,000 Gebärden, die die niederländische Gebärdensprache (NGT) verwenden, und es wird geschätzt, dass es über 100,000 Gebärden der spanischen Gebärdensprache (LSE) gibt.
Wie wird die Zusammenarbeit mit europäischen Gehörlosen- und Hörgeschädigtengemeinschaften helfen?
Durch die Zusammenarbeit mit diesen europäischen Gehörlosen- und Hörgeschädigtengemeinschaften werden Forscher Anwendungsfälle definieren, den SignON-Dienst und die SignON-Anwendung mitgestalten und mitentwickeln. Ziel des Forschungsprojekts ist die faire, unvoreingenommene und inklusive Verbreitung von Informationen und digitalen Inhalten in der europäischen Gesellschaft.
Darüber hinaus wird SignON Funktionen für maschinelles Lernen integrieren, die Folgendes ermöglichen: Erlernen neuer Gebärden- und mündlicher Sprachen; Stil-, Domain- und Benutzeranpassung; und automatische Fehlerkorrektur, basierend auf Benutzerfeedback.
SignON übermittelt dem Benutzer signierte Gespräche über einen lebensechten Avatar, der mit den neuesten Grafiktechnologien erstellt wurde.
„Um eine breite Akzeptanz, eine verbesserte Erkennung und Synthese von Gebärdensprache sowie mehrsprachige Sprachverarbeitung für alle sicherzustellen, wird das Projekt den SignON-Dienst als Smartphone-Anwendung bereitstellen, die auf modernen Standardgeräten läuft. Während die Anwendung als schlanke Schnittstelle konzipiert ist, wird das SignON-Framework in der Cloud verteilt, wo die rechenintensiven Aufgaben ausgeführt werden“, heißt es in einer vom Projekt veröffentlichten Erklärung.
Wann wird es veröffentlicht?
Das SignON-Projekt startet am 1. Januar 2021, da das Konsortium derzeit eine breite Palette von Experten in den Bereichen Natural Language Processing (NLP) rekrutiert. Maschinelles lernen (ML), Deep Learning (DL), maschinelle Übersetzung (MT), Linguistik, Gehörlosenstudien, Bildung, 3D-Grafik und andere, um dem SignON beizutreten team.
Über das Projekt sagt Prof. Andy Way: „Als ich vor fünfzehn Jahren zum ersten Mal an Gebärdensprache-MT arbeitete, war das Feld noch sehr klein. Im Jahr 2022 erscheint eine Sonderausgabe der Zeitschrift Machine Translation, die diesem Thema gewidmet ist. Da ISL nun eine vollwertige Amtssprache in Irland ist, ist es großartig zu sehen, dass diese Arbeit weiterhin floriert.“
Er fügt hinzu: „Ich freue mich, das SignON-Projekt zu koordinieren, das eine kostenlose, offene Anwendung und ein Framework für die Konvertierung zwischen Video (Erfassen und Verstehen von Gebärdensprache), Audio und Text sowie Übersetzung zwischen Gebärden- und gesprochenen Sprachen entwickeln wird.“