Project

Door AI-aangedreven toegankelijkheids- en communicatietols voor gebarentaligen in een hirende wereld

Code
bof/baf/4y/2024/01/236
Looptijd
01-01-2024 → 31-12-2025
Financiering
Gewestelijke en gemeenschapsmiddelen: Bijzonder Onderzoeksfonds
Promotor
Onderzoeksdisciplines
  • Natural sciences
    • Machine learning and decision making
    • Natural language processing
    • Artificial intelligence not elsewhere classified
Trefwoorden
Gebarentaal Automatische vertaling gebarentaalonderwijs AI Gegevensverwerking en machine learning
 
Projectomschrijving

Dit onderzoek focust op het mogelijk maken van de ontwikkeling van (AI-gebaseerde) technologie die kan vertalen van en naar (Vlaamse) gebarentaal. Bij dit onderzoek en ontwikkeling zijn de valorisatiedoelen steeds gericht op toepassingen die gedragen en gevraagd worden door de stakeholders (in eerste instantie Vlaamse doven en slechthorenden en hun familie) en op korte tot middellange termijn ook echt technologisch haalbaar zijn.  De focus ligt op het wegnemen van enkele communicatiedrempels  in omstandigheden waar niet direct een tolk aanwezig is. Dit onderzoek gebeurt binnen een nauwe samenwerking met de Vlaamse dovengemeenschap en experten in gebarentaallinguĂŻstiek. Terwijl eerste maatschappelijk bruikbare resultaten gevaloriseerd worden concentreert dit onderzoek zich nu  de volgende valorisatidoelen: toegankelijkheids tools en digitale leermiddelen voor gebarentaalonderwijs.

In tegenstelling tot vertaaltoepassingen voor geschreven en gesproken tekst, is er voor gebarentaal extreem weinig kwalitatieve en accuraat gelabelde brondata aanwezig, wat het gebruik van AI-technieken erg uitdagend maakt.

Belangrijke onderzoeksvragen in dit project zijn dan ook gericht op het overwinnen van deze beperkingen:

  • Data-efficiente technieken om voor gebaarclassificatie en gebarentaalvertaling
  • Maximaal hergebruik van databronnen over gebarentalen heen
  • Identificatie en extractie van een minimale subset aan relevante informatie uit gebarentaalvideo's