Comme les langues parlées, les langues des signes évoluent de manière organique et n’ont pas toujours la même origine. Cela produit différentes manières de communication et d’annotation. C'est le sujet du doctorat de Manolis Fragkiadakis. thèse.

"Contrairement à ce que beaucoup pensent, il n'existe en réalité pas de langue des signes universelle", explique Fragkiadakis. "La langue des signes peut être encore plus fragmentée que la langue parlée :il peut y avoir plusieurs langues dans le même pays. La fragmentation rend difficile la codification de la langue des signes ou l'écriture académique à son sujet. Nous voulons changer cela."

"Nous avons donc créé un outil de dictionnaires pour les langues des signes", explique Fragkiadakis. "Pour cela, nous utilisons l'apprentissage automatique, une forme d'IA. En analysant la position et les mouvements des articulations des mains qui signent, le système doit identifier quel mot à partir de quelle langue est signé."

Cela s’est avéré loin d’être simple. "Les développements technologiques de ces dernières années ne sont pas encore compatibles avec la langue des signes, donc c'est encore lent", explique Fragkiadakis. "Les grands modèles linguistiques dont nous disposons actuellement ne sont formés que sur une seule langue des signes et, dans la plupart des vidéos utilisées à cet effet, vous voyez le signataire se tenir juste devant la caméra, de sorte que les signes sont facilement visibles.

"Dans mes recherches, nous avons entraîné l'IA à la fois sur plusieurs langues des signes et sur plusieurs locuteurs. Pour cela, la caméra était positionnée entre deux locuteurs, l'IA devait donc être capable d'extraire la même information à partir d'une position différente."

Pour l'instant, cette technique a principalement permis de mieux connaître les différentes langues des signes, mais pour l'avenir, Fragkiadakis prévoit également des applications pratiques au sein de la communauté des langues des signes. "À l'avenir, l'IA pourrait aider à reconnaître à la fois les points communs et les distinctions entre les différentes langues des signes, facilitant ainsi la communication entre les utilisateurs."

En outre, Fragkiadakis estime qu'il est utile que ses recherches aient permis de mieux identifier les différences entre les langues des signes. Par exemple, quel rôle la culture joue-t-elle ? "Je suis grec, donc j'utilise beaucoup d'espace pour signer", explique Fragkiadakis, "cela peut changer le sens de ce que je veux dire. Des gestes plus larges peuvent signaler, par exemple, que quelqu'un "crie", mais ils ne le font pas. ce n'est pas obligatoire."

A terme, ces connaissances devraient améliorer l’accessibilité de la langue des signes. "Nous espérons qu'avec cette recherche, nous serons en mesure de rendre la langue des signes plus accessible à tous, des universitaires aux locuteurs quotidiens. Il y a encore trop peu de connaissances sur les caractéristiques des différentes langues des signes, et nous voulons changer cela."

Fourni par l'Université de Leiden