Des gestes qui deviennent des mots, des chiffres, des phrases, grâce à des gants high-tech qui lisent les mouvements de la main et les traduisent dans la langue parlée, à l’aide d’un algorithme et d’un smartphone. Ils proviennent des laboratoires d’électronique et de bio-ingénierie dispersés entre la Chine et la Californie, et sont les gants conçus pour faciliter la compréhension de la langue des signes, même sans avoir besoin d’un traducteur pour ceux qui ne la connaissent pas.
Une seconde peau avec des capteurs
L’idée de dispositifs capables de traduire les gestes en mots n’est pas nouvelle, expliquent les chercheurs eux-mêmes sur les pages de Nature Electronics. Dans le passé, il y a eu plusieurs tentatives dans ce sens, en utilisant différentes techniques, de l’électromyographie à la photographie. Pourtant, écrivent-ils, la plupart d’entre eux étaient peu pratiques, encombrants, non adaptés à une utilisation à long terme. La proposition de la Jun Chen de l’Université de Californie à Los Angeles et de ses collègues devait commencer par des gants, une seconde peau de la main. S’ils sont correctement équipés – grâce à l’utilisation de capteurs et d’un système de collecte et d’envoi d’informations vers l’extérieur – ils peuvent devenir une sorte de petits traducteurs. Économiques, flexibles et durables, ils sont prometteurs. Peut-être même avec l’ajout de capteurs positionnés sur le visage, pour capturer également les expressions faciales.
Traduction avec une précision allant jusqu’à 98%.
Dans le détail, les capteurs utilisés par les chercheurs sont des fils qui courent le long des doigts, capables de percevoir leurs mouvements et de les transmettre – sous forme de signaux électriques – à une petite unité de contrôle située à la base du gant. Ici, les signaux électriques sont à leur tour conditionnés pour être envoyés sans fil à un smartphone. Grâce à l’utilisation de l’apprentissage machineEn fait, les chercheurs ont montré qu’il est possible de former un algorithme pour interpréter ces signaux et les associer à des lettres et des chiffres afin de fournir une trace qui peut ensuite être convertie en mots et en phrases. Et il en fut ainsi : le système correctement formé, grâce aux gestes répétés de quatre participants sourds qui ont participé à l’étude, fonctionne. Les gants de haute technologie, et le système de traduction associé, ont permis de reconnaître 660 signes de la langue des signes américaine, y compris des chiffres et des lettres, chacun en moins d’une seconde, avec une précision allant jusqu’à 98 %.
“Nous espérons que ce système ouvrira la porte à un moyen facile pour les gens d’utiliser la langue des signes pour communiquer directement avec les personnes qui ne l’utilisent pas sans avoir à les traduire”, a déclaré M. Chen, “Nous espérons également que ce système aidera davantage de personnes à apprendre la langue des signes par elles-mêmes.
