Traducteur tactile de gants de la langue des signes à la langue ordinaire (2 photos + vidéo)

L'utilisation de l'apprentissage automatique et artificiell'intelligence aidera dans un proche avenir à intégrer les personnes souffrant de divers handicaps physiques dans la société. Les développeurs de l'Université de Californie à Los Angeles (UCLA) ont créé un système qui vous permet de supprimer la barrière de communication entre les personnes qui sont obligées d'utiliser la langue des signes et d'autres personnes. L'appareil sous la forme d'un gant électronique sans contact est capable de traduire la traduction de la langue des signes américaine en anglais, presque en temps réel.

Le système consiste en une paire de gants avec descapteurs flexibles qui peuvent contrôler le travail sur toute la longueur de chacun des cinq doigts. Ces capteurs, faits de filaments électriquement conducteurs, enregistrent les mouvements des mains et la position des doigts, qui indiquent des lettres, des chiffres, des mots et des phrases individuels.

L'appareil convertit les mouvements des doigts endes signaux électriques qui sont envoyés au tableau de commande de la taille d'une pièce d'un dollar portée au poignet. De plus, ces signaux sont transmis sans fil à un smartphone, qui les traduit en mots à une vitesse d'environ un mot par seconde. Ensuite, l'application prononce la phrase traduite par le haut-parleur.

Des capteurs aériens sont ajoutés au système, montés sur le visage de l'utilisateur des deux côtés de la bouche et entre les sourcils. Cela est nécessaire pour capturer les expressions faciales, qui font partie du système américain de langue des signes.

Le travail autonome d'un gant est fournila batterie. En cours de préparation, après avoir utilisé l'apprentissage automatique et l'expérience de quatre Américains sourds, l'algorithme a commencé à reconnaître en toute confiance 660 caractères, y compris des lettres et des chiffres. À l'avenir, selon les ingénieurs, l'algorithme reconstituera activement son vocabulaire et augmentera la vitesse de traduction. Actuellement, l'invention est au stade de l'enregistrement du brevet.

Source: ucla