L'IA enseigne maintenant la langue des signes américaine: voici comment apprendre

Avez-vous déjà envisagé d'apprendre la langue des signes pour établir un lien avec des membres de votre famille, des amis ou d'autres personnes sourdes dans la communauté ? Si cette idée vous trotte dans la tête, vous pourriez être intéressé par l'essai d'un nouveau site web interactif qui utilise l'IA pour vous enseigner la langue des signes américaine (ASL). Nommé Signs, cette plateforme ne se contente pas de montrer comment signer, mais utilise également la caméra de votre appareil pour vérifier si vous réalisez correctement les formes des mains et des doigts.

Comment fonctionne Signs ?

Si vous êtes novice en ASL, commencez par visiter le site web Signs. Une fois que vous avez passé l'écran d'accueil, sélectionnez l'option "Apprendre l'ASL" pour démarrer le tutoriel. Assurez-vous que votre caméra est allumée et correctement ajustée, et que vous avez assez d'espace pour signer confortablement.

Un avatar 3D engageant vous guidera ensuite à travers votre premier mot : "Bonjour". Avec votre propre image à l'écran, imitez les gestes de l'avatar pour signer le mot. Le tutoriel se poursuit avec d'autres mots et phrases de base comme "Merci" et "Qui".

Après le tutoriel, vous pouvez choisir un niveau de difficulté. Plus le niveau est élevé, plus les signes sont complexes. Les débutants pourraient vouloir commencer au premier niveau, tandis que ceux qui ont déjà quelques connaissances en ASL pourraient passer à un niveau supérieur.

Alors que l'avatar démontre chaque signe, il fournit des instructions calmes et patientes sur la manière de positionner vos mains et vos doigts. Un son de clochette satisfaisant retentit chaque fois que vous reproduisez correctement un signe, et vous gagnez des points pour suivre votre progression.

Vous pouvez progresser jusqu'au niveau quatre, construisant ainsi une base solide en ASL. Vous pourriez trouver bénéfique de répéter les niveaux jusqu'à ce que vous soyez suffisamment confiant pour avancer sans les leçons.

L'histoire derrière Signs

La création de Signs a été un effort collaboratif. NVIDIA, en collaboration avec l'American Society for Deaf Children, a développé une base de données ASL ouverte. Pendant ce temps, Hello Monday/DEPT de New York, le studio créatif à l'origine d'une plateforme similaire appelée Fingerspelling, a construit la plateforme Signs pour utiliser l'IA dans un apprentissage interactif.

Le site web accueille différents types d'utilisateurs. Ceux qui sont impatients d'apprendre l'ASL peuvent se plonger dans la formation interactive. Les signeurs expérimentés peuvent contribuer en envoyant des vidéos pour enrichir la base de données de mots et de signes. Même les débutants peuvent soumettre leurs essais pour enrichir la collection.

Chaque vidéo soumise au site est examinée par des personnes sourdes et des interprètes certifiés pour garantir l'exactitude des mouvements des mains et des doigts. Bien que beaucoup se concentrent uniquement sur les gestes des mains, les expressions faciales et les mouvements de la tête sont cruciaux pour communiquer avec la communauté sourde. Les développeurs explorent des moyens d'inclure le suivi du visage et d'autres technologies de capture de mouvement.

Sur leur page À propos, le site web déclare : "NVIDIA et Hello Monday/DEPT croient que tout le monde a le droit à l'expression. En même temps, NVIDIA et Hello Monday/DEPT reconnaissent que certaines communautés manquent d'un accès équitable aux moyens d'expression. Nous avons créé cette plateforme principalement pour aider à enseigner aux parents entendants qui ne savent peut-être pas signer, à se connecter et communiquer avec des enfants et membres de la famille sourds. Nous voyons cela comme une opportunité d'utiliser l'IA pour le bien, pour enseigner et engager la communauté sourde de manière significative."