Nvidia, en collaboration avec la Société américaine pour les enfants sourds (American Society for Deaf Children) et l’agence créative Hello Monday, a présenté Signs, une plateforme d’IA innovante pour l’apprentissage de la langue des signes américaine (ASL). Le projet vise à combler le fossé existant dans les solutions technologiques pour la troisième langue la plus utilisée aux États-Unis.
La plateforme Signs est un service web interactif qui combine une bibliothèque validée de gestes ASL avec des technologies d’intelligence artificielle avancées. Une caractéristique unique du système est un avatar 3D démontrant l’exécution correcte des gestes, ainsi qu’une fonction d’analyse des mouvements de l’utilisateur via une webcam pour fournir un retour en temps réel.
« La plupart des enfants sourds naissent de parents entendants. Fournir aux familles des outils accessibles comme Signs pour l’apprentissage précoce de l’ASL leur permet d’établir une communication efficace avec les enfants dès l’âge de six à huit mois », a noté Cheri Dowling, directrice exécutive de la Société américaine pour les enfants sourds.
Nvidia prévoit de créer une vaste base de données de 400 000 vidéos couvrant 1 000 mots en langue des signes. Une caractéristique clé du projet est la validation minutieuse de chaque geste par des interprètes ASL professionnels et des locuteurs natifs, garantissant des matériels de formation de haute qualité.
La plateforme offre également la possibilité aux utilisateurs de tout niveau de contribuer au développement du projet en enregistrant des vidéos exécutant des gestes spécifiques. Les données collectées seront utilisées pour créer un ensemble de données ouvert qui aidera au développement de nouvelles applications d’IA pour surmonter les barrières de communication entre les personnes sourdes et entendantes.
À l’avenir, l’entreprise prévoit de rendre l’ensemble de données accessible au public, permettant aux développeurs de créer diverses solutions technologiques, notamment des agents d’IA, des applications d’assistants numériques et des outils de visioconférence avec support de la langue des signes.
Le lancement de Signs marque une étape importante dans le développement de technologies accessibles pour l’apprentissage de l’ASL, combinant les développements de pointe en intelligence artificielle avec les besoins de la communauté sourde et malentendante.
