En ce 22 août, image 2018 tirée de la vidéo, Xiangyang Mou, étudiant diplômé de l'Institut polytechnique Rensselaer, pratique le tai-chi avec un avatar dans un studio du campus de l'Institut polytechnique Rensselaer à Troie, N.Y. Le « Projet Mandarin » est une coentreprise de RPI et d'IBM. Les chercheurs du Laboratoire des systèmes cognitifs et immersifs développent une sorte de salle intelligente qui peut comprendre les mots des étudiants, répondre à leurs questions et percevoir leurs gestes. (Photo AP/Michael Hill)
Pour apprendre le chinois dans cette salle, parler à la tête de panda flottant.
L'avatar parlant le mandarin parcourt une scène de restaurant à 360 degrés dans un programme d'instruction basé sur l'intelligence artificielle qui ressemble à un jeu vidéo géant. Les étudiants de l'Institut polytechnique Rensselaer testant la technologie se déplacent à l'intérieur du bâtiment de 12 pieds de haut, projection enveloppante pour commander du tofu virtuel au serveur panda, discutez avec les vendeurs du marché de Pékin et pratiquez le tai-chi en reproduisant les mouvements d'un mentor vigilant.
"Certainement moins d'anxiété que de tout gâcher avec un vrai être humain, " dit Rahul Divekar, un étudiant diplômé en informatique travaillant sur le projet. « Donc, comparé à cette anxiété, c'est beaucoup plus facile."
Le « Mandarin Project » est une joint-venture entre RPI et IBM. Les chercheurs du Laboratoire des systèmes cognitifs et immersifs développent une sorte de salle intelligente qui peut comprendre les mots des étudiants, répondre à leurs questions et percevoir leurs gestes. Les leçons sont présentées sous forme de jeux ou de tâches, comme commander un repas à l'extérieur.
Divekar commande du canard laqué - "Beijng kaoya" - et le panda va chercher le plat virtuel. Divekar dit que la nourriture était bonne - "Cai hen hao chi" - mais il ne peut pas payer la facture. Aucun problème, le panda répond - "ni keyi xi pan zi" - tu peux faire la vaisselle.
En ce 22 août, image 2018 tirée de la vidéo, Rahul Divekar, étudiant diplômé de l'Institut polytechnique Rensselaer, interagit avec un avatar de panda qui aide à enseigner le mandarin aux étudiants de l'Institut polytechnique Rensselaer à Troie, N.Y. Le « Projet Mandarin » est une joint-venture entre RPI et IBM. Les chercheurs du Laboratoire des systèmes cognitifs et immersifs développent une sorte de salle intelligente qui peut comprendre les mots des étudiants, répondre à leurs questions et percevoir leurs gestes. (Photo AP/Michael Hill)
D'autres scènes incluent un marché en plein air et un jardin, chacun une touche high-tech à l'immersion culturelle.
"Notre plan est de terminer plusieurs scènes de la vraie vie en Chine, permettre à l'étudiant de faire un voyage virtuel là-bas, " dit Hui Su, directeur du laboratoire du RPI.
Les tests en salle avec des élèves étudiant le mandarin se poursuivront cette année scolaire car ils travailleront sur des scènes supplémentaires, dont un aéroport. Un cours de six semaines est en préparation pour l'été.
Intelligence artificielle, ou IA, est omniprésent dans tout, des chatbots des centres d'appels aux assistants à domicile. Même certains produits d'enseignement des langues sur le marché intègrent l'IA ou la réalité virtuelle.
Le projet Mandarin se distingue par son échelle et sa sophistication. Les ordinateurs interprètent simultanément la parole et le geste pour maintenir un dialogue. Lorsqu'un élève désigne une image et demande « Qu'est-ce que c'est ? » les ordinateurs peuvent trouver une réponse.
En ce 22 août, image 2018 tirée de la vidéo, étudiants diplômés de l'Institut polytechnique Rensselaer Xiangyang Mou, la gauche, et Rahul Divekar interagissent avec un avatar de panda qui aide à enseigner le mandarin aux étudiants, à l'Institut polytechnique Rensselaer de Troie, N.Y. Le « Projet Mandarin » est une joint-venture entre RPI et IBM. Les chercheurs du Laboratoire des systèmes cognitifs et immersifs développent une sorte de salle intelligente qui peut comprendre les mots des étudiants, répondre à leurs questions et percevoir leurs gestes. (Photo AP/Michael Hill)
Et le retour est immédiat. Lorsque Divekar commande "dou fu" - ou tofu - une voix répond "voici à quel point vous vous en approchez" et l'illustre avec un graphique de son intonation. Une autre voix donne la prononciation précise.
Toujours, les professeurs de langues n'ont pas encore à craindre pour leur travail. Les développeurs du projet Mandarin disent qu'il n'est pas assez sophistiqué pour le moment pour remplacer complètement l'enseignement en classe.
La présidente de RPI, Shirley Ann Jackson, prévoit que le même type de technologie sera appliqué à d'autres espaces, comme les salles de réunion d'entreprise. Lorsque les dirigeants discutent d'une acquisition potentielle, la salle suivra la discussion de groupe et produira des informations pertinentes de manière transparente dans le débat.
"Nous ne sommes pas au bout du fil, " Jackson dit, "mais plus près du début."
© 2018 La Presse Associée. Tous les droits sont réservés.
