Des chercheurs de l'Université de l'État de Washington créent le tout premier « test de QI » pour les systèmes d'intelligence artificielle (IA) qui évaluerait les systèmes sur la façon dont ils apprennent et s'adaptent aux nouvelles, environnements inconnus.

Diane Cook, Professeur Regents et professeur titulaire de la Chaire Huie-Rogers, et Larry Holder, professeur à l'École de génie électrique et informatique, a reçu une subvention d'un peu plus d'un million de dollars de la Defense Advanced Research Projects Agency (DARPA) pour créer un cadre permettant de tester «l'intelligence» des systèmes d'IA.

"Précédemment, la recherche sur la mesure de l'intelligence dans les systèmes d'IA a été principalement théorique, " Dit Holder. "Ils n'ont pas mesuré les performances du monde réel dans le roman, environnements inédits et ne prenaient pas en compte la complexité des tâches."

Holder et Cook concevront un test qui évaluera les systèmes d'IA en fonction de la difficulté des problèmes qu'ils peuvent résoudre. La création de méthodes pour classer les problèmes en fonction de leur difficulté sera l'une des principales parties de la recherche.

"Le score prendra également en compte la précision des systèmes, justesse, le temps pris et la quantité de données dont ils ont besoin pour bien fonctionner, " dit Titulaire.

L'un des principaux défis pour les chercheurs en IA est de créer des machines capables d'apprendre dans un environnement inconnu comme un humain. De nombreuses avancées récentes dans le domaine de l'apprentissage automatique et de l'IA ont été des tâches spécialisées comme la détection de visages et la prédiction des résultats des matchs de baseball.

Créer des machines capables d'apprendre et d'agir intelligemment dans de nouveaux environnements est toujours le Saint Graal de la recherche en IA.

« Nous nous concentrons sur les tests et l'amélioration de systèmes qui peuvent être plus polyvalents, comme un robot assistant qui peut vous aider dans bon nombre de vos tâches quotidiennes, " il a dit.

L'un des comportements que Holder et Cook examineront est de savoir dans quelle mesure les machines qu'ils testent peuvent transférer leur apprentissage d'une tâche et l'appliquer à une nouvelle, tâche invisible.

"Par exemple, vous voudrez peut-être apprendre les dames avant les échecs car vous pouvez facilement transférer vos connaissances de l'une à l'autre, " dit Titulaire.

Un étudiant de premier cycle qui a fait des recherches d'été avec Holder l'a aidé à créer un environnement d'évaluation qui serait utilisé pour tester les systèmes d'IA sur des tâches telles que jouer à des jeux vidéo, résoudre les problèmes de test SAT et résoudre le Rubik's cube.

Cook est également le directeur du Center of Advanced Studies in Adaptive Systems (CASAS) à WSU, qui se concentre sur la création de maisons intelligentes avec des robots assistants qui s'occupent des personnes âgées, entre autres projets. Ces robots peuvent être utilisés pour surveiller la sécurité, santé, mobilité et vie sociale des personnes âgées.

Holder gère actuellement un site Web qui héberge le défi et le classement AIQ. Dans le cadre de la subvention, Holder espère étendre l'interface logicielle accessible au public, qui peut être utilisé par n'importe qui pour tester son système d'IA tout en fournissant plus de données aux chercheurs dans le processus.