Un logiciel a passé l'examen d'entrée d’une université

Dans l'examen japonais pour être admis aux études universitaires, le score moyen parmi les candidats est 416 de 950 points possibles. Un ordinateur programmé pour l'intelligence artificielle, IA, a maintenant réussi avec 511 points.

Les tentations antérieures n’ont pas réussi d’atteindre la moyenne. Mais, dans un projet appelé « Todai Robot Project » les chercheurs de l'Institut national d'informatique développent constamment leur logiciel. L'objectif d'ici à 2021 est de passer le test d'entrer dans l'Université de Tokyo, un des plus prestigieuse écoles supérieures du pays.

Le logiciel passait les sections de mathématiques et historie assez bien mais ne pas la physique. Cette faiblisse est principalement dû à une mauvaise compréhension de la langue.

Pourtant, il ne faut pas exagérer l’aptitude de l’IA à son stade de développement actuelle. Dans un autre test des chercheurs américains ont conclus que le QI de leur logiciel, le ConceptNet 4, est l’équivalant d’un enfant de 4 ans. 

L’équipe utilisait un test appelé WPPSI-III, qui est conçu pour enfants âgés de 2 ans et 6 mois jusqu’à 7 ans et 3 mois et comprend 14 sections.

Le problème avec le IA était aussi dans ce cas la langue. Leur logiciel ne comprenait pas que la signification d’un mot parfois dépend du contexte. Le mot anglais « saw » peut par exemple parfois signifie un outil, (scie), et parfois un verbe (imparfaits de voir).

Reste à savoir quand le logicielles comprendront des métaphores, « donne-moi ta mains » par exemple. Ou, une expression telle que « il ne fallait pas le faire » pour dire merci, que mon cerveau, bien plus âgé que 4 ans, a eu une difficulté à comprendre.