Il y a maintenant un test de QI pour Siri et ses amis

Les psychologues ne se sont jamais mis d'accord précisément sur la nature de l'intelligence humaine. Et sans cet accord, l'intelligence est difficile à mesurer. En effet, la méthode de mesure la plus célèbre, le quotient intellectuel ou test de QI, a suscité de féroces controverses.





La nature de l'intelligence artificielle est tout aussi épineuse. Mais c'est un sujet que les psychologues et les informaticiens sont obligés d'affronter à mesure que les machines intelligentes deviennent plus courantes et plus puissantes.

Cela soulève un certain nombre de questions. Dans quelle mesure ces machines sont-elles intelligentes et comment se comparent-elles aux humains à cet égard ?

Aujourd'hui, nous obtenons une sorte de réponse grâce au travail de Feng Liu de l'Académie chinoise des sciences de Pékin et de quelques amis, qui ont développé un test d'intelligence que les machines et les humains peuvent passer. Ces gars-là ont utilisé le test pour classer les assistants intelligents tels que Google Assistant et Siri sur la même échelle que celle utilisée pour les humains.



Leur test est basé sur ce que les chercheurs appellent le modèle d'intelligence standard. Dans ce nouveau modèle, les systèmes doivent avoir un moyen d'obtenir des données du monde extérieur ; ils doivent être capables de transformer les données en une forme qu'ils peuvent traiter ; ils doivent pouvoir utiliser ces connaissances de manière innovante ; et, enfin, ils doivent réinjecter les connaissances qui en résultent dans le monde extérieur.

Cela revient à être capable de collecter des données, de les maîtriser, de faire preuve de créativité dessus, puis de produire un résultat.

Si un système a [ces] caractéristiques, il peut être défini comme un système d'intelligence standard, disons Feng et co.



Les chercheurs ont développé un test qui mesure la capacité d'une machine (ou d'un humain) à faire toutes ces choses. C'est là que les détails deviennent un peu flous. Ils ne disent pas quel type de tests ils utilisent.

Mais ils poursuivent en disant qu'ils testent des assistants intelligents depuis 2014. Ces machines incluent celles de Google, Baidu, Sogou, Apple et Microsoft. Ils ont également testé les humains de la même manière, ce qui leur permet de les classer tous sur la même échelle.

Le classement 2016 - le test le plus récent qu'ils publient - est le suivant.



  1. Humain 18 ans 97
  2. Humain 12 ans 84,5
  3. Humain 6 ans 55,5
  4. Google 47,28
  5. Dûr de Baidu 37.2
  6. Baidu 32,92
  7. Sogo 32.25
  8. Bing 31.98
  9. Xiaobing 24.48 de Microsoft
  10. Siri d'Apple 23,94

Ainsi, à cette échelle, même un humain de six ans surpasse l'assistant numérique le plus avancé, qui dans ce cas est celui de Google. Apple soutient ce classement et est apparemment surclassé par tous ses principaux concurrents.

Un point important est que l'intelligence artificielle s'améliore rapidement. En 2014, l'assistant de Google a obtenu 26,4 à ce test. Seulement deux ans plus tard, il a marqué 47,28, pas loin derrière un enfant de six ans. C'est une augmentation significative.

Depuis lors, Google a apporté un certain nombre d'améliorations à son assistant, ce qui augmente son utilité. Il sera intéressant de voir comment ces machines se comportent dans le classement 2017.



Mais seulement si cette méthode gagne en crédibilité. Le secret de Feng et co peut être compréhensible dans le sens où révéler les tests faciliterait leur jeu. En revanche, sans savoir comment fonctionne le testing, difficile de croire à son utilité.

Feng et co seraient avisés de publier plus de détails, peut-être même un ensemble d'exemples de questions. Sans cela, la vision dominante de ce travail sera sceptique.

Réf : arxiv.org/abs/1709.10242 : Quotient intellectuel et degré d'intelligence de l'intelligence artificielle

cacher