Watson sur Jeopardy, partie 3

La deuxième nuit du match IBM/Jeopardy a été une déroute pour le programme Watson. Les questions de cet épisode étaient plus difficiles et, à mon avis, le match était plus intéressant.

Watson a admirablement joué. Comme je l'ai expliqué dans mes essais précédents, le vrai jeu n'est pas de connaître les faits ; c'est la capacité de comprendre suffisamment le langage naturel pour comprendre ce que demande la question.

Indice : un étude est une composition qui … Le nom est français pour cela

Ici, il doit comprendre que ce qui est demandé est la traduction anglaise du mot français étude . Ensuite, faites la traduction. Il l'a eu. Bravo!

Même dans ses erreurs, j'ai été impressionné. Et regarder les erreurs que les gens commettent aussi vous en dit long. Dans un cas, Watson et les humains ont eu du mal à interpréter la question.

Indice : En mai 2010, cinq tableaux… ont quitté le musée d'art parisien de cette période.

Watson : Picasso (Faux)

Ken Jennings : Cubisme (Faux)

Brad Rutter : Impressionnisme (Faux)

Bonne réponse : Art Moderne.

La question n'est pas de demander le nom d'un artiste ou d'une période de l'art, c'est de demander le nom d'un musée ! ( Musée d'Art Moderne - Musée d'Art Moderne). Là est un musée Picasso à Paris, mais il n'y a pas de musée du cubisme ni de musée de l'impressionnisme. L'art moderne était le troisième choix de Watson. Félicitations à Watson pour au moins être allé aussi loin !

La question du danger final a fait monter le suspense.

Catégorie : Villes des États-Unis

Indice : Son plus grand aéroport a été nommé d'après un héros de la Seconde Guerre mondiale ; son deuxième plus grand pour une bataille de la Seconde Guerre mondiale.

Réponse des concurrents humains : Chicago (correcte) Réponse de Watson : Toronto (erreur)

La question était intéressante car elle nécessite de faire un intersection — déterminer quels éléments plusieurs ensembles ont en commun. Vous pensez à tous les aéroports que vous connaissez. Lesquels portent le nom des héros de la Seconde Guerre mondiale ? Vous ne vous souvenez probablement pas de trop de héros de guerre, mais vous savez quels aéroports portent le nom de personnes. Quelles villes ont deux aéroports ? New York? Kennedy un héros, bien sûr, mais (je suis new-yorkais) LaGuardia était un maire, pas une bataille. Etc. Des expériences de sciences cognitives montrent que les gens ne sont pas très doués pour faire les intersections (Quelle ville porte le nom d'un animal ? Réponse : Buffalo).

Je ne connais pas les noms des aéroports de Toronto, mais la réponse va sûrement contrarier les Canadiens, puisque la catégorie était les villes américaines. Je ne sais pas pourquoi Watson a fait cette erreur. Mais cela illustre le problème de

surcontraint situations - vous ne pouvez pas trouver de réponse vraiment bonne et vous devez enfreindre les règles. Un meilleur choix aurait été de rester aux États-Unis et de prendre le risque de se tromper à propos de LaGuardia.

Mais Watson avait une stratégie de jeu qui lui a sauvé la journée. Il s'est rendu compte qu'il était en avance et qu'il ne pouvait pas être rattrapé par les autres concurrents, il n'a donc pas beaucoup parié sur le résultat final. S'il a compris cela, c'est plus impressionnant que de connaître les faits de la réponse. La stratégie l'emporte parfois sur la connaissance.

Henry Lieberman est un chercheur qui travaille sur l'intelligence artificielle au Media Laboratory du MIT.

cacher