Inspirés par Wikipédia, les spécialistes des sciences sociales créent une révolution dans les sondages en ligne

La collecte de données sur les préférences et les activités humaines est le pain quotidien de nombreuses recherches en sciences sociales. Mais la meilleure façon de recueillir ces données fait depuis longtemps l'objet d'un débat acharné.

Les spécialistes des sciences sociales ont essentiellement deux choix. D'une part, il existe des enquêtes d'opinion publique basées sur un ensemble de questions à choix multiples, une approche dite fermée. D'autre part, il existe des approches ouvertes sous la forme d'entretiens libres dans lesquels les répondants sont libres de s'exprimer. Il y a clairement des avantages et des inconvénients importants pour chaque méthode.

Aujourd'hui, Matthew Salganik de l'Université de Princeton dans le New Jersey et Karen Levy de l'Université de New York décrivent une toute nouvelle façon de collecter des données inspirée par une nouvelle génération de systèmes d'agrégation d'informations tels que Wikipedia. Tout comme Wikipédia évolue au fil du temps en fonction des contributions des participants, nous envisageons une enquête évolutive pilotée par les contributions des répondants, disent-ils.

Ils disent que la nouvelle approche peut donner des informations qui seraient difficiles à obtenir avec d'autres méthodes. Mais elle présente également des défis pour les spécialistes des sciences sociales, notamment lorsqu'il s'agit d'analyser les données ainsi collectées.

Des projets comme Wikipédia sont le résultat de contenus générés par les utilisateurs à grande échelle. La question que se posent Salganik et Levy est de savoir si les enquêtes pourraient également être construites par les répondants eux-mêmes, au moins en partie.

Pour le savoir, ces gars-là ont développé un nouveau type de mécanisme de collecte de données qu'ils appellent une enquête wiki. Cela commence par un ensemble de questions initiales, mais permet aux répondants d'ajouter leurs propres questions au fur et à mesure de l'enquête.

Cette enquête wiki prend une forme particulière dans laquelle les répondants sont invités à choisir entre deux options : préfèrent-ils l'item A ou l'item B, par exemple. Mais surtout, ils peuvent aussi ajouter une nouveauté qui sera présentée aux futurs participants. Ainsi, au fil du temps, le nombre d'éléments parmi lesquels choisir augmente à mesure que les répondants suggèrent leurs propres idées.

Ce type d'enquête par paires présente un certain nombre d'avantages. Salganik et Levy soulignent que ce format permet aux participants de répondre à autant de choix qu'ils le souhaitent. Ils appellent cette propriété la gourmandise.

Ce type d'enquête permet également aux répondants de contribuer de nouveaux éléments quand ils le souhaitent et est donc particulièrement collaboratif. Enfin, les paires présentées aux nouveaux participants peuvent être sélectionnées de manière à maximiser l'apprentissage en fonction des réponses précédentes afin qu'une enquête wiki puisse s'adapter au fur et à mesure de son évolution.

Pour tester l'idée, Salganik et Levy ont créé un site Web gratuit appelé www.allourideas.org sur lequel n'importe qui peut créer une enquête wiki par paires et rassembler des répondants d'un public cible encouragé à participer. Depuis 2010, ce site Web a hébergé quelque 5 000 enquêtes wiki par paires qui ont inclus 200 000 éléments et recueilli 5 millions de réponses.

Salganik et Levy discutent en détail de l'exemple d'une enquête menée par le Bureau de la planification à long terme et de la durabilité dirigée par le maire de New York. Cette organisation voulait comprendre les idées des résidents sur le plan de développement durable de la ville et intégrer toute nouvelle réflexion.

Le bureau du maire a commencé par une liste de 25 éléments de base qu'il a demandé aux gens de comparer par paires, tout en encourageant les participants à ajouter leurs propres idées. Par exemple, on a demandé aux gens de choisir entre Ouvrir les cours d'école dans toute la ville comme terrains de jeux publics et Augmenter les plantations d'arbres ciblées dans les quartiers où les taux d'asthme sont élevés.

En quatre mois, 1 436 répondants ont fourni plus de 30 000 réponses et 464 nouvelles idées à l'enquête. À la fin de l'enquête, huit des 10 idées les mieux notées avaient été apportées par les répondants eux-mêmes.

Celles-ci comprenaient des idées qui n'auraient probablement pas émergé par d'autres méthodes de collecte de données, telles que Garder l'eau potable de New York propre en interdisant la fracturation hydraulique dans le bassin versant de New York et Brancher les navires sur le réseau électrique afin qu'ils ne tournent pas au ralenti dans le port, réduisant ainsi les émissions équivalentes à 12 000 voitures. par navire.

Salganik et Levy s'empressent de souligner que leur méthode nécessite d'importantes recherches supplémentaires.

En particulier, ils doivent mieux comprendre la cohérence et la validité des réponses qu'ils génèrent. Cela pourrait être fait en comparant les résultats à ceux recueillis par d'autres formes de collecte de données.

De plus, l'analyse des données des enquêtes wiki par paires est encore une sorte d'expérience statistique. Et ils offrent une sorte de défi à la communauté statistique pour trouver les moyens les plus efficaces d'extraire des informations de ce type de processus.

C'est une nouvelle approche intéressante qui permet la collecte de données qu'il serait difficile d'obtenir par d'autres méthodes. En particulier, il permet de collecter des données d'une manière qui reflète la distribution à longue traîne bien connue des contributeurs.

Par exemple, sur Wikipédia, la plupart des informations sont intuitives par une infime proportion d'éditeurs. Si Wikipédia devait autoriser 10 et seulement 10 modifications par éditeur - comme une enquête qui oblige les répondants à remplir un et un seul formulaire - cela exclurait environ 95% des modifications apportées, disent Salganik et Levy.

Bien sûr, ce type de biais doit être pris en compte lors de l'analyse des données. Et c'est là un défi de taille. Il est temps que les statisticiens s'affairent.

Réf : arxiv.org/abs/1202.0500 Enquêtes Wiki : Collecte de données sociales ouvertes et quantifiables

cacher