Les Wikipédiens promettent un nouveau moteur de recherche

Ce n'est un secret pour personne que Jimmy Wales, le fondateur de Wikipedia, a pensé qu'il était temps pour un nouveau style de moteur de recherche Internet. Il a clairement fait savoir dans des remarques publiques, dans des publications sur des listes de diffusion électroniques et ailleurs au cours des six derniers mois qu'il voyait des inconvénients aux moteurs de recherche entièrement pilotés par des logiciels tels que Google et Yahoo. Il a également clairement indiqué qu'il pensait que le processus de publication collaboratif et décentralisé derrière Wikipédia pourrait bien être la réponse.

Rechercher une solution ? Le Wikia de Jimmy Wales, qui héberge des centaines de wikis spécialisés, se lance dans le domaine de la recherche avec un projet qui tentera d'intégrer les commentaires des utilisateurs et une collaboration éditoriale de style Wikipédia dans la sélection et le classement des résultats de recherche.

Wales a officialisé ses intentions lors d'une conférence de presse le 8 mars à Tokyo, où il a déclaré que sa nouvelle société à but lucratif, Wikia, dirigerait un projet de lancement d'un site de recherche open source axé sur la communauté d'ici la fin de 2007. le fonctionnement technique de Recherche Wikia sont encore en débat, il est clair que le projet combinera une exploration Web entièrement robotisée, ou spidering, avec des outils Web qui sont entre les mains d'humains - à la fois des éditeurs bénévoles, qui organiseront et mettront en évidence le meilleur contenu, et des utilisateurs moyens, qui votera sur l'utilité de chaque résultat de recherche, influençant ainsi le classement de ces résultats dans les recherches futures.

Wikia, basé à San Mateo, en Californie, hébergera le site de recherche et collectera les revenus publicitaires qu'il génère, mais Wales pense que le site peut être conçu et construit principalement par des bénévoles, grâce à une collaboration open source du type de celui qui a donné naissance au Système d'exploitation Linux. Plus de 700 développeurs bénévoles s'attaquent déjà au problème en utilisant des serveurs de test donnés à Wikia par des supporters, selon le PDG de Wikia, Gil Penchina.

La science de la recherche est encore obscure. Il faut une compréhension approfondie des systèmes de fichiers, des architectures d'index, des performances des disques durs, du stockage en réseau et du classement rapide des requêtes, sans parler des milliers de serveurs et d'une bande passante extrême, pour créer et exécuter un moteur de recherche majeur. Mais aujourd'hui, Penchina et Wales soutiennent qu'il existe suffisamment d'expertise en dehors des murs des principales sociétés de recherche pour concevoir un moteur de recherche open source compétitif - un moteur de recherche qui, selon eux, pourrait attirer des millions d'utilisateurs chaque jour et capturer jusqu'à 5 % des 7 $. milliard de marché pour la publicité liée à la recherche.

Il ne reste plus qu'à le construire. Non seulement le moteur de recherche Wikia n'existe pas encore ; l'entreprise recueille toujours des suggestions techniques au niveau le plus élémentaire (comme on peut le voir en parcourant les archive de liste de diffusion ).

Les bénévoles de Wikia Search - l'équivalent de la communauté principale de contributeurs et d'éditeurs de Wikipédia - pourraient avoir des emplois similaires à ceux des éditeurs de catégorie au Projet d'annuaire ouvert , un annuaire Web édité par l'homme hébergé par AOL pour lequel chaque volontaire est responsable du suivi des ressources Web sur un sujet spécifique. Alternativement, tous les sujets pourraient être ouverts à tous les éditeurs, qui pourraient utiliser un système de type Wikipédia pour classer ou annoter les résultats de recherche et suivre les révisions d'autres personnes (et les annuler en cas de vandalisme).

Les utilisateurs finaux, quant à eux, peuvent être invités à voter pour chaque résultat de recherche individuel, comme ils peuvent le faire avec l'agrégateur d'actualités collaboratif. Digg . Ou ils peuvent être invités à baliser ou à ajouter des mots descriptifs aux résultats, aidant les autres à les trouver plus tard, dans le style des sites de recherche sociale TagMonde et Préfondé et la communauté de partage de photos Flickr .

Nous avons beaucoup de choses qui se développent en parallèle, et certains de nos projets sont en fait en concurrence les uns avec les autres, nous devrons donc voir quel en sera le résultat, explique Penchina. Cela demandera de la patience, mais Wikia n'est pas pressé de finaliser une solution, dit-il. Nous avons ce dicton en interne : « Pas de pensée a priori. » Les communautés évoluent à leur manière, et quiconque pense savoir où va la foule ne comprend généralement pas la psychologie des foules.

Seules quelques affaires sont réglées, selon Penchina. L'une est la prémisse de base : que Wikia Search combinera les forces du logiciel et des personnes. Les ordinateurs sont utiles pour la résolution de problèmes à grande échelle comme la construction d'un index, mais le jugement de la machine n'est généralement jamais aussi bon que le jugement humain, vous avez donc besoin d'un mélange des deux, dit-il.

Une autre question réglée est que les développeurs de Wikia Search n'essaieront pas de réinventer la roue : les composants purement algorithmiques de Wikia Search seront construits sur les moteurs de recherche open source existants. Écrou et Lucène , tous deux initiés par le développeur de logiciels indépendant Doug Cutting.

La réaction à l'annonce des ambitions de Wikia est mitigée. Certains dans la communauté technique disent que les internautes méritent un moteur de recherche dont le fonctionnement est ouvert à tous, contrairement aux algorithmes de classement étroitement surveillés utilisés par Google et ses pairs.

D'autres ont souligné les énormes défis liés à la confrontation avec Google, qui emploie nombre des meilleurs cerveaux du monde en matière de technologie de recherche d'informations, possède une vaste infrastructure mondiale de serveurs et fournit des résultats suffisamment bons pour que plus d'un Internet sur quatre les utilisateurs s'arrêtent tous les jours sur le moteur de recherche. Google et Yahoo et MSN et Ask font un sacré bon travail, a fait remarquer Stavros Macrakis, vétéran de l'industrie de la recherche, dans un article publié fin février sur la liste de diffusion Wikia Search. Ce n'est pas comme si le concours était une Encyclopaedia Britannica à 2 000 $ qui est toujours dépassée depuis des années.

Penchina reconnaît l'ampleur des défis, mais affirme que Wikia est dans le domaine de la recherche sur le long terme. Je ne sais pas si nous nous attendons à des résultats extrêmement impressionnants dès le premier jour, dit-il. Wikipédia a mis six ans pour en arriver là.

Wikia Search a une généalogie quelque peu confuse. Wikipedia, qui a fusionné l'idée d'une encyclopédie en ligne avec la technologie d'édition collaborative des wikis, est contrôlé depuis 2003 par la Wikimedia Foundation à but non lucratif, qui gère également Wiktionary, Wikinews, Wikiquote et d'autres projets de collaboration.

Wikia, d'autre part, est une société à but lucratif cofondée en 2004 par le pays de Galles et l'entrepreneur Internet britannique Angela Beeseley sous le nom d'origine Wikicities. Il héberge des centaines de wikis spécialisés, y compris des wikis pour les passionnés de généalogie. Wikia n'a aucun lien direct avec Wikipédia ; Cependant, plusieurs des contributeurs les plus dévoués de Wikipédia sont maintenant des employés de Wikia, y compris Beeseley.

Wikia a levé au moins 4 millions de dollars en capital-risque en 2006 auprès d'un groupe comprenant Bessemer Venture Partners, Omidyar Network, Amazon.com et des investisseurs providentiels.

cacher