Los wikipedistas prometen un nuevo motor de búsqueda

No ha sido ningún secreto que Jimmy Wales, el fundador de Wikipedia, ha estado pensando que es hora de un nuevo estilo de motor de búsqueda en Internet. Ha dejado claro en comentarios públicos, en publicaciones en listas de correo electrónico y en otros lugares durante los últimos seis meses que ve inconvenientes en los motores de búsqueda totalmente impulsados ​​por software como Google y Yahoo. También ha dejado claro que cree que el proceso de publicación colaborativo y descentralizado detrás de Wikipedia podría ser la respuesta.





¿Solución de búsqueda? Wikia de Jimmy Wales, que alberga cientos de wikis de interés especial, está entrando en el negocio de las búsquedas con un proyecto que intentará incorporar los comentarios de los usuarios y la colaboración editorial al estilo de Wikipedia en la selección y clasificación de los resultados de búsqueda.

Wales hizo oficiales sus intenciones en una conferencia de prensa el 8 de marzo en Tokio, donde dijo que su nueva empresa con fines de lucro, Wikia, lideraría un proyecto para lanzar un sitio de búsqueda de código abierto impulsado por la comunidad a fines de 2007. Mientras el funcionamiento técnico de Búsqueda de Wikia aún se están debatiendo, está claro que el proyecto combinará la exploración web completamente robótica, o spidering, con herramientas basadas en la web que están en manos de humanos, tanto editores voluntarios, que organizarán y destacarán el mejor contenido, como usuarios promedio. quién votará sobre la utilidad de cada resultado de búsqueda, lo que influirá en la clasificación de estos resultados en búsquedas futuras.

Wikia, con sede en San Mateo, CA, albergará el sitio de búsqueda y recaudará los ingresos publicitarios que genera, pero Wales cree que el sitio puede ser diseñado y construido principalmente por voluntarios, a través de la colaboración de código abierto del tipo que dio lugar a la Sistema operativo Linux. Más de 700 desarrolladores voluntarios ya están solucionando el problema utilizando servidores de prueba donados a Wikia por partidarios, según el CEO de Wikia, Gil Penchina.



La ciencia de la búsqueda es todavía arcana. Se necesita un conocimiento profundo de los sistemas de archivos, las arquitecturas de índices, el rendimiento del disco duro, el almacenamiento en red y la clasificación rápida en el tiempo de consulta, sin mencionar miles de servidores y una cantidad extrema de ancho de banda, para construir y ejecutar un motor de búsqueda importante. Pero hoy, argumentan Penchina y Wales, hay suficiente experiencia fuera de los muros de las principales empresas de búsqueda para diseñar un motor de búsqueda competitivo de código abierto, uno que proyectan podría atraer a millones de usuarios diariamente y capturar hasta el 5 por ciento de los $ 7 mil millones de mercado para la publicidad relacionada con la búsqueda.

Todo lo que queda es construirlo. No solo el motor de búsqueda de Wikia aún no existe; la empresa todavía está recopilando sugerencias técnicas en el nivel más básico (como se puede ver al navegar por el proyecto archivo de lista de correo ).

Los voluntarios de Wikia Search, el equivalente a la comunidad principal de colaboradores y editores de Wikipedia, pueden tener trabajos similares a los de los editores de categorías en el Proyecto de directorio abierto , un directorio web editado por personas alojado por AOL para el cual cada voluntario está a cargo de rastrear los recursos web sobre un tema específico. Alternativamente, todos los temas pueden estar abiertos a todos los editores, quienes podrían usar un sistema similar a Wikipedia para clasificar o anotar los resultados de búsqueda y rastrear las revisiones de otras personas (y revertirlas en casos de vandalismo).



Mientras tanto, se les puede pedir a los usuarios finales que voten a favor o en contra de cada resultado de búsqueda individual, como pueden hacerlo en el agregador colaborativo de noticias. Digg . O se les puede pedir que etiqueten o agreguen palabras descriptivas a los resultados, para ayudar a otros a encontrarlos más tarde, al estilo de los sitios de búsqueda social. TagWorld y Prefundido y la comunidad para compartir fotos Flickr .

Tenemos muchas cosas desarrollándose en paralelo y algunos de nuestros proyectos compiten entre sí, por lo que tendremos que ver cuál es el resultado, dice Penchina. Eso requerirá paciencia, pero Wikia no tiene prisa por finalizar una solución, dice. Tenemos este dicho internamente: 'No pensar a priori'. Las comunidades evolucionan de una manera especial, y cualquiera que crea que sabe adónde va a ir la multitud, generalmente no comprende la psicología de la multitud.

Solo unos pocos asuntos están resueltos, según Penchina. Una es la premisa básica: que Wikia Search combinará las fortalezas del software y las personas. Las computadoras son útiles para la resolución de problemas a gran escala, como la construcción de un índice, pero el juicio de la máquina generalmente nunca es tan bueno como el juicio humano, por lo que necesita una combinación de los dos, dice.



Otro asunto resuelto es que los desarrolladores de Wikia Search no intentarán reinventar la rueda: los componentes puramente algorítmicos de Wikia Search se construirán sobre los motores de búsqueda de código abierto existentes. Nutch y Lucene , ambos iniciados por el desarrollador de software independiente Doug Cutting.

La reacción a la noticia de las ambiciones de Wikia es mixta. Algunos miembros de la comunidad técnica dicen que los usuarios de Internet merecen un motor de búsqueda cuyo funcionamiento esté abierto para que todos lo examinen, en contraste con los algoritmos de clasificación cuidadosamente guardados que utilizan Google y sus pares.

Otros han subrayado los enormes desafíos de enfrentarse a empresas como Google, que emplea muchos de los mejores cerebros del mundo en tecnología de recuperación de información, posee una vasta infraestructura global de servidores y ofrece resultados lo suficientemente buenos como para que más de uno de cada cuatro Internet los usuarios hacen una parada en el motor de búsqueda todos los días. Google, Yahoo, MSN y Ask hacen un muy buen trabajo, comentó el veterano de la industria de las búsquedas Stavros Macrakis en una publicación a fines de febrero en la lista de correo de Wikia Search. No es que la competencia fuera una Enciclopedia Británica de 2.000 dólares que siempre está desactualizada.



Penchina reconoce la magnitud de los desafíos, pero dice que Wikia está en el negocio de las búsquedas a largo plazo. No sé si esperamos resultados enormemente impresionantes desde el primer día, dice. Wikipedia ha tardado seis años en llegar a donde está.

Wikia Search tiene una genealogía algo confusa. Wikipedia, que fusionó la idea de una enciclopedia en línea con la tecnología de edición colaborativa de los wikis, ha sido controlada desde 2003 por la Fundación Wikimedia sin fines de lucro, que también opera Wiktionary, Wikinews, Wikiquote y otros proyectos colaborativos.

Wikia, por otro lado, es una empresa con fines de lucro cofundada en 2004 por la empresaria de Internet británica y galesa Angela Beeseley con el nombre original de Wikicities. Alberga cientos de wikis de interés especial, incluidos wikis para aficionados a la genealogía. Wikia no tiene conexión directa con Wikipedia; sin embargo, varios de los colaboradores más dedicados de Wikipedia son ahora empleados de Wikia, incluido Beeseley.

Wikia recaudó al menos $ 4 millones en capital de riesgo en 2006 de un grupo que incluía a Bessemer Venture Partners, Omidyar Network, Amazon.com e inversores ángeles.

esconder