Abrir la búsqueda a los advenedizos semánticos

Incluso si tiene una gran idea para un nuevo motor de búsqueda, no es nada fácil ponerlo en marcha. Por un lado, el mejor talento en ingeniería reside en empresas de renombre. Aún más significativo, según algunas estimaciones, cuesta cientos de millones de dólares comprar y mantener los servidores necesarios para indexar la Web en su totalidad.





Sin embargo, Yahoo lanzó recientemente un recurso que puede ofrecer esperanzas para buscar innovadores y emprendedores. Llamado Build Your Own Search Service (BOSS), permite a los programadores hacer uso del índice de Yahoo de la Web, miles de millones de páginas que se actualizan continuamente, eliminando así quizás la barrera más grande para la innovación en las búsquedas. Al abrir su índice a miles de programadores y emprendedores independientes, Yahoo espera que BOSS ponga en marcha proyectos para los que carece de tiempo, dinero y recursos para inventarlos. Prabhakar Raghavan , director de Yahoo Research y profesor consultor en la Universidad de Stanford, dice que esto podría incluir mejores formas de buscar videos o imágenes, herramientas que usan las redes sociales para clasificar los resultados de búsqueda o un motor de búsqueda semántica que trata de comprender el contenido de las páginas web. en lugar de solo una colección de palabras clave y enlaces.

Estamos tratando de derribar las barreras a la innovación, dice Raghavan, aunque admite que BOSS está lejos de ser una empresa altruista. Si una nueva herramienta de motor de búsqueda creada con el índice de Yahoo se vuelve popular y potencialmente rentable, Yahoo se reserva el derecho de colocar anuncios junto a sus resultados.

Hasta ahora, ningún sitio impulsado por BOSS ha tenido tanto éxito. Pero varias empresas emergentes están comenzando a construir sus servicios sobre BOSS, y las empresas de Web Semántica, en particular, se están beneficiando de la plataforma. Estas empresas están desarrollando software para procesar conceptos y significados con el fin de organizar mejor la información en la Web.

Por ejemplo, Hakia , una empresa con sede en Nueva York, comenzó a construir un motor de búsqueda semántica en 2004. Sus algoritmos utilizan una base de datos de conceptos (personas, lugares, objetos y más) para comprender conceptos en documentos. Hakia también crea mapas que enlazan diferentes documentos, como páginas web, basados ​​en estos conceptos para comprender su relevancia entre sí. Riza Berkan, director ejecutivo de la empresa, dice que centrarse en el significado de las páginas, en lugar de simplemente en los enlaces entre ellas, podría ofrecer resultados de búsqueda más relevantes y ayudar a las personas a encontrar contenido que ni siquiera sabían que estaban buscando.

Sin embargo, para hacer esto bien, Hakia necesita tener acceso a tantas páginas web como sea posible, y aquí es donde encaja BOSS. Para una consulta determinada, Hakia usa el índice BOSS de Yahoo para determinar un conjunto de resultados relevantes. A continuación, el software de Hakia determina si estas páginas ya han sido analizadas por el software semántico de la empresa. Si no es así, se procesarán y los resultados se almacenarán en los servidores de Hakia. De todos modos rastreamos la Web, dice Berkan. Pero sin el índice de Yahoo, estaríamos atrasados ​​en los sitios que la gente busca hoy. Y cuantas más páginas populares escanee Hakia, mejor será su índice.

Otra startup semántica, llamada Cluuz , de Ontario, Canadá, está adoptando un enfoque ligeramente diferente. Cuando un usuario busca con Cluuz, verá los resultados de Yahoo BOSS, pero se reordenan de acuerdo con la propia tecnología de búsqueda semántica de la startup. Cuando haces una consulta, dice Alex Zivkovic, CTO de Cluuz, la pasamos a Yahoo BOSS y obtenemos una lista de resultados ... Luego, para cada una de esas páginas, el motor de Cluuz analiza el contenido, extrae entidades, personas, empresas, números de teléfono y ese tipo de cosas. Estos conceptos, explica, luego se comparan con los conceptos que se encuentran en otras páginas, y los conceptos que surgen con mayor frecuencia se consideran más relevantes.

En lugar de mirar las páginas vinculadas en función de los enlaces físicos, las estamos viendo en términos de si están hablando de los mismos conceptos o no, dice Zivkovic. Esto conduce a una experiencia de usuario diferente, agrega. Por ejemplo, los términos relevantes para una consulta de búsqueda se extraen de la Web y se resaltan a la derecha de la página de resultados. Una búsqueda de Kate Greene inmediatamente muestra mi dirección de correo electrónico en Revisión de tecnología , la universidad a la que asistí y varias de las personas que entrevisté para historias anteriores. Además, Cluuz proporciona otras herramientas que permiten visualizar fácilmente los vínculos y relaciones entre diferentes conceptos semánticos.

Incluso con el poder del índice de Yahoo detrás de una empresa, no hay garantía de que Hakia o Cluuz sean un éxito. Pero si despegan, podrían ayudar a Yahoo, que todavía está muy por detrás de Google en términos de popularidad, a recuperar la ventaja. La filosofía subyacente [con BOSS] es que no seremos capaces de inventar todo por nuestra cuenta, dice Raghavan. Por tanto, deberíamos facilitar la innovación.

esconder