Inspirándose en Wikipedia, los científicos sociales crean una revolución en las encuestas en línea

La recopilación de datos sobre las preferencias y actividades humanas es el pan de cada día de muchas investigaciones en las ciencias sociales. Pero la mejor manera de recopilar estos datos ha sido objeto de un feroz debate durante mucho tiempo.

Los científicos sociales esencialmente tienen dos opciones. Por un lado, están las encuestas de opinión pública basadas en un conjunto de preguntas de opción múltiple, el llamado enfoque cerrado. Por otro lado, existen enfoques abiertos en forma de entrevistas libres en las que los encuestados son libres de decir lo que piensan. Hay ventajas y desventajas claramente importantes de cada método.

Hoy, Matthew Salganik de la Universidad de Princeton en Nueva Jersey y Karen Levy de la Universidad de Nueva York describen una forma completamente nueva de recopilar datos inspirada en una nueva generación de sistemas de agregación de información como Wikipedia. Así como Wikipedia evoluciona con el tiempo en función de las contribuciones de los participantes, imaginamos una encuesta en evolución impulsada por las contribuciones de los encuestados, dicen.

Dicen que el nuevo enfoque puede generar conocimientos que serían difíciles de obtener con otros métodos. Pero también presenta desafíos para los científicos sociales, particularmente cuando se trata de analizar los datos recopilados de esta manera.

Proyectos como Wikipedia son el resultado de contenido generado por usuarios a gran escala. La pregunta que se hacen Salganik y Levy es si las encuestas también podrían ser construidas por los propios encuestados, al menos en parte.

Para averiguarlo, estos muchachos han desarrollado un nuevo tipo de mecanismo de recopilación de datos que llaman encuesta wiki. Esto comienza con un conjunto de preguntas iniciales, pero permite a los encuestados agregar sus propias preguntas a medida que la encuesta lo involucra.

Esta encuesta wiki toma una forma particular en la que se les pide a los encuestados que elijan entre dos opciones: si prefieren el artículo A o el artículo B, por ejemplo. Pero lo más importante es que también pueden agregar un nuevo elemento que se presentará a los futuros participantes. Entonces, a medida que pasa el tiempo, la cantidad de elementos para elegir aumenta a medida que los encuestados sugieren sus propias ideas.

Este tipo de encuesta por parejas tiene una serie de ventajas. Salganik y Levy señalan que este formato permite a los participantes responder a tantas opciones como deseen. A esta propiedad la llaman codicia.

Este tipo de encuesta también permite a los encuestados contribuir con nuevos elementos cuando lo deseen y, por lo tanto, es excepcionalmente colaborativo. Finalmente, los pares presentados a los nuevos participantes se pueden seleccionar de una manera que maximice el aprendizaje en función de las respuestas anteriores para que una encuesta wiki pueda adaptarse a medida que evoluciona.

Para probar la idea, Salganik y Levy crearon un sitio web gratuito llamado www.allourideas.org en el que cualquiera puede crear una encuesta wiki por pares y reunir a los encuestados de un público objetivo animado a participar. Desde 2010, este sitio web ha alojado unas 5000 encuestas wiki por pares que han incluido 200 000 elementos y obtenido 5 millones de respuestas.

Salganik y Levy discuten en detalle el ejemplo de una encuesta realizada por la Oficina de Sustentabilidad y Planificación a Largo Plazo dirigida por el alcalde de la ciudad de Nueva York. Esta organización quería comprender las ideas de los residentes sobre el plan de sostenibilidad de la ciudad e integrar cualquier pensamiento nuevo.

La Oficina del Alcalde comenzó con una lista de 25 artículos de semillas que pidió a las personas que compararan en pares, al mismo tiempo que animaba a los participantes a agregar sus propias ideas. Por ejemplo, se pidió a las personas que eligieran entre Abrir patios escolares en toda la ciudad como áreas de juego públicas y Aumentar la plantación de árboles específicos en vecindarios con altas tasas de asma.

Durante cuatro meses, 1.436 encuestados aportaron más de 30.000 respuestas y 464 nuevas ideas a la encuesta. Al final de la encuesta, ocho de las 10 ideas con la puntuación más alta habían sido aportadas por los propios encuestados.

Estas incluían ideas que probablemente no habrían surgido a través de otros métodos de recopilación de datos, como mantener limpia el agua potable de la ciudad de Nueva York al prohibir el fracking en la cuenca hidrográfica de la ciudad de Nueva York y conectar los barcos a la red eléctrica para que no permanezcan inactivos en el puerto, lo que reduce las emisiones equivalentes a 12,000 automóviles. por barco.

Salganik y Levy se apresuran a señalar que su método requiere una investigación adicional sustancial.

En particular, necesitan comprender mejor la consistencia y validez de las respuestas que generan. Eso podría hacerse comparando los resultados con los recopilados por otras formas de recopilación de datos.

Además, analizar los datos de las encuestas wiki por parejas sigue siendo una especie de experimento estadístico. Y ofrecen una especie de desafío para la comunidad estadística para encontrar las formas más eficientes de extraer información de este tipo de proceso.

Ese es un nuevo enfoque interesante que permite la recopilación de datos que serían difíciles de obtener por otros métodos. En particular, permite que los datos se recopilen de una manera que refleje la conocida distribución de cola larga de los contribuyentes.

Por ejemplo, en Wikipedia la mayor parte de la información es intuida por una pequeña proporción de editores. Si Wikipedia permitiera 10 y solo 10 ediciones por editor, similar a una encuesta que requiere que los encuestados completen uno y solo un formulario, excluiría alrededor del 95% de las ediciones aportadas, dicen Salganik y Levy.

Por supuesto, este tipo de sesgo debe tenerse en cuenta cuando se trata de análisis de datos. Y ahí radica un desafío significativo. Es hora de que los estadísticos se pongan a trabajar.

Ref: arxiv.org/abs/1202.0500 Encuestas wiki: Recopilación abierta y cuantificable de datos sociales

esconder