3 Humanos + 1 Computadora = Mejor predicción
Las computadoras a menudo superan a la gente en predecir el futuro, como demostró convincentemente el analista político Nate Silver durante las elecciones presidenciales de 2012 y muestra en su libro La Señal y el ruido. Pero los estudios han encontrado que las predicciones de los humanos a veces son mejores que las máquinas. Digamos que estás tratando de pronosticar el éxito de un producto en el lanzamiento. ¿Debe confiar en una computadora o en la sabiduría de un experto?
Una nueva investigación sugiere que el mejor enfoque no es uno ni otro, sino ambos. Pero “ambos” no significa una simple mezcla de 50/50. En contextos relativamente inequívocos, confíe más en el análisis por computadora. En los altamente inciertos, promedia las opiniones de tres expertos y da mayor peso a su juicio combinado que a los resultados de la máquina.
Descubrimos estas pautas probando varias combinaciones de predicciones humanas y de computadora sobre canciones exitosas en las listas pop en Alemania y el Reino Unido. En el transcurso de 12 semanas, le pedimos a 180 personas, la mitad de ellos profesionales de la industria musical, la mitad de ellos estudiantes de posgrado sin conocimientos particulares del negocio de la música, que predijeran las 100 mejores posiciones de solteros de artistas establecidos y nuevos.
Hacer una predicción sobre una canción de un artista establecido es un problema “bien estructurado”: los datos de rendimiento pasados reducen la incertidumbre. Aquí, encontramos que en un concurso directo de hombre contra máquina, la máquina tendía a ganar (por “máquina” nos referimos a software que se basa en herramientas estadísticas comunes para analizar una supuesta relación lineal). Pero los mejores resultados vinieron de mezclar predicciones humanas y de computadora. El nivel de experiencia de los humanos era irrelevante; obtuvimos los resultados más precisos simplemente dando el pronóstico de la máquina un poco más de peso que el de los humanos.
Para artistas desconocidos – un contexto más incierto – los humanos tendían a vencer a la máquina. Pero, una vez más, la combinación de predicciones informáticas y humanas produjo los mejores resultados. Y en este caso, la experiencia importaba mucho. Cuando miramos solo a los estudiantes, la combinación óptima dio mucho más peso a la predicción de la computadora. Para los profesionales de la industria musical, fue todo lo contrario.
Luego promediamos los juicios de un número variable de profesionales. Cuanto mayor sea el grupo, mejor será el pronóstico, pero obtuvimos la mayor ganancia al pasar de dos expertos a tres.
Los estudios previos han sido contradictorios, con computadoras generalmente ganando en experimentos de laboratorio y personas ganando en entornos naturales. Creemos que hay una razón para eso. Los entornos de laboratorio tienden a estar bien estructurados, lo que favorece el procesamiento sistemático de las computadoras. Las condiciones mal estructuradas en muchos entornos naturales favorecen el funcionamiento desordenado del cerebro humano.
Ese es un punto importante a la hora de decidir cuánto confiar en una predicción de computadora sobre el lanzamiento de un producto. Si se trata de un producto innovador, algo que los clientes no han visto antes, una computadora puede proporcionar información valiosa, pero debe apoyarse más en el juicio de las personas experimentadas.
