Un sistema de inteligencia artificial ha derrotado una serie de predicciones con varios profesionales en uno Competencia para predecir eventos Donald Trump y Elon Mask están siendo eliminados del busto a Camie Badenoch del liderazgo del Partido Conservador.
Una startup británica de IA, cofundada por el ex investigador de Google Dipmind, ha sido clasificada entre los diez primeros de una competencia de pronóstico internacional, que requiere que las entradas predicen 60 posibilidades de eventos en el verano.
La Copa Metaculus, dirigida por la compañía de pronóstico con sede en San Francisco, llegó al octavo lugar que trató de predecir el futuro de los fondos de inversión y las corporaciones.
El rendimiento de la IA todavía está muy por detrás de los mejores pronosticadores humanos, pero cree que algo que AI puede exceder a las personas de lo esperado más.
Ben Shindel, un pronosticador profesional que se encontró detrás de la IA antes de la competencia antes de terminar las mantas, dijo: “Definitivamente es una sensación extraña superar por varios bot en este momento”. “El mejor bot estaba en algo así como un rango de 300 cuando estábamos aquí de un camino muy largo que hace un año”.
Las preguntas de la Copa Metaculus incluyen qué partido ganará el asiento máximo de las elecciones generales de Samoa y cuántos acres de fuego se establecerá en los EE. UU. De enero a agosto. Los concursantes fueron puntuados sobre cuánto habían predicho como el 1 de septiembre.
“Lo que hizo Mantic”, dijo Digar Turan, director ejecutivo de Metaculus, es impresionante.
Turan asumió que la IA sería igual o mejor que los mejores pronosticadores humanos para 2021, pero dijo que en general “los pronosticadores humanos están mejor que los pronosticadores de IA”.
Dijo que, dependiendo de la predicción de eventos intercelados en pronósticos complejos, los sistemas de IA aún luchan por ejecutar las verificaciones de verificación lógica al traducir el conocimiento en la predicción final.
Mantic divide el problema de un pronóstico en diferentes trabajos y depende de su energía, contratan una lista de modelos de aprendizaje automático, incluidos OpenAI, Google y Depsec.
El cofundador de Mantick, Toby Shevlen, dijo que su actuación era un hito para la comunidad de IA utilizando grandes modelos de idiomas para la predicción.
“Algunos dicen que los LLM simplemente reorganizan sus datos de entrenamiento, pero no se puede predecir el futuro”, dijo. “Requiere un argumento verdadero. Se puede decir que las predicciones de nuestro sistema estaban más arraigadas que la mayoría de las entradas humanas, porque las personas a menudo se agrupan en torno a las predicciones promedio de la comunidad. El sistema de inteligencia artificial a menudo no está de acuerdo con el desagradable.
Para determinar qué está sucediendo con el sistema Mantic ahora, realizando investigaciones históricas, situaciones de juego y luego varios agentes de IA para predecir lo que probablemente sea el siguiente. Un poder de los pronósticos de IA es la capacidad de trabajar duro, lo cual es importante para pronósticos efectivos.
Pueden trabajar fácilmente con docenas de problemas complejos a la vez y reescribirlos todos los días para aprender de los cambios de datos. Los pronósticos humanos también usan la intuición, pero Shindel se encuentra entre los pronosticadores humanos que piensan que se puede cultivar en IA.
“La información es muy importante, pero no creo que sea inherentemente humano”, dijo.
Los mejores superforestristas humanos todavía dicen que son los mejores. Philip Tetlock, los coautores de libros de libros de este año de Superforcasting Investigación Ha demostrado que las personas expertas aún superan el bot de mejor rendimiento.
Turan dijo que en un pronóstico complejo, que depende de la predicción de eventos intercelacionados, los sistemas de IA aún pueden tener dificultades para identificar inconsistencias lógicas en sus resultados y realizar controles de verificación.
Warren Hachch, director ejecutivo de Good Jazer, una agencia cofundadora, una agencia cofundadora de Tetalk, dijo: “Esperamos que algunas categorías como la tasa de inflación mensual de AI sean hábiles. Más juicio para los departamentos, incluidos los datos dispersos, es que la respuesta a nosotros no es humano o AI en lugar de humanos o ai en lugar de humanos o ai”.
O, como Lubos Saloki, un pronosticador humano que llegó al tercero en la Copa Metaculas, dijo: “No planeo retirarme. Si no puedes matarlos, unirte con ellos”.
