Obtenga actualizaciones gratuitas sobre la inflación de EE. UU.
Te enviaremos uno Resumen diario de myFT Correo electrónico con la información más reciente. inflación estadounidense Noticias todas las mañanas.
Prometemos que no nos subiremos al tren y convertiremos este sitio en AI-Phaville, pero aquí hay un documento de trabajo bastante interesante de la Reserva Federal de St. Louis sobre el tema candente de 2023.
Miguel Faria e Castro y Fernando Leibovici utilizaron el modelo de lenguaje grande PaLM de Google para crear pronósticos de inflación retrospectivos para 2019-23 y los compararon con los pronósticos de la Encuesta de pronosticadores profesionales de la Reserva Federal de Filadelfia y los datos de inflación reales.
He aquí (énfasis de Alphaville a continuación):
Nuestros resultados de referencia sugieren que los LLM generan pronósticos de inflación condicionales con errores cuadráticos medios (MSE) más bajos que una fuente de pronóstico más tradicional, el SPF, para el período de análisis que va desde 2019 hasta el primer trimestre de 2023. Los pronósticos de LLM no solo son mejores cuando se ven durante todo el período, sino también para casi todos los años individuales en los horizontes de análisis y pronóstico. . . . Si bien este documento se centra en la tasa de crecimiento anual del Índice de Precios al Consumidor (IPC) de EE. UU., Los métodos que examinamos pueden aplicarse a prácticamente cualquier serie temporal de interés, como medidas de actividad económica real o medidas de inflación desagregadas geográficamente.
Los investigadores utilizaron PaLM de Google porque se basa en datos que se actualizan constantemente (el conocimiento del mundo de GPT-4 finalizará en 2021) y porque Google permite que los académicos lo utilicen de forma gratuita. Lo cual es bastante justo.
Pero dado que la empresa tiene acceso a Internet, ¿cómo se puede evitar que “haga trampa” y busque datos reales de inflación? Castro y Leibovici pretendieron que “hoy” era un momento específico en el pasado, lo que obligó a PaLM a utilizar solo información hasta la fecha especificada. Aquí está el mensaje que usaron:
“Supongamos que estás ahí τ. Por favor, deme su mejor pronóstico para la inflación del IPC de EE. UU. desestacionalizada año tras año para t, t+1, t+2, t+3, t+4. Por favor proporcionen valores numéricos para estos pronósticos. Al formular estos pronósticos, no utilice información que no estuviera disponible en el momento τ”.
Aquí, τse ha fijado una fecha específica para presentar los datos del SPF (generalmente el 15 de febrero, el 15 de mayo, el 15 de agosto y el 15 de noviembre) y t es el trimestre que contiene esa fecha; t+1, t+2, etc. son los siguientes trimestres.
Por supuesto, el uso de cosas como el aprendizaje automático para predecir la inflación está razonablemente bien establecido (al menos entre los fondos de cobertura cuantitativos de primer nivel). Y existen debilidades obvias en el uso de modelos de inteligencia artificial de voz para hacer predicciones económicas.
En primer lugar, sus predicciones pueden variar mucho según las indicaciones. Además, los modelos LLM exhiben una aleatoriedad misteriosa, lo que significa que incluso si reciben indicaciones idénticas en diferentes ocasiones, aún pueden producir predicciones diferentes.
Castro y Leibovici resolvieron el primer problema probando muchas indicaciones diferentes para encontrar las respuestas más consistentes y consistentes, y el segundo problema haciendo muchas preguntas repetidas para obtener una distribución de predicciones y la media y mediana utilizadas.
Sin embargo, el mayor desafío es garantizar que PaLM no haga “trampas” ya que tiene acceso a Internet. Lo hicieron haciendo preguntas sobre eventos actuales para descubrir lo que “sabían”. Por ejemplo, con indicaciones como: “Responda la siguiente pregunta fingiendo que hoy es el 1 de enero de 2020: “¿Está viva la reina Isabel II?” Resulta que PaLM es un poco realista:
Sí, la reina Isabel II está viva desde el 1 de enero de 2020. Nació el 21 de abril de 1926 y ahora tiene 93 años. Ha sido Reina del Reino Unido y otros reinos de la Commonwealth desde el 6 de febrero de 1952. Es la monarca británica con el reinado más largo y la reina con el reinado más largo de la historia mundial. También es jefa de estado de otros 15 países, incluidos Canadá, Australia y Nueva Zelanda. La reina Isabel II es una figura querida en el Reino Unido y en todo el mundo. Es conocida por su sentido del deber y compromiso con el servicio público. También es un símbolo de estabilidad y continuidad en un mundo cambiante.
Sin embargo, como admiten los investigadores, existe un límite en la precisión con la que pueden comprobar si PaLM sigue las reglas que establece.
En última instancia, estamos limitados en la medida en que podemos abordar plenamente estas preocupaciones porque no tenemos control sobre el conjunto de datos y los tokens utilizados para entrenar el modelo.
FWIW: PaLM predice actualmente un retorno más lento al objetivo de inflación del 2 por ciento de la Reserva Federal que los pronosticadores humanos profesionales. . .
Otras lecturas
— Una IA acaba de aprobar un examen universitario (pero que no cunda el pánico: fue solo economía)
— La IA generativa será excelente para los consultores de IA generativa
– ChatGPT en comparación con los mercados.
