Nuevo investigar realizado por un profesor de Wharton School en la Universidad de Pensilvania descubrió que el chatbot GPT-3 impulsado por IA pudo aprobar el examen final para el programa de Maestría en Administración de Empresas (MBA) de la escuela.

Profesor. Christian Terwiesch, autor de trabajo de investigación «¿Obtendría Chat GPT3 un MBA de Wharton? Una predicción basada en su desempeño en el curso de Gestión de Operaciones», dijo el bot que obtuvo entre una B y una B en el examen. La puntuación del bot muestra su «notable capacidad para automatizar algunas de las habilidades de los trabajadores del conocimiento altamente remunerados en general y de los trabajadores del conocimiento en particular en puestos ocupados por graduados de MBA, incluidos analistas, gerentes y consultores».

El bot hizo un «trabajo increíble en cuestiones básicas de gestión de operaciones y análisis de procesos, incluidas las basadas en estudios de casos», escribió Terwiesch en el artículo, que se publicó el martes 17 de enero, y agregó que «las explicaciones del bot son excelentes». El bot también es «notablemente bueno para modificar sus respuestas en respuesta a las señales humanas», concluyó.

Los hallazgos de Terwiesch surgen en medio de la creciente preocupación entre los educadores de que tales chatbots puedan inspirar trampas. Aunque los chatbots no son una tecnología nueva, ChatGPT explotó en las redes sociales en con retraso 2022. A principios de este mes, el Departamento de Educación de la ciudad de Nueva York anunció la prohibición de ChatGPT en sus dispositivos y redes escolares.

The Wharton School en la Universidad de Pensilvania en Filadelfia el 28 de septiembre de 2022.Hannah Beier/Bloomberg vía archivo de Getty Images

Gran parte del debate se centra en el estilo de conversación conversacional de ChatGPT y el estilo de respuesta tópica y consistente, lo que dificulta distinguirlo de las respuestas humanas.

Los expertos que trabajan tanto en IA como en educación han reconocido que los bots como ChatGPT podrían dañar la educación en el futuro. Pero en entrevistas recientes con NBC News, algunos educadores y expertos aún no estaban preocupados.

Terwiesch no respondió de inmediato a una solicitud de comentarios adicionales. Un portavoz de la startup de inteligencia artificial OpenAI, que creó el bot, tampoco respondió de inmediato a una solicitud de comentarios el lunes.

Él GPT-3 El modelo utilizado en el experimento parece ser un hermano mayor del bot ChatGPT más reciente, que se ha convertido en un tema controvertido entre los educadores y quienes trabajan en IA. ChatGPT, la última versión, «se refina a partir de un modelo de la serie GPT-3.5», según OpenAI. sitio de Internet.

Aunque los resultados de Chat GPT3 fueron impresionantes, Terwiesch señaló que Chat GPT3 «a veces comete errores sorprendentes en cálculos relativamente simples en el nivel de matemáticas de sexto grado».

La versión actual de Chat GPT «no es capaz de manejar preguntas de análisis de procesos más avanzadas, incluso cuando se basa en plantillas bastante estándar», agregó Terwiesch. “Esto incluye flujos de procesos con múltiples productos y problemas con efectos estocásticos como la variabilidad de la demanda”.

Aún así, Terwiesch dijo que el desempeño de ChatGPT3 en la prueba tiene «implicaciones significativas para la educación de las escuelas de negocios, incluida la necesidad de políticas de examen, un diseño de currículo que se centre en la colaboración humana y la inteligencia artificial, oportunidades para simular procesos de toma de decisiones del mundo real, la necesidad de enseñar resolución creativa de problemas, mejora de la productividad docente y más.