Simulating student learning for better AI tutoring
En el mundo de la inteligencia artificial, la educación está experimentando una transformación significativa gracias a la investigación de Microsoft Research. Un nuevo sistema llamado StudentSim está diseñado para evaluar y mejorar los tutores de IA antes de ser probados con estudiantes reales. Este sistema no es un producto comercial ni está destinado a reemplazar a los maestros en las aulas, sino que busca optimizar el proceso de desarrollo de tutores de IA.
La necesidad de feedback de los estudiantes es crucial para mejorar las herramientas de tutoría de IA, pero obtener este feedback a través de estudios con humanos es un proceso lento, costoso y difícil de escalar. Aquí es donde StudentSim entra en juego, entrenando simuladores de estudiantes personalizados a partir de registros de aprendizaje disponibles públicamente y desidentificados, adaptando un simulador a cada estudiante.
Este trabajo evalúa los simuladores en dos dimensiones fundamentales en la educación: si responden como un estudiante específico y si actualizan su respuesta después de recibir orientación del tutor. En áreas como el ajedrez, la escritura en inglés como segundo idioma y las matemáticas, StudentSim supera a los estándares actuales y proporciona una señal de feedback útil para entrenar a un tutor de IA.
El objetivo principal no es sustituir a los docentes, sino ayudar a los investigadores a evaluar y mejorar los sistemas de tutoría de IA durante el proceso de investigación y desarrollo, antes de probarlos con estudiantes reales. La investigación utiliza únicamente conjuntos de datos de estudiantes disponibles públicamente para uso en investigación, sin emplear información personal identificable en ninguna etapa.
Medir lo que un simulador de estudiantes necesita hacer es un desafío. Una forma sencilla de construir un simulador es pedirle a un modelo de lenguaje grande que desempeñe el papel de un aprendiz. Sin embargo, el desafío radica en preservar el límite real de habilidades del aprendiz. StudentSim define su objetivo a través de dos dimensiones inspiradas en la investigación educativa: la fidelidad del comportamiento y la capacidad de respuesta a la orientación.
Fuente: https://www.microsoft.com/en-us/research/blog/simulating-student-learning-for-better-ai-tutoring/