La habilidad para entender los pensamientos y sentimientos de otros, conocida como teoría de la mente, es esencial en las relaciones humanas. Esta capacidad permite a las personas interpretar comentarios o peticiones de manera implícita, como deducir que una queja sobre el calor implica abrir una ventana.

Recientemente, surgió un debate sobre si las herramientas de inteligencia artificial generativa, como ChatGPT, pueden emular esta capacidad humana. Un estudio publicado en la revista Nature Human Behaviour investigó si estos modelos de lenguaje (LLM) pueden captar matices comparables a la teoría de la mente.

El equipo de investigadores empleó dos versiones de ChatGPT (la gratuita 3.5 y la avanzada 4) y el modelo de código abierto de Meta, Llama 2, para evaluar sus capacidades en teoría de la mente. Los experimentos incluyeron la interpretación de ironías, peticiones indirectas y respuestas a situaciones con información incompleta. Al mismo tiempo, 1.907 personas fueron sometidas a las mismas pruebas para realizar una comparación.

Los resultados revelaron que ChatGPT-4 puede igualar o incluso superar a los humanos en la identificación de peticiones indirectas, falsas creencias y desorientación. No obstante, presenta dificultades para detectar pasos en falso, donde alguien dice algo inapropiado.

En este sentido, Llama 2 parece destacar, superando a los humanos en la detección de pasos en falso. Sin embargo, los investigadores sugieren que este rendimiento podría deberse a sesgos en el modelo y no a una verdadera comprensión.

James W. A. Strachan, el autor principal del estudio, enfatiza la importancia de realizar pruebas sistemáticas para comparar inteligencias humanas y artificiales de manera profunda. Esto es crucial para evaluar las capacidades reales de los modelos de lenguaje en contextos de inferencia mentalista.

Así pues, el estudio sugiere que, aunque modelos avanzados de IA como ChatGPT pueden mostrar habilidades similares a la teoría de la mente humana, existen limitaciones y sesgos que deben tenerse en cuenta para evaluar adecuadamente su comprensión y capacidad de interacción social.

Comparte en: