PoloSur
En respuesta a la creciente utilización de chatbots, Chequeado se asoció con Natalí Schejtman y un grupo de estudiantes de la Universidad Torcuato Di Tella para llevar a cabo un análisis preliminar sobre la calidad de la información proporcionada por estos sistemas. Durante mayo y junio de 2025, se realizó un ejercicio que consistió en evaluar las respuestas de ChatGPT, Grok y Gemini, a preguntas sobre noticias actuales, abarcando temas que iban desde el caso Libra hasta el conflicto en el Hospital Garrahan y las tensiones entre Estados Unidos e Irán.
Los estudiantes formularon las preguntas de manera individual, incorporando en algunas ocasiones errores intencionados, como datos falsos, para comprobar si los chatbots podrían detectarlos y corregirlos. Con las respuestas obtenidas, se elaboró una matriz de diez variables de análisis de contenido, inspirada en los lineamientos de Krippendorff (2019), que abarcaba dimensiones como precisión, claridad, fuentes y editorialización, entre otros aspectos.
Aunque el estudio representó un primer acercamiento con un volumen de datos limitado, sus conclusiones resultaron reveladoras. Se identificaron tendencias que apuntan hacia áreas para futuras investigaciones, como el hecho de que los chatbots frecuentemente erraban en sus respuestas cuando las preguntas carecían de contexto temporal. Además, la cantidad y calidad de las fuentes citadas variaban notablemente; algunas respuestas incluían hasta veinticinco fuentes, mientras que otras no citaban ninguna, lo que generaba inconsistencias en la veracidad de la información presentada. En los casos donde se partía de un error, no siempre los chatbots lograban corregirlo, lo que a veces resultaba en respuestas incorrectas.
Este ejercicio inicial proporcionó valiosas lecciones metodológicas que han orientado el diseño de investigaciones posteriores. En abril de 2026, Chequeado continuó con la evaluación de las respuestas de diferentes chatbots en relación a las afirmaciones del presidente Javier Milei durante la apertura de sesiones. El proyecto sigue evolucionando, con el objetivo de explorar un esquema conversacional que permita analizar el comportamiento de los chatbots a lo largo de un intercambio, enriqueciendo así la comprensión sobre su rendimiento informativo. Agradecemos la participación de los estudiantes que contribuyeron a este ejercicio y mantenemos un compromiso firme con la mejora continua en la evaluación de la información que consumimos.
