Definitivamente debe pensarlo dos veces antes de usar un chatbot Ai para proporcionar un resumen rápido de las noticias. Un nuevo informe de la BBC muestra que los chatbots populares producen fallas importantes en los resultados resumidos.
Google Gemini tenía el mayor porcentaje de resúmenes problemáticos
La prueba cubrió el chatgpt, Google Gemini, Microsoft Copilot y Perplexity AI. Para comenzar, la BBC hizo cada pregunta de chatbot 100 sobre las noticias, pidiéndoles que usen fuentes de noticias de la BBC cuando sea posible.
Los expertos de la BBC luego evaluaron la calidad de estos resúmenes. De los resúmenes, el 51 por ciento tenía algún tipo de error, ya sea una inexactitud de objetivos, citar mal o información obsoleta.
De ellos, el 19 por ciento tenía algún tipo de error de hecho como una fecha incorrecta. Y el 13 por ciento de las citas atribuidas a la BBC en los resúmenes fueron alteradas de su forma original o no existían en los artículos proporcionados a los chatbots.
Cuando Chatbot lo desglosó, Géminis de Google fue el peor delincuente con más del 60 por ciento de los resúmenes que contenían información problemática. Microsoft Copilot fue el siguiente al 50 por ciento, mientras que ChatGPT y la perplejidad tenían alrededor del 40 por ciento de las respuestas con problemas.
En la conclusión del estudio, la BBC dijo que muchos de los problemas eran más que información incorrecta:
Esta investigación también sugiere que el rango de errores introducidos por los asistentes de IA es más amplia que solo las imprecisiones objetivas. Los asistentes de IA que probamos lucharon para diferenciar entre opinión y hecho, editorializados y, a menudo, no pudieron incluir un contexto esencial. Incluso cuando cada declaración en una respuesta es precisa, este tipo de problemas puede dar lugar a respuestas que son engañosas o sesgadas.
Nunca he tratado de usar un chatbot de IA para resumir las noticias debido al simple hecho de que no confiaba en la confiabilidad de la tecnología. Pero los resultados del estudio siguen siendo muy sorprendentes con la gran cantidad de resultados con problemas. AI tiene un largo camino por recorrer para convertirse en una forma confiable de obtener más información sobre las noticias.
Las características de IA siguen siendo un trabajo en progreso
La tecnología de IA, y especialmente los chatbots, continúan mejorando rápidamente. Pero como muestra el estudio de la BBC, esperar información correcta sobre las noticias es un área enormemente problemática.
La BBC se ha quejado vocalmente de otra característica impulsada por la IA: los resúmenes de notificación de Apple Intelligence. En diciembre de 2024, un resumen de notificación de la salida declaró incorrectamente que Luigi Mangione se había disparado a sí mismo. Es el supuesto tirador del CEO de salud Brian Thompson.
En respuesta a la BBC y otras quejas, Apple apagó temporalmente los resúmenes de las aplicaciones de noticias y entretenimiento que comienzan con iOS 18.3.
Entonces, cuando buscas ponerme al día con las noticias, manténgalo simple: omita un resumen de IA y lee usted mismo.