Descripción general de la IA es una función de Google También llegó recientemente a Italia: se trata de una función de resumen inteligente dentro del motor de búsqueda que permite a las personas hacer preguntas elaboradas, encontrar la información que buscan y descubrir sitios web útiles para responder a sus necesidades.
Google ofrece una respuesta sintética, razonada, generada por modelos lingüísticos avanzados, intentando anticiparse a la búsqueda e intentando responder antes de que el usuario haga clic en cualquier enlace.
El New York Times informa que AI Overview ahora responde preguntas correctamente alrededor del 90% de las veces, un porcentaje que puede parecer alto hasta que nos detenemos a pensar un poco: 1 de cada 10 respuestas son incorrectas.
«Para Google esto significa mostrar cientos de miles de mentiras cada minuto del día». escribe Ars Técnica explicando que el New York Times Realizó las evaluaciones en colaboración con una startup llamada Oumi, que se especializa en la creación de modelos de IA. La startup aprovechó las herramientas de inteligencia artificial para probar las descripciones generales de la inteligencia artificial con la evaluación SimpleQA, un punto de referencia desarrollado por OpenAI para medir la efectividad de los sistemas de inteligencia artificial en el uso de datos web para responder preguntas objetivas concisas.
«Oumi empezó a realizar sus pruebas el año pasado, cuando el Gemini 2.5 era el modelo estrella de la Gran G. En ese momento, el punto de referencia mostró una tasa de precisión del 85%. Cuando se volvió a realizar la prueba después de actualizar a Gemini 3, AI Overviews respondió correctamente al 91% de las preguntas. Si extrapolas este margen de error a toda la masa de búsquedas de Google, puedes ver que AI Overviews genera decenas de millones de respuestas incorrectas cada día».
El informe enumera varios ejemplos en los que AI Overview se equivocó. Por ejemplo, cuando se le preguntó sobre la fecha en que la antigua casa de Bob Marley se convirtió en museo, AI Overviews citó tres páginas, dos de las cuales no mencionaban la fecha en absoluto. El último, Wikipedia, informó de dos años contradictorios y la IA eligió con seguridad el año equivocado.
El punto de referencia también requiere que los modelos indiquen la fecha en que el violonchelista Yo-Yo Ma fue incluido en el Salón de la Fama de la Música Clásica Estadounidense. Aunque AI Overviews citó el sitio web de la organización como una lista de la incorporación del músico, luego afirmaron que el Salón de la Fama de la Música Clásica no existe».
«Este estudio tiene graves deficiencias», afirmó el portavoz de Google, Ned Adriance. «No refleja lo que la gente realmente busca en Google». Big G prefiere utilizar una prueba llamada SimpleQA Verified, que utiliza un conjunto más limitado de preguntas que han sido probadas más exhaustivamente.
En enero, una investigación separada encontró que la función de descripción general de IA de Google mostraba afirmaciones de salud peligrosas.
Todas las noticias y conocimientos sobreInteligencia artificial están disponibles en esta página de Macitynet.