Transparencia
Google revela que el orden de las entidades en las preguntas afecta la recuperación de hechos por IA
Afirmaciones verificadas
Con 'thinking', la recuperación de hechos no salidos en la respuesta mejora a 40%-65%.
Estado: Verificada (fuente primaria)
El estudio señala que el orden de las entidades sujeto y objeto en las preguntas influye en la recuperación de hechos.
Estado: Verificada (fuente primaria)
En pruebas de ‘thinking’ para recuperar hechos, los LLMs pudieron recuperar ‘40–65%’ de los hechos codificados que no habían podido recordar directamente.
Estado: Verificada (fuente primaria)
Google habría encontrado que los frontier LLMs ‘encode 95–98% of the tested facts’ pero ‘are unable to directly recall 26–34% in answers to queries’.
Estado: Verificada (fuente primaria)
Los modelos evalúan entre 95% y 98% de los hechos probados y recuperan directamente entre 26% y 34% de esos hechos.
Estado: Verificada (fuente primaria)