Google's DataGemma is the first large-scale Gen AI with RAG

Google's DataGemma is the first large-scale Gen AI with RAG - why it matters

Google ha presentado DataGemma, una nueva integración de sus modelos de lenguaje grande (LLM) de código abierto Gemma con la base de datos pública Data Commons. Mediante el uso de generación aumentada por recuperación (RAG), este sistema permite que la IA obtenga estadísticas verificadas y de acceso público antes de generar respuestas. Este enfoque busca reducir significativamente las alucinaciones y mejorar la precisión factual, fundamentando las salidas del modelo en datos del mundo real procedentes de fuentes como las Naciones Unidas, en lugar de depender únicamente de los datos de entrenamiento internos. La implementación utiliza dos metodologías distintas para mejorar la calidad de las respuestas. El primer método emplea la generación entrelazada con recuperación para verificar hechos en consultas específicas, mientras que el segundo utiliza la generación aumentada por recuperación completa para ofrecer respuestas exhaustivas y con citas de las fuentes. Al combinar estas técnicas con ventanas de contexto extensas, el modelo puede analizar grandes volúmenes de información recuperada simultáneamente, asegurando que el razonamiento esté respaldado por evidencia concreta y mejorando su utilidad para tareas de investigación y toma de decisiones. Este desarrollo es altamente relevante para la comunidad de datos abiertos, ya que demuestra un marco escalable para utilizar conjuntos de datos públicos con el fin de mejorar la transparencia y la fiabilidad de la inteligencia artificial. Destaca un cambio hacia sistemas híbridos que combinan modelos de código abierto con infraestructuras de datos abiertos, demostrando que la información de acceso público puede fundamentar eficazmente la IA generativa. Esto valida el potencial de los ecosistemas de datos abiertos no solo como almacenamiento, sino como componentes activos en la construcción de aplicaciones de IA confiables y basadas en hechos, que satisfacen necesidades sociales más amplias.

Source: zdnet.com
Published on 2024-09-17

Freedom of Information Act »

Datos Abiertos (Open data)

Related news