University of Turku and SiloGen launch consortium to build the world’s largest open LLM

El consorcio SiloGen y TurkuNLP tiene como objetivo establecer el modelo de lenguaje de código abierto más grande del mundo, que abarque todas las lenguas oficiales europeas. Esta iniciativa prioriza la soberanía digital al garantizar que los modelos subyacentes se entrenen con datos que representen con precisión a los ciudadanos y las organizaciones europeas, cumpliendo estrictamente con las normativas regionales. Al crear modelos base transparentes y reproducibles, el proyecto busca garantizar la responsabilidad y evitar la dependencia de tecnologías externas que no cumplan con las regulaciones. En el centro de este esfuerzo se encuentra la combinación única de experiencia académica de clase mundial, conjuntos de datos multilingües cuidadosamente seleccionados y acceso a la infraestructura de supercomputación más potente de Europa. Esta alineación permite a los investigadores entrenar de manera eficiente modelos a gran escala que priorizan el multilingüismo y la equidad entre todas las lenguas. El proyecto demuestra cómo los recursos de computación de alto rendimiento pueden aprovecharse no solo para escalar, sino también para crear sistemas de inteligencia artificial representativos y culturalmente apropiados. Esta iniciativa es altamente relevante para la comunidad de datos abiertos, ya que valida el papel crucial de los datos públicos de alta calidad y representativos en la construcción de una IA confiable. Destaca un cambio hacia el desarrollo descentralizado y soberano de la tecnología, donde el acceso abierto a los modelos base empodera las aplicaciones derivadas. Al poner estos modelos a disposición gratuita, el consorcio democratiza el acceso a la IA avanzada, permitiendo que diversas organizaciones innoven de forma segura mientras mantienen el control sobre sus datos específicos y casos de uso.

Source: utu.fi
Published on 2023-10-20

Datos Abiertos (Open data)

Related news