Controlled diffusion model can change material properties in images
Controlled diffusion model can change material properties in images
Alchemist presenta un nuevo modelo de difusión que permite un control preciso e intuitivo sobre las propiedades de los materiales, como la rugosidad, la metalicidad, el albedo y la transparencia en las imágenes. Al utilizar una interfaz basada en deslizadores, supera las limitaciones de los modelos de texto a imagen, que a menudo dependen de indicaciones impredecibles. Este avance permite a los usuarios editar atributos visuales de bajo nivel con precisión y rapidez, haciendo que la tecnología sea mucho más práctica para flujos de trabajo profesionales en efectos visuales, diseño de videojuegos y artes gráficas, donde se requieren resultados consistentes y deterministas. La capacidad del sistema para aislar y modificar rasgos específicos de los materiales mientras preserva el resto de la escena demuestra mejoras significativas en la edición dirigida de imágenes. Al entrenarse en conjuntos de datos sintéticos en lugar de imágenes del mundo real, el modelo logra una alta fidelidad y realismo, superando a sus contrapartes existentes tanto en precisión como en preferencia del usuario. Esta capacidad sugiere un futuro en el que la inteligencia artificial generativa pueda integrarse sin problemas en el software estándar de creación de contenido, cerrando la brecha entre la generación estocástica y el control artístico deliberado y de alta granularidad. Este desarrollo es altamente relevante para los datos abiertos, ya que destaca el papel crucial de los datos sintéticos en el avance del aprendizaje automático cuando la recopilación de datos del mundo real es poco práctica. Muestra cómo las bases de código abierto, como Stable Diffusion, pueden extenderse para resolver problemas específicos y matizados en visión por computadora. Además, al mejorar la calidad de los datos de entrenamiento sintéticos para aplicaciones como la robótica y la clasificación de imágenes, Alchemist contribuye a un ecosistema más robusto de herramientas abiertas que mejoran la comprensión de las propiedades físicas por parte de las máquinas, fomentando la innovación en múltiples dominios de la ciencia abierta.
Fuente: news.mit.eduPublicado el 2024-05-29
Noticias relacionadas
- Earnix highlights the potential of synthetic data in specialty insurance | bobsguide
- Desocupación en México toca mínimo histórico en 2024; ¿cuál es el ‘pero’?
- COVER-UP: Anthony Fauci's COVID Team Conspired to Evade FOIA Requests
- House Panel Opens Probe Into NIH Officials Allegedly Evading FOIA on COVID Origins
- Mistral AI Targets US Market with Open-Source Models