Bienvenido FLUX.3 Image Klein en Diffusers
huggingface ·
Hugging Face ha integrado el modelo FLUX.3 Image Klein de Black Forest Labs en la biblioteca Diffusers, ofreciendo una solución versátil para la generación de imágenes a partir de texto y la generación de imágenes a partir de múltiples referencias. El modelo introduce una nueva función de control de diseño que permite a los usuarios definir regiones específicas mediante cajas delimitadoras dentro de las indicaciones, proporcionando una guía composicional precisa. Hay dos puntos de control principales disponibles: una versión destilada optimizada para inferencia rápida con menos pasos, y un modelo base diseñado para el ajuste fino mediante LoRA. Las pruebas de rendimiento indican que el punto de control destilado puede generar imágenes de alta resolución en aproximadamente dos segundos en una GPU H100, mientras que las variantes cuantizadas admiten la implementación en hardware más pequeño. La arquitectura subyacente utiliza un proceso de transformador de dos etapas que procesa inicialmente los tokens de texto, imagen y referencia por separado antes de fusionarlos para la atención conjunta. Además, la integración admite pipelines modulares, lo que permite a los desarrolladores personalizar flujos de trabajo insertando o eliminando bloques de procesamiento. Este lanzamiento proporciona herramientas integrales tanto para el uso inmediato como para la personalización avanzada mediante scripts de ajuste fino.
huggingface