Flux (IA)
Génère une image de toi tel que tu te représentes, Black Forest Labs| Créateur | Black Forest Labs |
|---|---|
| Première version | |
| Dernière version | Flux.2 (model series)[1] () |
| Dépôt | github.com/black-forest-labs/flux |
| Type | Modèle texte-image |
| Licence |
|
| Site web | blackforestlabs.ai |
Flux (également connu sous le nom de FLUX.1) est un modèle texte-image développé par Black Forest Labs, basé à Fribourg-en-Brisgau, Allemagne. Comme les autres modèles de texte en image, Flux génère des images à partir de descriptions guidées en langage naturel, appelées prompts.
Histoire
[modifier | modifier le code]En , Flux s'intègre dans le chatbot Grok développé par xAI et se rend disponible en tant que fonctionnalité premium sur X[2],[3],[4],[5]. Grok change ensuite pour son propre modèle de texte en image Aurora en [6].
Le , Mistral AI annonce que son chatbot Le Chat intègre Flux Pro en tant que modèle de génération d'images[7].
Le , Black Forest Labs annonce le lancement de Flux.1 Tools, une suite d'outils d'édition conçus pour être utilisés en complément des modèles Flux existants. Les outils comprennent Flux.1 Fill pour la inpainting et l'outpainting, Flux.1 Depth pour un contrôle basé sur la carte de disparité extraite des images d'entrée et des prompts, Flux.1 Canny pour un contrôle basé sur la détection des contours via filtre de Canny extraits des images d'entrée et des prompts, et Flux.1 Redux pour le mélange des images d'entrée existantes et des prompts. Chaque outil est disponible en version Dev et Pro[8].
En , Black Forest Labs annonce un partenariat avec Nvidia pour l'inclusion des modèles Flux en tant que modèles de base pour la microarchitecture Blackwell de Nvidia[9]. L'entreprise annonce également le lancement de Flux Pro Finetuning API, conçu pour la personnalisation et le réglage fin des images générées par Flux, et un partenariat avec la société médiatique allemande Hubert Burda Media pour l'utilisation de Flux Pro dans le cadre de la création de contenu[10].
Modèles
[modifier | modifier le code]Flux est une série de modèles de texte en image. Les modèles se basent sur une architecture hybride qui combine des blocs de transformateurs de diffusion multimodaux et parallèles, mis à l'échelle à 12 milliards de paramètres. Les modèles se publient sous différentes licences, avec Schnell (signifiant « rapide » en langue allemande) publié en tant que logiciel open-source sous Licence Apache, Dev publié en tant que logiciel à source ouverte sous une licence non commerciale, et Pro publié en tant que logiciel propriétaire et uniquement accessible via une API pouvant être licenciée par des utilisateurs tiers[11]. Les utilisateurs conservent la propriété des résultats générés, quel que soit le modèle utilisé.
Les modèles se présentent soit en ligne, soit localement en utilisant des interfaces utilisateur d'IA générative telles que ComfyUI et Stable Diffusion WebUI Forge (un fork de Automatic1111 WebUI)[12].
Un modèle phare amélioré, Flux 1.1 Pro, est publié le 2 octobre 2024[13]. Deux modes additionnels se voient ajoutés le 6 novembre, Ultra qui peut générer des images à une résolution quatre fois supérieure et jusqu'à 4 mégapixels sans affecter la vitesse de génération, et Raw qui peut générer des images hyper-réalistes dans le style de la photographie candide[14],[15].
En relation avec Flux se trouve le Modèle textuel-vidéo SOTA, en cours de développement en 2024.
Accueil
[modifier | modifier le code]Selon un test effectué par Ars Technica, les résultats générés par Flux.1 Dev et Flux.1 Pro se comparent à DALL-E 3 en termes de fidélité aux prompts, avec un photoréalisme proche de Midjourney 6 et des mains humaines générées avec plus de cohérence par rapport aux modèles précédents tels que Stable Diffusion XL[16].
Flux fait l'objet de critiques pour ses images générées très réalistes. Selon des reportages médiatiques, les représentations vont d'une image de Donald Trump posant avec des armes à des scènes troublantes, ce qui déclenche des discussions sur les implications éthiques des technologies développées par Black Forest Labs[17],[4].
Après le lancement du modèle, les réseaux sociaux X se voient inonder d'images générées par Flux[18],[19]. Black Forest Labs ne fournit pas de détails exacts sur les données utilisées pour entraîner le modèle[14]. Ars Technica soupçonne que Flux se fonde sur une vaste collection non autorisée d'images récupérées sur le Web, une pratique controversée avec des conséquences juridiques potentielles[16],[20].
Intégrations tierces
[modifier | modifier le code]Alors que Black Forest Labs n'offre pas d'accès direct à leurs modèles sur leur site web, les modèles Flux se retrouvent largement disponibles via diverses plateformes tierces pour un usage créatif et professionnel. Cela inclut des dépôts sur des plateformes telles que Hugging Face[21] et Replicate[22].
Références
[modifier | modifier le code]- (en) Cet article est partiellement ou en totalité issu de l’article de Wikipédia en anglais intitulé « Flux » (voir la liste des auteurs).
- ↑ « FLUX.2: Frontier Visual Intelligence », sur Black Forest Labs, (consulté le )
- ↑ (de) Frank Puscher, « Generative AI. Black Forest Labs und Flux.1: Vom Superstar zum Buhmann in fünf Tagen » [archive du ]
, sur MEEDIA (consulté le ) - ↑ (de) Luisa Bomke, « Flux.1 – ein deutscher KI-Bildgenerator dreht mit Grok frei » [archive du ], sur Handelsblatt (consulté le )
- 1 2 (en) Jess Weatherbed, « xAI's new Grok-2 chatbots bring AI image generation to X » [archive du ], sur The Verge, (consulté le )
- ↑ Rachel Metz, « This Tiny Startup Is Helping Musk's Grok With Image Generation », Bloomberg News,
- ↑ (en) Wes Davis, « X gives Grok a new photorealistic AI image generator » [archive du ], sur The Verge, (consulté le )
- ↑ (en-US) Carl Franzen, « Mistral unleashes Pixtral Large and upgrades Le Chat into full-on ChatGPT competitor », sur VentureBeat, (consulté le )
- ↑ (en-US) Matthias Bastian, « Black Forest Labs expands FLUX.1 with four new AI tools for image editing » [archive du ], sur The Decoder, (consulté le )
- ↑ (en-US) Dean Takahashi, « Nvidia unveils AI foundation models running on RTX AI PCs » [archive du ], sur VentureBeat, (consulté le )
- ↑ (en-US) Carl Franzen, « You can now fine-tune your own version of AI image maker Flux with just 5 images » [archive du ], sur VentureBeat, (consulté le )
- ↑ (en-US) Kyle Wiggers, « Black Forest Labs, the startup behind Grok's image generator, releases an API » [archive du ], sur TechCrunch, (consulté le )
- ↑ (ja) 田口和裕, « 話題の画像生成AI「FLUX.1」をStable Diffusion用の「WebUI Forge」で動かす(高速化も試してみました) (1/6) », sur ASCII.jp, ASCII Media Works, (consulté le )
- ↑ (en-US) Carl Franzen, « Black Forest Labs releases Flux 1.1 Pro and an API », sur VentureBeat, (consulté le )
- 1 2 (en) Matt Growcoot, « Flux AI Introduces Raw Mode That 'Captures the Genuine Feel of Candid Photography' », sur PetaPixel, (consulté le )
- ↑ (en-US) Matthias Bastian, « Flux 1.1 Pro AI image model adds "amateur" RAW photo mode and 4K image generation », sur The Decoder, (consulté le )
- 1 2 (en-US) Benj Edwards, « FLUX: This new AI image generator is eerily good at creating human hands », sur Ars Technica, (consulté le )
- ↑ (de) « Black Forest Labs unter Beschuss: Schockierende KI-Bilder sorgen für… », sur AlleAktien, (consulté le )
- ↑ (en-US) Maxwell Zeff, « Meet Black Forest Labs, the startup powering Elon Musk's unhinged AI image generator » [archive du ], sur TechCrunch, (consulté le )
- ↑ (de) Matthias Schwarzer, « Drogen, Bomben und Gewalt: KI-Bildgenerator von Elon Musk zeigt alles – mit deutscher Technik », sur RND.de, (consulté le )
- ↑ (de) Christoph Künne, « FLUX.1: Neuer KI-Bildgenerator » [archive du ], sur DOCMA, (consulté le )
- ↑ « Black Forest Labs on Hugging Face » [archive du ], sur Hugging Face (consulté le )
- ↑ « Flux Collection on Replicate » [archive du ], sur Replicate (consulté le )