FLUX
FLUX est une nouvelle génération d'
FLUX — Nouvelle génération de modèle de génération d'images IA de haute qualité de Black Forest Labs
Paramètres et statistiques de base
| Paramètres | Détails |
|---|---|
| Développeur | Black Forest Labs GmbH (Fribourg, Allemagne) |
| Fondateurs | Robin Rombach, Andreas Blattmann (anciennement Stability AI / Stable Diffusion) |
| Date de première sortie | 1 août 2024 |
| Série de modèles | FLUX.1 [pro], [dev], [schnell] ; FLUX1.1 [pro], [pro] Ultra |
| [schnell] Licence | Apache 2.0 (disponible dans le commerce, entièrement ouvert) |
| [dév] Licence | Droits ouverts, utilisation non commerciale |
| [pro] Licence | Accès via API uniquement, licence commerciale |
| Résolution de sortie maximale | 4MP (FLUX1.1 [pro] Ultra) |
| Canaux d'accès API | Répliquer, fal.ai, Together AI, API officielle |
| Évaluation comparative des produits concurrents | La qualité d'image surpasse Midjourney v6 et DALL-E 3 dans de nombreuses évaluations |
Le principal avantage de FLUX réside dans la combinaison « qualité d'image supérieure + stratégie ouverte » - la série [pro] rivalise avec les meilleurs outils commerciaux tels que Midjourney en termes de qualité, tandis que la version [schnell] est entièrement ouverte aux projets communautaires et commerciaux avec Apache 2.0, ouvrant une chaîne écologique complète « utilisation communautaire open source → déploiement commercial ».
Reconnaissance des utilisateurs et du marché
Après la sortie de la série FLUX.1 en août 2024, elle a provoqué une rare sensation dans la communauté de génération d'images IA : le modèle FLUX.1 [dev] sur Hugging Face est devenu le modèle de génération d'images le plus téléchargé au cours de la première semaine de sortie. Il y a eu un grand nombre de critiques sur Reddit et Twitter, et les utilisateurs ont généralement reconnu que la qualité de l'image avait atteint ou dépassé le niveau de Midjourney v6.
FLUX a reçu des scores particulièrement élevés dans l'évaluation des dimensions suivantes : précision de l'anatomie humaine (qui a toujours été une difficulté dans la génération d'images IA), traitement des relations entre plusieurs objets dans des scènes complexes, précision du rendu du texte et beauté visuelle globale. Plusieurs critiques indépendantes de la communauté IA classent FLUX.1 [pro] et FLUX1.1 [pro] comme l'un des modèles de génération d'images IA de la plus haute qualité globale. L'expérience créative de Stable Diffusion de l'équipe de Black Forest Labs confère au produit un haut niveau de crédibilité technique.
Avantage de coût
| Version | Accès | Prix | Licence | Personnes concernées |
|---|---|---|---|---|
| FLUX.1 [image] | Ouvrir le téléchargement du poids | Gratuit | Apache2.0 | Développeurs, chercheurs, déploiement commercial |
| FLUX.1 [dév] | Ouvrir le téléchargement du poids | Gratuit | Non commercial | Recherche, apprentissage, expérimentation personnelle |
| FLUX.1 [pro] | API Répliquer/fal.ai | Environ 0,05$/carte | Licence commerciale | Développeurs d'applications, utilisateurs professionnels |
| FLUX1.1 [pro] | API | Environ 0,04 $/pièce | Licence commerciale | Application commerciale de haute qualité |
| FLUX1.1 [pro] Ultra | API | Environ 0,06$/photo | Licence commerciale | Scènes professionnelles haute résolution |
Pour les développeurs dotés de fortes capacités d'auto-hébergement, la licence Apache 2.0 de [schnell] en fait l'une des options les moins coûteuses pour la génération d'images commerciales de haute qualité ; pour les utilisateurs qui ne souhaitent pas entretenir l'infrastructure, le modèle de paiement à l'utilisation pour l'accès aux API est rentable avec une utilisation à fréquence faible à moyenne.
Fonctions principales
- Génération de texte en image de haute qualité : La série de modèles FLUX a atteint le plus haut niveau de l'industrie en termes de précision de suivi des mots, de réalisme de l'image, de précision de l'anatomie humaine et de diversité de styles artistiques, en particulier dans la qualité de génération de personnages et de scènes complexes.
- Sélection flexible de modèles à trois niveaux : [schnell] (le plus rapide, disponible dans le commerce avec Apache 2.0) répond aux besoins prioritaires en matière de vitesse ; [dev] (poids ouvert, non commercial) convient à la recherche et au réglage fin ; [pro] (qualité la plus élevée, accès API) répond aux besoins de qualité les plus élevés et les utilisateurs peuvent choisir de manière flexible en fonction des scénarios réels.
- Capacité de rendu de texte : la précision de FLUX dans le rendu du texte (tel que les slogans d'affiches et le texte des panneaux) dans les images est supérieure à celle des produits concurrents de la même période. Cette capacité lui confère un avantage pratique dans les scénarios de conception nécessitant la combinaison de graphiques et de texte.
- Sortie ultra haute résolution (Ultra) : FLUX1.1 [pro] Ultra prend en charge la sortie d'image jusqu'à 4 MP, répondant aux scènes avec des exigences de résolution extrêmement haute telles que l'impression, l'affichage de grande taille et le remplacement de photographies professionnelles.
- Écosystème Open Weight ([dev]/[schnell]) : Open Weight permet aux développeurs de la communauté de déployer localement, d'affiner LoRA et de personnaliser les styles. Des communautés telles que Civitai ont accumulé un grand nombre de modèles personnalisés et LoRA basés sur FLUX, enrichissant la diversité des styles générés.
- Génération rapide ([schnell]) : FLUX.1 [schnell] optimise la vitesse d'inférence et comprime le temps de génération tout en conservant une haute qualité. Il convient aux scénarios d’application nécessitant la génération d’images en temps réel ou quasi-réel.
- Accès API multiplateforme : l'accès est fourni via plusieurs canaux, notamment Replicate, fal.ai, Together AI et l'API officielle de Black Forest Labs, afin que les développeurs puissent choisir la méthode d'accès qui convient le mieux à leur infrastructure et à leur structure de coûts.
Evolution du modèle et de la version
| Version | Temps | Descriptif |
|---|---|---|
| Fondation des laboratoires de la Forêt-Noire | 2024-06 | Fondée par Robin Rombach et Andreas Blattmann |
| FLUX.1 [pro/dev/schnell] | 2024-08-01 | Le modèle à trois vitesses est sorti simultanément, faisant sensation dans la communauté |
| FLUX1.1 [pro] | ~2024-10 | Double amélioration de la qualité et de la vitesse, 3x plus rapide |
| FLUX1.1 [pro] Ultra | ~2024-11 | Sortie de la version ultra haute résolution 4MP |
| Communauté LoRA prospérité écologique | ~2024-T4 | Les communautés Civitai et HuggingFace ont publié un grand nombre de FLUX LoRA |
Avantages techniques
Architecture de transformateur à flux rectifié : FLUX adopte une architecture de transformateur (similaire à DiT - Transformateur de diffusion) qui est différente de la série Stable Diffusion (basée sur U-Net). Combiné à la méthode de formation Rectified Flow, le modèle offre des avantages significatifs au niveau architectural en termes de rétention des détails de l'image, de compréhension sémantique et de cohérence de la génération, établissant ainsi une base plus solide pour des améliorations ultérieures de la qualité.
Technologie de distillation de guidage ([schnell]) : FLUX.1 [schnell] utilise la technologie de distillation pour compresser le processus de génération qui nécessite un échantillonnage en plusieurs étapes en une génération de haute qualité en quelques étapes (1 à 4 étapes), ce qui réduit considérablement la quantité de calculs d'inférence tout en maintenant une qualité d'image proche de celle de l'échantillonnage à plusieurs étapes, obtenant ainsi un équilibre efficace entre vitesse et qualité.
Formation à l'optimisation de l'anatomie humaine : La série FLUX est nettement meilleure que le premier modèle de diffusion en termes de précision de l'anatomie humaine (mains, proportions du visage, articulations des membres). Cela vient de l'optimisation particulière par l'équipe de la qualité des données de formation et des signaux de supervision, et constitue l'une des dimensions les plus appréciées par les utilisateurs lors de l'évaluation.
Comment utiliser
| Entrée | Descriptif |
|---|---|
| Répliquer | Visitez https://replicate.com/black-forest-labs pour les appels API ou l'essai de l'interface Web |
| fal.ai | Visitez https://fal.ai, qui fournit une gamme complète d'API de modèle FLUX |
| CâlinsVisage | Télécharger [dev]/[schnell] Modèle de poids ouvert, exécuté localement ou dans le cloud |
| ComfyUI/Automatique1111 | Déploiement local, chargement du modèle FLUX via le plug-in communautaire |
| API officielle | Visitez https://api.bfl.ml pour appeler directement l'API officielle de Black Forest Labs |
Étapes d'utilisation typiques (appel de FLUX1.1 [pro] via l'API Replicate) :
- Visitez https://replicate.com pour créer un compte et lier un mode de paiement.
- Recherchez « black-forest-labs/flux-1.1-pro » dans Replicate pour afficher la page du modèle.
- Saisissez le mot d'invite expérience directement dans l'interface Web ou copiez l'exemple de code Python pour l'intégration de l'API.
- Appel API : installez le package Python
replicate, définissez le jeton API et appelezreplicate.run("black-forest-labs/flux-1.1-pro", input={"prompt": "..."})pour générer l'image. - Déploiement local ([schnell]) : Téléchargez les poids du modèle
black-forest-labs/FLUX.1-schnelldepuis HuggingFace, chargez et exécutez via ComfyUI (nécessite plus de 24 Go de mémoire GPU).
Prix des produits
- FLUX.1 [schnell] : entièrement gratuit, licence open source Apache 2.0, disponible pour un usage commercial, déploiement local, sans limite d'utilisation (le coût du matériel est à votre charge). Appeler via la plateforme API coûte environ 0,003 $/billet.
- FLUX.1 [dev] : Téléchargement gratuit avec licence ouverte et non commerciale, adapté à la recherche et à l'apprentissage personnel, environ 0,025 $/photo via l'appel de la plateforme API.
- FLUX.1 [pro] : accès API uniquement, environ 0,055 $/pièce sur Replicate, environ 0,05 $/pièce sur fal.ai, adapté au développement d'applications commerciales.
- FLUX1.1 [pro] : La réplication coûte environ 0,04 $/pièce, plus rapide et de meilleure qualité. Il s'agit de la version mise à niveau recommandée de [pro].
- FLUX1.1 [pro] Ultra : environ 0,06 $/feuille, prend en charge la haute résolution de 4 MP, convient aux besoins professionnels d'impression et de conception commerciales.
Scénarios d'application
1. Génération de contenu visuel commercial de haute qualité Les équipes de conception de marque et les agences de publicité utilisent l'API FLUX1.1 [pro] pour générer des images d'affichage de produits, des visuels marketing et des créations publicitaires de haute qualité. Les avantages de FLUX en termes de qualité de génération de personnages, de produits et de scènes améliorent directement la disponibilité commerciale du contenu de sortie et réduisent les coûts de post-retouche.
2. Les développeurs intègrent la génération d'images de haute qualité Les développeurs d'applications peuvent intégrer des fonctions de génération d'images IA dans leurs produits via l'API FLUX. La licence Apache 2.0 de [schnell] permet une intégration commerciale, la haute qualité de [pro] répond aux scénarios d'applications commerciales qui nécessitent une sortie de haute qualité et une sélection d'API flexible pour répondre à différents besoins en termes de coûts et de qualité.
3. Recherche et mise au point du modèle communautaire open source Les chercheurs en IA et les développeurs communautaires utilisent les poids ouverts de FLUX.1 [dev] pour affiner LoRA et former des modèles personnalisés pour des styles spécifiques (tels que l'animation, la photographie réaliste, les styles artistiques). La communauté Civitai a accumulé un grand nombre de FLUX LoRA de haute qualité que les utilisateurs peuvent télécharger et utiliser.
4. Génération d'images professionnelles haute résolution (Ultra) Doit être utilisé pour l'impression, l'affichage de grande taille ou des scènes de remplacement de photographie professionnelle, la sortie 4MP de FLUX1.1 [pro] Ultra répond aux exigences de résolution de l'impression commerciale, combinée à une qualité d'image de haut niveau, adaptée aux scènes visuelles professionnelles qui nécessitent « génération IA + haute résolution ».
Personnes concernées
- Développeurs IA et développeurs indépendants : ils ont besoin d'une API de génération d'images de haute qualité pour l'intégration d'applications, et la licence Apache 2.0 de [schnell] ne permet aucune barrière juridique à l'utilisation commerciale.
- Artistes IA et créateurs de contenu numérique : En recherchant une qualité d'image optimale, FLUX ouvre la voie en matière de performances complètes dans un style réaliste et artistique, et la version à poids ouvert prend en charge un contrôle flexible local.
- Équipe visuelle de conception de marque et de marketing : besoin d'une API fiable de génération d'images commerciales de haute qualité, d'une série [pro] d'autorisations commerciales et de services API stables pour répondre aux besoins de l'entreprise.
- Chercheurs et universitaires en IA : la pondération ouverte de [dev] prend en charge une reproductibilité complète de la recherche, adaptée à la recherche de modèles de génération d'images, au réglage fin des expériences technologiques et aux études d'ablation.
- Ne convient pas aux scénarios : utilisateurs ordinaires qui n'ont aucune connaissance technique et n'ont besoin que d'une simple interface glisser-déposer (Midjourney ou Adobe Firefly offrent une expérience produit plus conviviale) ; la génération vidéo est requise (FLUX se concentre sur les images statiques) ; un déploiement local nécessitant une puissance de calcul GPU élevée n'est pas réalisable pour le matériel grand public ordinaire.
Résumé et Outlook
L'émergence de FLUX marque un autre saut technologique dans le domaine de la génération d'images open source initié par l'équipe originale de Stable Diffusion - remplaçant U-Net par l'architecture Transformer, défiant Midjourney avec une qualité commerciale optimale, tout en maintenant la vitalité de l'écosystème open source avec la version [schnell] d'Apache 2.0. Cette stratégie à double voie « version commerciale sans compromettre la qualité + version open source sans compromettre l'ouverture » garantit non seulement la durabilité de l'entreprise, mais maintient également la prospérité de l'écologie communautaire.
Les limitations actuelles sont les suivantes : la série [pro] repose sur l'accès API et le coût est plus élevé que celui des solutions open source auto-hébergées ; l'exécution de [dev]/[schnell] localement nécessite plus de 24 Go de mémoire vidéo et le seuil matériel grand public est élevé ; il n'y a pas d'interface officielle d'édition d'images interactive et elle doit s'appuyer sur la couche UI d'une plate-forme tierce ; la qualité des mots rapides chinois est toujours à la traîne par rapport aux mots rapides anglais.
Pour l'avenir, Black Forest Labs devrait publier un modèle de génération vidéo basé sur FLUX (poursuivant la voie technique de la diffusion vidéo stable), ainsi qu'une version plus légère (abaissant le seuil de déploiement local de la mémoire vidéo) ; à mesure que l'écosystème LoRA et ControlNet mûrit sur FLUX, FLUX devrait réduire davantage l'écart avec l'écosystème Stable Diffusion en termes de flexibilité de contrôle créatif.
Outils associés : midjourney, stable-diffusion
Informations de version
- FLUX1.1 [pro] Ultra ：Sortie de la version FLUX1.1 [pro] Ultra, prenant en charge la génération d'images ultra haute résolution jusqu'à 4 MP (environ 4 millions de pixels) tout en conservant la qualité d'image supérieure de FLUX1.1 [pro], adaptée à la conception et à l'impression commerciales avec des exigences de niveau professionnel en matière de résolution de sortie, offrant un accès via l'API.
- FLUX1.1 [pro] ：Sortie de FLUX1.1 [pro], qui améliore encore la qualité de l'image, la vitesse de génération (3 fois plus rapide que la première génération) et la précision du suivi des mots rapides basée sur FLUX.1 [pro], rivalisant avec les meilleurs outils commerciaux de génération d'images dans plusieurs évaluations indépendantes et obtenant les meilleurs scores.
- Première version de la série FLUX.1 ([pro]/[dev]/[schnell]) ：Black Forest Labs lance officiellement un ensemble de trois modèles FLUX.1 : [pro] (qualité la plus élevée, API uniquement), [dev] (poids ouvert, licence non commerciale), [schnell] (le plus rapide, poids ouvert, licence commerciale Apache 2.0). Après sa sortie, il a rapidement attiré l'attention de la communauté de l'IA, et des plates-formes telles que Hugging Face, Replicate et fal.ai ont été simultanément lancées pour le déploiement.
Avis des utilisateurs