FLUX, une famille de modèles d'IA de pointe développée par Black Forest Labs, attire l'attention pour sa polyvalence et ses performances. Dans cet article, nous nous concentrerons sur FLUX.1 Schnell, une version distillée du modèle FLUX, et passerons en revue son flux de travail, y compris la configuration, le paramétrage et l'optimisation. Si vous travaillez avec une mémoire vidéo limitée ou explorez des flux de travail d'IA avancés, FLUX Schnell pourrait changer la donne.
Table des matières
Qu'est-ce que FLUX ?
FLUX est une famille de modèles d'IA conçue pour diverses applications, avec trois versions principales :
- FLUX Pro: une version payante, uniquement dans le cloud, avec une personnalisation limitée du flux de travail. Elle prend en charge les flux de travail de prompting de base.
- FLUX.1 Dev: une version installable localement pour un usage non commercial.
- FLUX.1 Schnell: un modèle distillé optimisé pour la vitesse et l'efficacité mémoire. Cette version est idéale pour les utilisateurs ayant des contraintes matérielles ou recherchant des performances plus rapides sans compromettre la qualité.
Dans ce guide, nous explorerons FLUX.1 Schnell en détail, en couvrant ses fonctionnalités uniques et la façon de le configurer efficacement.
Pourquoi choisir FLUX.1 Schnell ?
FLUX.1 Schnell est une version distillée du modèle, similaire à Stable Diffusion 3.5 Large Turbo. Les modèles distillés sont optimisés pour des téléchargements plus rapides, une utilisation mémoire réduite et des temps de chargement plus courts. Cependant, FLUX reste un modèle volumineux, donc les utilisateurs disposant d'une mémoire vidéo limitée devraient envisager de télécharger la version quantifiée depuis la page Comfy-Org sur Hugging Face.
Caractéristiques principales de FLUX.1 Schnell :
- Modèle quantifié: la version FP8 Safetensors (virgule flottante 8 bits) est optimisée pour une meilleure gestion de la mémoire.
- Encodeurs de texte intégrés: le fichier de checkpoint inclut les encodeurs de texte CLIP et T5, ce qui améliore le respect du prompt et le traitement du langage naturel.
- Flux de travail distillé: FLUX Schnell utilise une échelle CFG (Classifier-Free Guidance) de 1 et ne prend pas en charge les prompts négatifs, ce qui simplifie sa configuration.
Configurer FLUX.1 Schnell dans Comfy UI
Suivez ces étapes pour configurer FLUX.1 Schnell et obtenir des performances optimales :
1. Télécharger le modèle
- Consultez la page Comfy-Org sur Hugging Face et téléchargez le fichier FLUX.1 Schnell FP8 Safetensors . Cette version est quantifiée pour une meilleure compatibilité avec la mémoire vidéo. Après avoir téléchargé le fichier du modèle, placez-le sous C:\Users\<username>\Documents\ComfyUI\models\checkpoints.
2. Préparer le prompt
- FLUX utilise les encodeurs de texte CLIP et T5, ce qui le rend très efficace pour les prompts en langage naturel. Préparez un prompt détaillé pour de meilleurs résultats.
- Remarque : FLUX Schnell ne prend pas en charge les prompts négatifs. Si vous tentez d'en utiliser un, cela entraînera des erreurs ou un comportement inattendu.
3. Gérer les entrées négatives
Comme FLUX Schnell ne prend pas en charge les prompts négatifs, vous devrez annuler le conditionnement de l'entrée négative. Voici comment procéder :
- Créez un nœud Conditioning Zero Out .
- Connectez-le entre le nœud d'encodeur de texte CLIP et l'entrée négative de l'échantillonneur.
- Cela garantit qu'aucune confusion ne survient à cause d'un prompt négatif vide.
4. Ajuster les paramètres de l'échantillonneur
- Réglez steps sur 4 pour une vitesse et des performances optimales.
- Réglez CFG scale sur 1, comme l'exige le modèle distillé.
Voici un exemple de configuration :
Sampler Node Settings:
- Steps: 4
- CFG Scale: 1
Exécuter le flux de travail
Une fois le modèle chargé, le processus de génération est remarquablement rapide et ne nécessite que quatre étapes. Bien que le chargement initial du modèle puisse prendre un certain temps, le flux de travail optimisé garantit ensuite des performances efficaces.
Voici un exemple de sortie :
Prompt: 4k photo, high quality, in a European forest
Prompt :
a futuristic cityscape with neon lights and flying cars
Problèmes courants et solutions
1. Temps de chargement du modèle
FLUX.1 Schnell est un modèle volumineux, donc le chargement initial peut prendre plus de temps, en particulier sur les systèmes aux ressources limitées. L'utilisation de la version FP8 quantifiée réduit considérablement ce problème.
2. Confusion liée aux prompts négatifs
Si vous avez l'habitude d'utiliser des prompts négatifs, assurez-vous d'annuler le conditionnement comme décrit ci-dessus. Cela évite les erreurs et maintient un flux de travail propre.
Conclusion
FLUX.1 Schnell offre une solution puissante et efficace pour les flux de travail d'IA, en particulier pour les utilisateurs ayant des contraintes matérielles. Son intégration des encodeurs de texte CLIP et T5 garantit un respect supérieur du prompt, tandis que l'architecture distillée offre un traitement plus rapide. En suivant les étapes décrites ci-dessus, vous pouvez optimiser FLUX.1 Schnell pour vos besoins spécifiques.
Pour plus de détails, consultez la documentation officielle de FLUX ou la page Comfy-Org sur Hugging Face.