Stable Diffusion 3.5
Tout ce qu’il faut savoir pour comprendre et utiliser Stable Diffusion 3.5
Created Time
modele
modele
Stable Diffusion 3.5 est la dernière version des modèles de génération d'images développée par Stability AI, marquant un retour remarqué de l'entreprise pionnière de l'IA open source.
Cette suite de modèles optimisés excelle dans la fidélité aux prompts et la personnalisation, offrant des performances de haut niveau tant sur les infrastructures professionnelles que sur le matériel grand public.
Fidèle à sa philosophie d'accessibilité, stable Diffusion 3.5 est partagé avec une licence communautaire permettant un usage gratuit pour la recherche et les petites entreprises.
SD 3.5
Qu’est-ce que Stable Diffusion 3.5 ?Comment utiliser Stable Diffusion 3.5 ?Taille d’imagesPerformances & Besoin MatérielImages créées avec Stable Diffusion 3.5Stable Diffusion 3.5 en détailsLes différentes modèlesLes Forces de SD 3.5Licences et droits d’utilisationFAQ Stable Diffusion 3.5Articles et Tutoriels Stable Diffusion 3.5
L’Actualité de Stable Diffusion 3.5
SD3.5 Large sur MS Azure
15/02/25 - L’AI Foundry de Microsoft Azure intégre désormais Stable Diffusion 3.5 Large.
→ En savoir plus
SD3.5 Large sur AWS Bedrock
23/12/24 - AWS Bedrock intégre désormais Stable Diffusion 3.5 Large.
→ En savoir plus
Qu’est-ce que Stable Diffusion 3.5 ?
Stable Diffusion 3.5 est la nouvelle génération de modèles d'IA texte-image lancée par Stability AI le 22 octobre 2024. Ce n'est pas un modèle unique, mais une famille de plusieurs modèles conçus pour différents besoins.
Ces nouveaux modèles sont plus personnalisables, performants et polyvalents que leurs prédécesseurs.
Ils excellent dans la création d'images diverses, représentant mieux la variété du monde réel, sans nécessiter de prompts détaillés. De plus, ils sont capables de générer un large éventail de styles artistiques, de la photographie à l'art 3D.
Comment utiliser Stable Diffusion 3.5 ?
Stable Diffusion 3.5 n’est actuellement pas supporté par Forge ou Automatic1111 et l’interface reccomandée pour l’utiliser localement est donc ComfyUI qui propose même des workflow d’exemples pour s’y mettre facilement.
Demo en ligne
Pour tester et utiliser directement SD3 en ligne, vous pouvez utiliser la demo de fal.ai ou celle de Replicate.
Si vous souhaitez installer et utiliser Stable Diffusion 3.5 avec ComfyUI, suivez ces étapes :
- Mettez à jour ComfyUI
- Téléchargez Stable Diffusion 3.5 Large ou Stable Diffusion 3.5 Large Turbo dans votre dossier models/checkpoint.
- Téléchargez clip_g.safetensors, clip_l.safetensors, et t5xxl_fp16.safetensors dans votre dossier models/clip
- Faites glisser le Workflow dans ComfyUI et générez des images !
Taille d’images
- 1:1 – 1024 x 1024
- 5:4 – 1152 x 896
- 3:2 – 1216 x 832
- 16:9 – 1344 x 768
Performances & Besoin Matériel
Stable Diffusion 3.5 requiert une configuration légèrement supérieure à SDXL. Il est donc recommandé de disposer d’une carte graphique (GPU) disposant d’au moins de 12GB de VRAM. Il n’y a pas encore beaucoup de retour de l’a communauté sur les optimisations possibles pour l’utiliser avec moins de mémoire ou sur des configuration alternative comme une carte AMD ou un processeur Apple Silicon.
Avec une NVIDIA RTX4090 (24GB), la génération d’une image avec Stable Diffusion 3.5 Large prend environ 20 secondes (20 steps).
La version Turbo est évidemment plus rapide et l’image est générée en 10 secondes avec seulement 4 steps.
Images créées avec Stable Diffusion 3.5
Voici quelques exemples d’images générées avec Stable Diffusion 3.5
Stable Diffusion 3.5 en détails
Les différentes modèles
- Stable Diffusion 3.5 Large: Il s'agit d'un modèle à 8 milliards de paramètres qui excelle dans l'adhésion rapide et la production d'images de haute qualité, ce qui le rend adapté aux utilisateurs professionnels.
Avec une résolution d’image allant jusqu’à 1 mégapixel, Il est idéal pour créer des images vivantes et des ressources numériques pour les campagnes de marketing et les cas d'utilisation similaires en entreprise
- Stable Diffusion 3.5 Large Turbo: C’est une Version distillée du modèle Large qui produit rapidement des images de haute qualité en seulement quatre étapes.
Le réduction du nombre d’étape réduit considérablement le temps de génération sans compromettre la qualité de l'image. Il est donc très efficace pour les flux de travail de génération rapide.
- Stable Diffusion 3.5 Medium: C’est version n’a que 2,5 milliards de paramètres mais avec son architecture MMDiT-X et des méthodes d'apprentissage améliorées, il peut produire efficacement des images d'une résolution comprise entre 0,25 et 2 mégapixels.
Il est conçu pour fonctionner « prêt à l'emploi » sur du matériel grand public tout en proposant un bon équilibre entre la qualité des images, la vitesse de génération et la facilité de personnalisation.
Les Forces de SD 3.5
Stable Diffusion 3.5 Large apporte plusieurs améliorations techniques à la génération d'images par IA, grâce à son architecture de 8 milliards de paramètres.
Qualité d'image supérieure
Il produit des images en 1 mégapixel d'une qualité exceptionnelle, surpassant les modèles Stable Diffusion précédents.
Meilleure adhérence aux prompts
Le modèle interprète les prompts complexes avec une plus grande précision.
Performance efficace
Il est optimisé pour fonctionner sur du matériel grand public standard
Styles polyvalents
Capable de produire une large gamme de styles visuels, de la 3D à la photographie en passant par la peinture et l'art abstrait.
Diversité et adaptation
Génère des images représentatives du monde réel, avec différents style, couleurs de peau et caractéristiques, sans nécessiter de prompts extensifs.
Licences et droits d’utilisation
Stability AI a publié Stable Diffusion 3.5 sous sa nouvelle Licence Communautaire, qui est plus permissive que lors de la publication de la précédente version.
Cette licence permet en effet une utilisation gratuite dans deux cas principaux :
- Pour la recherche et les utilisations non commerciales.
- Pour les utilisations commerciales par des individus ou des entreprises dont le chiffre d'affaires annuel est inférieur à 1 million de dollars.
La licence s’applique sans restriction sur le nombre d’images ou médias générés à l’aide de stable Diffusion 3.5
Les utilisateurs conservent également la propriété des médias qu'ils génèrent avec les modèles, sans implications restrictives de licence.
Pour les organisations dont le chiffre d'affaires annuel dépasse 1 million de dollars, une licence Enterprise payante est nécessaire pour l'utilisation commerciale et doit être demandée et négociée avec Stability AI.
Stability AI encourage également la création, la distribution et la monétisation des travaux dérivés (fine-tuning, LoRA, optimisations, applications,…), à condition que les utilisateurs fournissent une copie de la licence communautaire et affichent de manière visible "Powered by Stability AI" sur les interfaces ou la documentation associées.
Cette nouvelle approche de licence vise à soutenir la communauté open-source tout en permettant à Stability AI de monétiser l'utilisation de ses modèles par les grandes entreprises
FAQ Stable Diffusion 3.5
Stable Diffusion 3.5 est-il gratuit ?
Oui - Le modèle est distribué sous Licence Communautaire : Gratuit pour la recherche, l'utilisation non commerciale et commerciale pour les organisations ou les particuliers dont le chiffre d'affaires annuel total est inférieur à 1 million de dollars. Pour les particuliers et les organisations dont le chiffre d'affaires annuel est supérieur à 1 million de dollars, par contre, il faut contacter Stability AI pour souscrire à une licence commerciale.
Stable Diffusion 3.5 peut-il être installé localement ?
Oui, Stable Diffusion 3.5 peut être installé localement. L'installation peut être effectuée en utilisant des interfaces comme ComfyUI ou via des scripts Python. Par exemple, pour installer avec ComfyUI, il est recommandé de mettre à jour l'interface, de télécharger les poids du modèle depuis le dépôt officiel de Stability AI sur Hugging Face, puis de les placer dans le dossier approprié.
Quels sont les besoins matériels pour utiliser SD 3.5 ?
Pour utiliser Stable Diffusion 3.5, les besoins matériels varient selon le modèle choisi, mais voici les exigences générales :
- Configuration minimale
- Carte graphique : Au moins 4 Go de VRAM
- Stockage : 12 Go ou plus d'espace d'installation
- Compatible avec Windows 10/11, Linux ou Mac
- Configuration recommandée
- Carte graphique : NVIDIA RTX 3060 ou supérieure
- Stockage : SSD de 12 Go ou plus
- RAM : 12Go ou plus
- Compatible avec Windows 10/11, Linux ou Mac
Quelle est la résolution maximale de Stable Diffusion 3.5 ?
La résolution maximale des images générées par Stable Diffusion 3.5 dépend de la version du modèle utilisée :
- SD 3.5 Large & Large Tubro sont optimisés pour des utilisations professionnelles à une résolution de 1 mégapixel (1024x1024).
- SD 3.5 Medium est capable de générer des images avec des résolutions allant jusqu’à 2 mégapixels (1440x1440).
Stable Diffusion 3.5 peut-il générer des vidéos ?
Non. Stable Diffusion 3.5 est conçu pour la génération d'images à partir de descriptions textuelles et ne prend pas en charge nativement la génération de vidéos.
Cependant, certaines plateformes tierces ont intégré des modèles vidéo tels que Hunyuan et LightTricks (LTX) pour permettre la création de vidéos à partir de texte.
Stable Diffusion 3.5 peut-il générer des images photoréalistes ?
Oui, Stable Diffusion 3.5 est capable de générer des images photoréalistes. Des plateformes comme GoEnhance permettent aux utilisateurs de créer des images détaillées et photoréalistes en utilisant ce modèle.
Stable Diffusion 3.5 peut-il générer des images vectorielles ?
Stable Diffusion 3.5 génère des images matricielles (raster) et non des images vectorielles. Cependant, des outils tiers peuvent convertir ces images en formats vectoriels.
Stable Diffusion 3.5 peut-il générer des images NSFW ?
La capacité de Stable Diffusion 3.5 à générer des images NSFW (Not Safe For Work) dépend des restrictions imposées par la plateforme ou l'interface utilisée. Certaines interfaces publiques peuvent appliquer des filtres pour empêcher la génération de contenu explicite.
Par contre, les versions disponibles au téléchargement pour une installation locales sont des versions non censurées permettant la création d'images NSFW.
