Stability AI a deux manières d’annoncer ses nouvelles : soit ils font un communiqué de presse et un articles d’actualité sur leur blog. Soit ils laissent Emad Mostaque poster l’info sur 𝕏…
C’est ce qui est arrivé hier avec ce post à propos de Stable Vidéo Diffusion
C’est à la fois la confirmation que Stability travaille sur la version 2 de son IA de génération de vidéo et une annonce intéressante pour tous ceux qui n’ont pas encore pu ou su tester Stable Video Diffusion et le faire fonctionner sur leur machine.
En effet, le site web de StableVideo.com qui était jusque là en Beta privée est désormais ouvert à tous et utilisable gratuitement pour créer des vidéos en ligne.
Cette double annonce fait évidemment suite à l’annonce de Sora par OpenAI un peu plus tôt dans la semaine.
Mais Emad Monasque fait aussi le lien avec l’arrivée imminente de Stable Diffusion 3.0, la nouvelle génération d’IA de Stability qui ferait donc peut-être plus que la seule génération d’images 👀.
Dans tous les cas, le site de StableVideo.com offre désormais une solution gratuite et facile à utiliser pour créer des courtes vidéos avec l’IA de Stability AI.
Comment utiliser StableVideo.com ?
Le site de Stable Vidéo est relativement simple à utiliser et permet de créer des vidéos à partir d’une image ou d’une description texte sous forme de prompt. Même si il est libre d’accès et qu’il peut être utilisé gratuitement, l’inscription y est nécessaire pour pouvoir génerer des vidéos.
Se créer un compte Stable Video
- Rendez-vous sur la page de connexion sur le site de StableVideo.com
- Cliquez sur Sign up en bas du formulaire pour créer votre accès.
- Indiquez votre emails
- Choisissez un mot de passe
- Ca y’est, vous êtes inscrits.
Générer des vidéos
Créer une vidéos partir d’une image
C’est la fonctionnalité de base de Stable Vidéo telle que présentée à la sortie du modèle. Elle permet d’animer une image existante - par exemple une image créée avec SDXL ou Midjourney.
Voici les étapes à suivre pour créer une vidéo à partir d’une image :
- Choisissez Image en haut de l’interface.
- Télécharger votre image en la déposant dans la zone prévue à cet effet.
- Une fois l’image téléchargée, vous pouvez choisir un mouvement de caméra.
- Cliquez ensuite sur Generate.
La génération de vidéo pouvant prendre plusieurs minutes, StableVideo vous propose de voter pour choisir la vidéo que vous préférez dans des paires de vidéos - Ces votes devraient permettre à Stability d’évaluer les vidéos générées en vue d’améliorer ses modèle.
Après quelques minutes, la vidéo est prête et peut être téléchargée :
Créer une vidéo à partir d’un texte
StableVideo.com vous permet également de créer une vidéo à parti d’un texte :
- Choisissez Text en haut de l’interface
- Ecrivez votre prompt.
- Vous pouvez choisir un Style pré-configuré pour compléter votre prompt.
- Cliquez sur Generate pour créer 4 images à partir de votre prompt.
- Choisissez une image qui servira d’image de départ pour la vidéo.
- Choisissez un mouvement de caméra.
- Cliquez sur le bouton bleu Proceed.
Après quelques minutes de calcul, la vidéo est prête et peut être téléchargée :
Mouvements de caméra
La nouvelle fonctionnalité de Camera Motions, encore expérimentale, permet d’indiquer un mouvement de caméra souhaité pour votre animation :
- Camera Locked : Fixe la caméra en place, encourageant le mouvement du sujet.
- Camera Shake : Ajoute des mouvements aléatoires à la caméra pour des vidéos dynamiques et vivantes.
- Tilt Up / Down : Incline la caméra vers le haut ou le bas pour une perspective différente.
- Orbit : Fait circuler la caméra autour du point focal, idéal pour les premiers plans marquants ou les effets de bokeh.
- Pan Left / Right : Déplace la caméra horizontalement pour une vue panoramique.
- Zoom In / Out : Ajuste la distance de la caméra pour des prises de vue plus rapprochées ou plus larges.
- Dolly In / Out : Déplace la caméra vers l'avant ou l'arrière.
- Move Up / Down : Déplace la caméra verticalement pour un point de vue élevé ou abaissé.
(Certains mouvements ne sont pas encore disponibles mais le seront prochainement)
Paramètres avancés
En cliquant sur la petite îcones de paramètres Advanced en bas à gauche de l’interface, vous avez accès aux paramètres avancées de génération pour Stable Video :
- Seed vous permet de garder un Seed unique pour la génération qui pourra être utilisé pour créer des vidéos plus ou moins proches de celle obtenue avec le seed.
- Steps vous permet d’indiquer un nombre d’étape d’interférence à executer pour la génération - plus il y a d’étapes, meilleure sera la qualité - au prix d’un calcul plus long.
- Motion Strenght permet d’influencer sur la quantité de mouvements à ajouter dans la vidéo. A priori, augmenter ce nombre favorise les grands mouvements de caméra plus que le mouvement des sujets.
Crédits, limites et prix
Pour cette phase d’apprentissage, StableVideo.com est gratuit - il suffit de s’y créer un compte pour pouvoir générer des vidéos.
Vous ne pourrez cependant générer des vidéos de manière illimitée. Vous disposez d’une limite quotidienne de 150 crédits.
Actuellement, un une vidéo coûte 10 crédits, cela signifie que vous pouvez créer maximum 15 vidéos par jour au maximum en version gratuite. Une vidéo en text-to-video, coûte cependant un crédit de plus pour la génération des images (soit 11 crédits en tout). En version gratuite, vous ne pourrez donc pas générer plus de 9 vidéos par jour si vous utiliser la génération à partir de prompt.
Il est également possible d’acheter des crédits supplémentaires au prix de 10$ les 500 crédit (ou 50$ les 3000 crédits). Ces crédits s’ajoutent en plus de vos crédits gratuits et peuvent être utilisés quand vous le souhaitez, sans limite de temps.
Ecrit par