Diffusae 2
Redessinez votre footage avec Stable Diffusion et des prompts texte, directement dans votre logiciel de montage.
1. Description
Diffusae 2 intègre l’IA générative à votre application hôte. Il prend chaque frame du calque et la redessine à partir de vos prompts texte (image to image): vous pouvez ainsi changer le style d’un footage, transformer des croquis en images ou modifier un plan avec une simple instruction.
Il est livré avec plus de dix modèles, que vous téléchargez depuis l’effet: Stable Diffusion 1.5 et 2.1, un Stable Diffusion 2 sensible à la profondeur, des versions rapides LCM et Turbo, un modèle basé sur SDXL, un modèle de cohérence temporelle, Instruct Pix2Pix, Illusion Diffusion, ControlNet Scribble et Canny, ainsi que deux modèles FLUX. Vous pouvez aussi ajouter vos propres modèles checkpoint depuis Civitai.
Mélangez plusieurs prompts, chacun avec sa propre pondération, excluez des éléments avec un prompt négatif, et choisissez avec Strength à quel point le résultat s’éloigne de l’original. Une valeur de Seed fixe rend le résultat reproductible.
Configuration requise
- Mac: Apple Silicon ou Intel. Utilise le GPU (Metal) s’il est disponible.
- Windows 64 bits: utilise un GPU NVIDIA (CUDA) s’il est disponible, sinon le CPU, très lent pour la diffusion.
- Une connexion Internet pour télécharger les modèles. Chaque modèle pèse environ 5.5 à 7.5 GB; les modèles FLUX pèsent environ 17 GB (FLUX Mini) et 24 GB (FLUX.2 Klein).
2. Installation
2a. Baskl installer (toutes les applications hôtes)
Tous les plugins Baskl s’installent avec le Baskl installer. Il configure AI Machine, le moteur local sur lequel fonctionnent les plugins, et place Diffusae 2 au bon endroit pour After Effects, Premiere Pro, les applications hôtes OFX (DaVinci Resolve, Nuke) et, sur Mac, Final Cut Pro. Fermez vos applications hôtes avant de le lancer.
macOS
- Cliquez sur Télécharger sur baskl.ai, décompressez
Baskl.Installer.zipet ouvrezMac/Baskl Installer.app. Il vous faut un Mac Apple Silicon; sur les Mac Intel, l’installation s’interrompt. - Si macOS le demande, confirmez que vous voulez ouvrir une app téléchargée sur Internet, puis saisissez le mot de passe de votre Mac pour que le programme d’installation puisse écrire dans les dossiers système des plugins.
- Cliquez sur Let's Get Started, sélectionnez Diffusae 2 dans la liste des plugins et cliquez sur Install. La première installation télécharge aussi AI Machine: comptez quelques minutes.
- Quand Installation Complete s’affiche, redémarrez votre application hôte. L’effet se trouve dans la catégorie Baskl.
Windows
- Cliquez sur Télécharger sur baskl.ai, décompressez
Baskl.Installer.zipet lancezWindows\Baskl Installer.exe. - Cliquez sur Oui quand Windows vous demande d’autoriser l’application à apporter des modifications. Le programme d’installation nécessite des droits d’administrateur.
- Cliquez sur Let's Get Started, sélectionnez Diffusae 2 dans la liste des plugins et cliquez sur Install. Avec une carte NVIDIA, le programme d’installation choisit automatiquement la version CUDA correspondante. La première installation télécharge aussi AI Machine: comptez quelques minutes.
- Quand Installation Complete s’affiche, redémarrez votre application hôte. L’effet se trouve dans la catégorie Baskl.
- Le programme d’installation ne télécharge aucun modèle de diffusion. Après l’installation, cliquez sur Download Models dans l’effet et téléchargez les modèles de votre choix. Les téléchargements se font dans une fenêtre à part, avec une barre de progression et un bouton Cancel: votre application hôte reste donc utilisable.
- Vous aviez déjà une ancienne version de Diffusae 2? Au premier rendu, les modèles de l’installation précédente (y compris les modèles Civitai personnalisés) sont déplacés automatiquement: pas besoin de les télécharger à nouveau.
- FLUX.2 Klein nécessite une installation Baskl à jour. S’il ne se charge pas, mettez à jour avec la dernière version du Baskl Installer.
Activer votre licence
- After Effects / Premiere Pro: dans After Effects, cliquez sur Register en haut de l’effet, dans le panneau Options d’effet (à côté de Reset), collez votre clé de licence et cliquez sur Activate. Dans Premiere Pro, cliquez sur le petit bouton à icône en haut à droite de l’effet, dans le panneau Options d’effet, pour ouvrir la même boîte de dialogue. La licence est enregistrée pour tout l’ordinateur: l’activer dans l’une des deux applications suffit pour l’autre.
- Final Cut Pro (Mac): sélectionnez l’effet dans le visualiseur, cliquez sur Register dans l’inspecteur vidéo, puis saisissez votre clé de licence dans la fenêtre qui s’ouvre. L’effet se trouve sous Baskl dans le navigateur d’effets. La première fois que Final Cut le charge, laissez-lui quelques secondes pour démarrer.
- Resolve / Nuke: cliquez sur Register en haut des commandes de l’effet, collez votre clé de licence et validez. Une fois l’effet activé, le bouton affiche License Info.
- Où trouver votre clé: si vous avez acheté sur baskl.ai, elle figure dans votre courriel d’achat et sous Compte → Mes licences, avec un bouton Copier. Si vous avez acheté sur aescripts + aeplugins, activez le plugin avec l’application aescripts + aeplugins manager, ou collez la clé de votre compte aescripts dans la même boîte de dialogue Register.
- Sans licence, Diffusae 2 fonctionne en version d’essai: tout est disponible, mais les rendus portent un filigrane tant que vous n’avez pas activé votre licence. L’activation nécessite une connexion Internet, et chaque clé fonctionne sur un nombre limité d’ordinateurs (indiqué sous Mes licences).
3. Paramètres
Model
- Model
-
Cliquez sur Choose Model pour choisir le modèle. Le paramètre affiche le nom du modèle actuel; le modèle par défaut est SD-Turbo. Les modèles qui ne sont pas encore téléchargés portent la mention Install first. Les modèles Civitai personnalisés apparaissent en bas de la liste.
- Download Models
-
Ouvre la fenêtre des modèles: téléchargez, réinstallez ou supprimez les modèles inclus, ouvrez le dossier des modèles et téléchargez des modèles Checkpoint personnalisés depuis Civitai par id, nom ou URL (une clé API Civitai facultative peut être saisie pour les modèles réservés aux utilisateurs connectés).
Prompts
- Prompt
-
Cliquez sur Edit Prompts pour décrire ce que vous voulez. Ajoutez un ou plusieurs prompts, chacun avec une valeur Strength: les prompts sont mélangés selon leurs forces relatives (deux prompts à 100 et 50 pèsent 2 pour 1). Les modèles FLUX concatènent les prompts et ignorent les forces.
- Negative Prompt
-
Cliquez sur Edit Negative Prompt pour décrire ce que vous voulez éviter. Utilisé uniquement quand Guidance Scale est supérieur à 1; les modèles rapides LCM et Turbo, Instruct Pix2Pix, les modèles ControlNet, Illusion Diffusion et FLUX l’ignorent.
Generation
- Strength
-
À quel point le résultat s’éloigne de la frame d’origine, de 0% à 100% (70% par défaut). Une valeur faible garde le footage, une valeur élevée suit le prompt. Non utilisé par Instruct Pix2Pix, les modèles ControlNet ou Illusion Diffusion.
- Quality
-
Nombre d’étapes de diffusion: plus il y a d’étapes, plus il y a de détails, mais plus le rendu est lent. Le nombre d’étapes dépend du modèle (par exemple 14, 20 et 30 étapes pour les modèles Stable Diffusion standard, beaucoup moins pour les modèles rapides LCM, Turbo et FLUX).
- Custom Steps
-
Nombre d’étapes quand Quality est réglé sur Custom, de 1 à 49 (20 par défaut).
- Seed (-1 = random)
-
Bruit de départ de la génération (42 par défaut). Gardez une valeur fixe pour des résultats reproductibles et plus stables; -1 tire une nouvelle seed au hasard à chaque rendu.
ControlNet
Paramètres utilisés par Illusion Diffusion.
- ControlNet Strength
-
Influence de l’image de structure sur le résultat, de 0% à 200% (150% par défaut).
- Guidance Start
-
Moment de la génération, de 0% à 100%, où la structure commence à la guider (0% par défaut).
- Guidance End
-
Moment de la génération, de 0% à 100%, où la structure cesse de la guider (100% par défaut). Réduisez cette valeur pour laisser au modèle plus de liberté dans les derniers détails.
Advanced
- Guidance Scale
-
À quel point le modèle suit le prompt, de 0 à 50 (7.5 par défaut). Une valeur plus élevée colle davantage au prompt. Les modèles rapides LCM et Turbo l’ignorent.
- Image Guidance Scale
-
Instruct Pix2Pix uniquement: à quel point le résultat reste proche de la frame d’origine, de 0 à 10 (1.35 par défaut). Une valeur plus élevée garde davantage l’original.
- Scheduler
-
La méthode d’échantillonnage. Laissez sur Auto, sauf si vous voulez une méthode précise. Les modèles FLUX utilisent la leur et ignorent ce paramètre.
- Internal Render Size
-
Résolution à laquelle travaille le modèle. Le résultat est ramené à la taille du calque.
- Resize Method
-
Comment la frame est adaptée à Internal Render Size. Non utilisé avec Same as Layer Size.