OBJECTIFS DE LA FORMATION
Cette formation de 5 jours est une initiation avancée et intensive aux outil IA génératif et correctif d’images open-source, sous ComfyUI et avec InvokeAI.
ComfyUI est la plateforme IA d’outils génératifs open source le plus puissant et flexible existant, et qui nécessite un apprentissage assez long.
En 5 jours on pourra parvenir à un bon niveau de compréhension et de maîtrise de ComfyUI, pour créer et transformer des images fixes :
- découvrir ComfyUI, sous ses différentes formes : SDXL, Flux.
- maîtriser la génération d’images avec ComfyUI, outil principal, à l’interface nodale complexe mais souple
- développer des prompts sophistiqués, les mélanger, utiliser des librairies et styles
- utiliser InvokeAI, outil complémentaire parfait pour les retouches et composites complexes et créatifs
- utiliser ControlNet pour les poses et compositions et Ipadapter pour les styles
- utiliser PulID pour garder la consistance d’un personnage d’une génération à l’autre
- Créer un Lora pour développer un style d’image ou générer des personnages consistants
La formation croisera prompts de textes imaginaires, références d’images réelles, stylisations, dessins et rendus non réalistes…
NOTA BENE : cette formation nécessite d’avoir déjà une pratique d’IA génératives (Dall-E, MidJourney…), idéalement de connaître des applications à interface nodale, ou au minimum d’être très l’aise avec les outils informatiques !
Objectifs de la formation :
- Découvrir les principes de l’IA générative avec ComfyUI
- Sélectionner les outils adaptés à un projet : SDXL, Flux, InvokeAI, ControlNet, PullD…
- Installer et paramétrer ComfyUI, l’interface nodale
- Ecrire des prompts, de manière avancée
- Agrandir des images avec différentes méthodes
- Modifier, transformer une image
- Générer une image depuis un dessin
- Gérer des poses avec OpenPose
- Comprendre et utiliser Depth, Canny, Scribble
- Gérer ControlNet de manière avancée
- Savoir gérer la stylisation avec les Ipadapter
- Utiliser InvokeAI, l’outil parfait pour mieux contrôler ses créations
- Utiliser l’inpaint pour modifier profondément une image, réelle ou créée par IA
- Faire de l’Outpaint pour agrandir une image en créant de la matière
- Créer des composites complexes avec photobashing
- Intégrer des objets ou des personnages dans une image IA en respectant le style
- Réaliser des packshots automatiques et évolutifs de produits, parfums, voitures…
- Evaluer et réviser des contenus générés
- Evaluer les IA et leurs résultats en terme de biais, éthiques, écologiques et règlementaires
INSCRIPTION PAR LE CPF ? inscrivez-vous directement sur la plateforme MonCompteFormation !!!!
FORMATEUR Lionel Vicidomini, motion designer, graphiste 3D, enseignant et formateur, créateur bien connu de nombreux tutos de référence (sur Blender, Cinema 4D, ComfyUI…)
Présentation de l'outil
ComfyUI est un outil open source et gratuit qui permet de générer des images à partir d’un texte descriptif (un modèle « text2image », comme par exemple les outils génératifs Dall-E ou MidJourney).
ComfyUI est actuellement le meilleur outil Open Source… Contrairement à ses concurrents, ComfyUI est libre et gratuit. N’importe qui peut le faire tourner en local sur son PC ou l’héberger sur un serveur web. Comme le code source est accessible, on peut modifier l’outil et l’adapter à ses besoins. Les concurrents MidJourney et Dall-E sont payants et ne peuvent pas fonctionner en local.
On étudiera ComfyUI sous différentes versions/interfaces, accompagné d’outils, scripts, complémentaires.
ComfyUI est une interface nodale, complexe mais très flexible pour générer des images. On construit des images en chaînant différents blocs (des nodes / nœuds). C’est l’interface la plus populaire et la plus puissante
InvokeAI ressemble plus à un mini-Photoshop. Nettement plus simple à utiliser que ComfyUI mais malgré tout extrêmement capable, il brille par sa capacité à permettre de modifier manuellement l’image générée par IA. On peut facilement faire du photobashing, étendre des générations, transformer des crayonnés en photo, puis les reprendre pour changer leur style etc.
Les LORA sont des mini-modèles qui se patchent au modèle principal et permettent d’orienter la génération dans une direction précise. On peut obtenir ainsi des styles de peintures, de dessin, de photo, ou alors ajouter des détails dans une image, ou obtenir des personnages consistants d’une génération à une autre etc…
ControlNet est une technique qui permet de modifier le bruit initial, permettant par exemple de préciser des poses humaines, copier une composition d’une autre image, générer une image similaire,…
Ipadapter permet de « patcher » le modèle IA pour copier le style d’une image sur une nouvelle génération. On appelle ça également le « visual prompting » qui permet de créer des variations d’image, ou des fusions créatives de style.
AnimateDiff est un module d’animation par prompt des images/modèles pour produire des vidéos.
CONTENU COMPLET DE LA FORMATION
COMPRENDRE L’IA GENERATIVE AVEC COMFY UI
Installation de ComfyUI
Pourquoi Comfy UI
Installation et configuration du manager
Nodes custom les plus fréquents
Découverte et prise en main de l’interface
Premières générations d’images
LE PROMPT / PRODUIRE DES CONTENUS AVEC DES REQUETES COMPLEXES : DIALOGUER AVEC UNE IA GENERATIVE
Comment écrire un prompt
Le checkpoint : utilisation de CivitAI pour découvrir et utiliser d’autres modèles
Concept du Token
Seed et Steps
Le Sampler
CFG
Emphase positive et négative
S’aider d’autres IA pour écrire des prompts
Récupérer un prompt depuis une image
Concaténation.
Combine.
Textual inversion
Installer des embeddings
AGRANDIR DES IMAGES
Upscaler
Latent space
High res fix
Ultimate Upscale
Combinaison de plusieurs méthodes
GENERATION DEPUIS UNE IMAGE OU UN DESSIN
Améliorer une image créée dans Txt2Image
Réparation de défauts avec Inpaint
Ajout de détails avec Sketch et Inpaint Sketch
Depuis une image externe
Ajout de détails
Changement de style
Agrandir une image
Loopback : itérer des créations depuis un croquis ou crayonnage
CONTROL NET
Qu’est-ce que ControlNet ?
OpenPose
Récupérer des poses de photos ou d’image
Récupérer des poses d’autres logiciels ou source
Créer sa pose ou la modifier avec l’openpose editor
Créer une pose depuis un autre logiciel
Scribble, SoftEdge, Canny et Lineart
Transformer un dessin en photo
Transformer une photo en dessin
Récupérer les expressions d’un visage
Depth
Récupérer un contour, une forme
Donner vie à un paysage
Seg
Changer un paysage
Changer un intérieur
Rajouter des détails
Contrôler totalement les images grâce aux masques
Ipadapter
Récupérer un personnage précis pour en faire des variations
Pour varier les angles de vue
Style
Appliquer le style d’une image sur une autre image
Créer des styles hybrides
Appliquer la palette chromatique d’une image sur une autre
Combiner plusieurs ControlNet
Pour des poses et expressions précises
Faire du photobashing
INVOKEAI
InvokeAI, l’outil parfait pour intervenir manuellement dans les créations IA.
Composite complexe en utilisant le photobashing
Extension de décor avec l’outpaint
Ajout de personnages ou objets à une image en respectant le style
Enrichissement de détail en esquissant des contours
CREER SON PROPRE LORA
Pour créer un style particulier d’image
Pour obtenir des personnages consistants d’une génération à une autre
Produire des contenus, les évaluer, réviser et améliorer prompts et réglages.
Evaluer et adapter la méthodologie.
Maximiser qualité et pertinence des productions.
Pour les stagiaires participant à la formation par le biais CPF et avec la certification CertifiAG, des moments spécifiques permettront la préparation des livrables attendus.
Les exercices pratiques, ateliers personnels notamment, seront l’occasion de flécher les compétences à valider et permettront de préparer au mieux le passage de la certification.
ACCOMPAGNEMENT PERSONNALISE
En cours de formation (avant dernier jour en général), un entretien individuel est l’occasion de faire le point sur l’atteinte partielle des objectifs de chaque stagiaire, des lacunes possibles et objectifs ou projets souhaités, leur mise en œuvre possible dans le cadre de la formation.
L’IA, BIAIS, DROITS, CONFORMITE REGLEMENTAIRE
Questions des droits (les milliards d’images référencées, digérées… risques encourus ? peut-on identifier des sources ?) et droits en amont (mes créations m’appartiennent-elles ? à des sociétés d’IA ?)
Problématiques des biais des IA génératives.
Ethique et éco-responsabilité : enjeux sociaux et écologiques, empreinte carbone. Comparaisons entre IA générative. Faire du prompt « raisonnable ».
Connaissance de l’IA act et des règles/lois en vigueur.
Problématiques de confidentialité : entraînement de modèles, partage de créations et sources de clients. Quelle modalités techniques et quelles IA génératives protègent les sources et droits (droits d’auteurs, droits commerciaux) ?
CONDITIONS DE LA FORMATION
MOYENS TECHNIQUES
6 stagiaires maximum. 1 station Windows avec processeur et carte graphique puissants, 64 Go de RAM, écran 27 pouces. Tablette graphique.
PARTICIPANTS
Graphistes, responsables communication, truquistes, photographes, artistes, réalisateurs.rices, DA, technicien.ne.s, toute personne ayant besoin de se former à la génération et transformation d'images avec l'outil IA opensource non censuré, ComfyUI.
NIVEAU REQUIS
Bonne connaissance de l’informatique. Notions de graphisme (profondeur d’image, pixel, formats, ratios...). Culture artistique. Pratique d'IA génératives (Midjourney, DallE...). Idéalement, pratique d'un outil nodal (3D, VFX)... Pratique régulière d'un outil multimédia. Entretien pédagogique.
Prérequis supplémentaires en cas de financement "CPF" (certification CertifiAG) : Bac+2 ou niveau équivalent, expérience professionnelle en image de 6 mois minimum
ACCESSIBILITÉ
Nos formations sont accessibles et aménageables pour les personnes en situation de handicap. Fauteuils roulants autorisés en largeur maxi 70cm. Pour tout handicap, auditif, visuel ou autre, merci de nous contacter pour les aménagements possibles.
VALIDATION DES ACQUIS
Contrôle continu tout au long de la formation, exercé par le formateur et supervisé par la responsable pédagogique. Délivrance d'un Certificat de Validation des Acquis de Formation. (en savoir plus)
En cas de financement « CPF », cette formation inclut la préparation et le paiement du test de certification : « Produire et réviser du contenu professionnel multimédia en utilisant les outils d’Intelligence Artificielle Générative (IAG) de façon responsable »
Cette certification est enregistrée au Répertoire spécifique de France Compétences : RS6891 (Certificateur : CERTIFOPAC / 28.11.2024 – 28.11.2027).
C’est l’organisme certificateur, Certifopac, qui évaluera les compétences acquises par les candidats. Afin de valider la certification, les apprenants doivent démontrer leur capacité à mettre en application les compétences du référentiel de certification, à savoir :
- Choix des outils IAG : capacité à sélectionner les technologies pertinentes en fonction des besoins
- Interaction avec l’IAG : aptitude à dialoguer efficacement avec l’IA pour obtenir des résultats optimaux
- Création de contenus : maîtrise des méthodes de production adaptées aux objectifs métier
- Optimisation des contenus : application des techniques d’amélioration des résultats générés par l’IA
- Considérations éthiques et réglementaires : prise en compte des biais, de la confidentialité et de la conformité légale pour concevoir sa solution métier
- Plus d’informations sur le référentiel de compétences ici : https://drive.google.com/file/d/1f3r0QGgvu28sZ-1x3Quu2SJbz4B3gA3-/view
Le processus d’évaluation se déroule en 2 étapes :
- Une épreuve écrite : Rédaction d’un rapport, de 10 pages maximum, détaillant un cas pratique, réel ou fictif, en lien avec les outils d’IAG. Démonstration des compétences C1 à C4. Dépôt du rapport via WEDOF au moins 15 jours avant la soutenance
- Une épreuve orale : Présentation de 20 minutes en visioconférence devant un jury. Temps d’exposé : 10 minutes pour présenter les résultats obtenus. Questions du jury : 10 minutes pour valider la compétence C5 Le Bahut se charge de votre inscription à la certification auprès de Certifopac.
- Le coût d’un passage est inclus dans le tarif de la formation.
- Pour en savoir plus sur les modalités d’inscription, d’évaluation et de certification : https://certifopac.fr/certifiag/candidature/
MODALITES D'ORGANISATION
Formation présentielle, en nos locaux, 13 rue Desargues, 75011 Paris.
MOYENS ET MODALITES PEDAGOGIQUES
Une salle de formation avec tableau blanc, un poste informatique pour chaque apprenant, un poste informatique vidéo-projeté pour les formateurs, avec accès internet et imprimante partagée. Alternance de séquences théoriques et d'exercices d'application réelle. Les exercices sont réalisés sous la supervision des formateurs, dans une logique d'apprentissage des compétences et d'autonomie progressive des apprenants. Des exercices plus longs et synthétiques permettent de reprendre un ensemble de compétences dans des cas pratiques types des métiers et compétences concernés, et s'assurer de leur acquisition par les apprenants.
SUPPORT DE COURS
1 mémo sur Stable Diffusion.
SUIVI DE STAGE
Gratuit par email
RESP. PÉDAGOGIQUE
James Simon
FORMATEUR
Professionnel en activité, expert reconnu dans son domaine, animant régulièrement des formations.
LABELS QUALITÉS
Centre certifié Qualiopi (certification nationale) / référencé Data-Dock / centre certifié Blackmagic Design / centre de test Certiport
