Formation L’IA pour les VFX, modèles IA et workflows Nuke et Davinci Fusion

OBJECTIFS DE LA FORMATION

L’IA est entrée dans les workflows VFX, mais quelle est sa part d’utilité réelle ? Qu’apporte-t-elle de vraiment révolutionnaire aux techniques existantes ?

Cette formation de 5 jours propose une utilisation dirigée d’une sélection de modèles choisis pour leur efficacité (Nano Banana, Seedance, LTX, Kling,…).

On étudiera leur intégration au sein de workflows VFX existants, sans quitter les deux logiciels références de l’industrie : Nuke et DaVinci Fusion.

Ce stage fait ainsi le pari que la connaissance empirique des modèles IA Générative importe beaucoup plus que l’environnement de travail permettant de les mettre en oeuvre – et s’appuie donc sur des solutions qui permettent à des graphistes / truquistes de conserver leurs habitudes de travail pour se concentrer sur le noyau dur : choix et application de LLM et ML.

 

OBJECTIFS DE LA FORMATION L’IA POUR LES VFX

Objectifs techniques : 

• intégrer des outils IA établis pour accélérer des demandes VFX courantes
• organiser un découpage séquentiel du workflow mélangeant outils traditionnels et IA
• tester et évaluer ce qui fonctionne et être en mesure d’estimer le gain de temps réel
• tester et évaluer les possibilités de la génération avancée et ses complexités

Objectifs artistiques : 

• développer sa capacité à analyser ce qui ne marche pas dans la production IA générative, dans le contexte d’un cahier des charges précis : long-métrage, publicité
• anticiper les demandes de retouches artistiques du client en envisageant des plans B et des moyens de contrôle
• développer des compétences de direction artistique face à des clients qui pensent pouvoir se passer des infographistes grâce à l’IA

 

FORMATEUR PRINCIPAL Raphaël Thibault, graphiste, superviseur VFX, formateur expert des workflows VFX.

Présentation de l'outil

NUKE Outil référence de compositing nodal 2D et 3D pour les VFX.

DAVINCI  RESOLVE FUSION Solution complète de VFX intrégrée à DaVinci Resolve (montage, étalonnage, mixage, sorties,…)

NANO BANANA PRO Modèle de génération et d’édition d’images basé sur Gemini. Il se distingue par sa précision, sa compréhension des consignes complexes et sa polyvalence pour les usages professionnels.

SEEDANCE modèle de génération vidéo de ByteDance, capable de créer des séquences à partir de textes, d’images et d’autres références multimodales.

LTX outil de création vidéo par IA qui transforme un texte ou une image en séquence vidéo, avec des fonctions de storyboard et de montage.

KLING Plateforme multimodale capable de générer images et vidéos à partir de texte. Elle offre une excellente cohérence visuelle et un contrôle avancé de la mise en scène.

FLUX famille de modèles d’IA conçus pour générer et modifier des images à partir de descriptions textuelles.

CHAT GPT Assistant conversationnel de référence, utilisé pour la recherche d’informations, l’idéation, la rédaction de contenus et la création de prompts.

WAN Modèle vidéo open source offrant une grande liberté créative, un contrôle poussé de la caméra et une gestion native du son.

 

 

CONTENU COMPLET DE LA FORMATION

Introduction aux solutions techniques choisies, historique des modèles.

Installation, création de comptes, démarrage.

 

CAS CONCRET 1 : LE DMP (DIGITAL MATTE PAINTING)  

Le métier de matte Painter est sans doute le plus impacté par l’IA Gen.

Ce cas concret visera à apprendre à combiner les outils classiques et les outils IA Gen (TextToImage, ImageToImage, ImageEdit ) pour produire de la matière servant à assembler des décors en matte painting et à les intégrer dans des techniques classiques de projection.

Comparaison de différents modèles : GROK, ChatGPT, Nano Banana 2 et pro, Flux…

 

 

CAS CONCRET 2 : INCRUSTATION  

Peut-on se passer de keyer ? Et pour quel gain ?

Dans ce cas concret on prendra 2 exemples classiques d’intégration, permettant de comparer 3 wokrflows :

• un workflow traditionnel
• un workflow Full IA simple (AI gen général ou Lora dédié )
• un workflow hybride

CAS CONCRET 3 : GENERATION AOVs SANS RENDU 3D  

Les IA Gen permettent de développer les stratégies typiques de compositing à partir de rendus 3D, mais avec n’importe quelle source vidéo.

On étudiera la génération de passes techniques ( Zdepth, Vector, Normales, Mattes ) et on comparera différents outils du marché (Segment Anything / SAM / ViMATTE / la roto assistée par exemple).

Intégration dans le workflow de compositing vu précédemment et cas concrets.

 

 

CAS CONCRET 4 : CREATURE EN CG FULL IA  

On affrontera ici l’un des enjeux VFX les plus difficiles : concevoir, produire et intégrer une créature photoréaliste animée dans des plans filmés.

Combinaison de plusieurs process IA dans un workflow séquentiel visant à reproduire les étapes de pré-production habituels d’un personnage ou avatar : pré-concept à la main ou à partir de recherches compilées par IA, concept avancé dans Nano banana, grox ou Flux, recherche de variations)

Production de l’asset 2D final, et préparation des déclinaisons nécessaires à l’animation

Animation du personnage : à l’aide des moteurs les plus avancés du moment (Kling, Seedance,…) on fera animer notre personnage en utilisant des gyides pour garder le contrôle artistique sur le mouvement (caméra, charactérisation de l’animation)

Contrôle VS Qualité : le compromis du workflow IA générative

Comparaison de coûts et de résultats

 

 

CAS CONCRET 5 : TRANSFERT DE STYLE  

Plus proche cette fois-ci du cinéma d’animation et du Motion Design, cet exercice tentera de produire un look non-photoréaliste dans la veine de directions artistiques récentes à fort succès (Spider-Man, Arcane).

On approchera les Lora au sein de modèle gratuits et payants (LTX, Seedance, Wan… ) mais surtout l’entraînement de notre propre stylisation au travers du Machine learning, en s’appuyant sur la dernière version de Foundry Copycat / BigCat.

 

CONDITIONS DE LA FORMATION

MOYENS TECHNIQUES

6 stagiaires maximum. 1 station de compositing par stagiaire, avec écran 27 pouces, licences DaVinci Studio / Fusion, Nuke, comptes et crédits IA générative (Seedance, wan, LTX, Nano banana, Kling, ou toute autre IA générative pertinente).

PARTICIPANTS

Graphistes compositing, DA, superviseurs VFX, directeurs techniques, réalisateurs... toute personne en charge de VFX voulant comprendre l'impact des IA génératives sur les VFX 2D/3D et les workflows et métiers en évolution.

NIVEAU REQUIS

Pratique régulière des VFX, pratique régulière d'au moins DaVinci Fusion ou Nuke. Entretien pédagogique

ACCESSIBILITÉ

Nos formations sont accessibles et aménageables pour les personnes en situation de handicap. Fauteuils roulants autorisés en largeur maxi 70cm. Pour tout handicap, auditif, visuel ou autre, merci de nous contacter pour les aménagements possibles.

MODALITES D'ORGANISATION

Formation présentielle, en nos locaux, 13 rue Desargues, 75011 Paris.

MOYENS ET MODALITES PEDAGOGIQUES

Une salle de formation avec tableau blanc, un poste informatique pour chaque apprenant, un poste informatique vidéo-projeté pour les formateurs, avec accès internet et imprimante partagée. Alternance de séquences théoriques et d'exercices d'application réelle. Les exercices sont réalisés sous la supervision des formateurs, dans une logique d'apprentissage des compétences et d'autonomie progressive des apprenants. Des exercices plus longs et synthétiques permettent de reprendre un ensemble de compétences dans des cas pratiques types des métiers et compétences concernés, et s'assurer de leur acquisition par les apprenants.

SUPPORT DE COURS

SUIVI DE STAGE

Gratuit par email

RESP. PÉDAGOGIQUE

James Simon

FORMATEUR

Professionnel en activité, expert reconnu dans son domaine, animant régulièrement des formations.

LABELS QUALITÉS

Centre certifié Qualiopi (certification nationale) / certifié ISQ-OPQF / référencé Data-Dock / centre certifié Adobe / Maxon / Blackmagic Design / centre de test Certiport