Les images en mouvement

« De quelle manière pouvons-nous appréhender la mutation
actuelle opérée par les intelligences artificielles dans le domaine
de l’image ? Quels nouveaux types d’images composites sont
produits par les outils numériques ? Cette discussion entre
Grégory Chatonsky, Christian Joschke et Antonio Somaini
explore ces questions en les inscrivant dans une histoire longue
des images composées d’images. Alors que les images générées
par les intelligences artificielles rappellent des principes
observés par le passé, tels que la photographie composite, les
combinaisons d’impressions ou le photomontage, elles s’en
éloignent néanmoins en raison de leur fonctionnement
purement inductif et statistique. Le fonctionnement de ces
logiciels basés sur l’apprentissage approfondi contribue à créer
un “espace latent”, un espace virtuel qui accumule toutes les
images du passé, du présent et de l’avenir sous forme de calculs.
Cela modifie toute la relation avec le réalisme photographique,
ouvrant la voie à ce que Grégory Chatonsky a appelé le
“disréalisme”. »
Présentation de l’entretien sur la chaîne Youtube des Beaux-Arts
de Paris.
Voir l’entretien en ligne

CHAAPPIE (en cours d’élaboration)

Notion : Outil, Espace / Durée : 2/ Difficulté : 3/3

«  Quelle place pour la complétion d’un objectif dans une collaboration avec une intelligence artificielle ? »

Introduction :

Neill Blomkamp, Chappie, 2015 (Trailer) https://www.youtube.com/watch?v=lYpdtB4UKWE

Chappie, making of 1 , https://www.youtube.com/watch?v=gVq8riCETGA

Chappie, making of 2, https://www.youtube.com/watch?v=K62yVHn33K4

Consignes :

Réalisez un court métrage (couleurs, sonore, -5mn, animation & prises de vue réelle)

Racontez l’histoire de Chaappie de sa « naissance » à sa « mort ». (métaphysique de l’IA?)

– Chaappie est le premier robot doué de sensibilité , ce qui le fait agir comme un enfant. (morale pour une IA?)

– Le système de Chaappie étant instable, il « bug » au moindre choc physique ou psychologique.

Racontez l’histoire de Chaappie de son point de vue.

– Le court métrage prendra la forme d’une caméra subjective.

– Le court métrage utilisera une intelligence artificielle lors des plans de « Bug »

Matériel spécifique à la séquence:

IA text to video : Modelscope in Huggingface

Remarque :

– La banque de données provenant exclusivement de Shutterstock, un watermark est présent

– La banque de données étant petite, les prompts sont assez difficiles à rédiger.

– Pour une meilleure qualité, ajouter au Prompt : « center, 4K, High resolution, very detailled, photorealistic »

Exemple :

– AI Will Smith eating spaghetti pasta (AI footage and audio) https://www.youtube.com/watch?v=XQr4Xklqzw8

– #GeorgeClooney fait de la pub pour #lesimagesenmouvement grâce à #modelscope https://youtube.com/shorts/rP09ZTZFF6E

Déroulement :

1 : Élaboration du projet (synopsis)

2 : Création avec l’IA

3 : Finalisation du projet (scénario & storyboard)

4 : Tournage en vue subjective

5 : Montage

Références artistiques et culturelles:

Vue subjective :

Cinéma : George Albert Smith, Grandma’s Reading Glass, 1900 https://www.youtube.com/watch?v=07c897Eeuyc

Cinéma : John Carpenter, Halloween, 1978 https://www.youtube.com/watch?v=Rg3E8NhyJ74

Cinéma : J. Schnabel, le Scaphandre et le Papillon, 2007 https://www.youtube.com/watch?v=8zreUscnFbY

Cinéma : Sam Raimi, Evil dead 2, 1987 https://www.youtube.com/watch?v=nThdlnHmFEo&t

Cinéma : S. Jonz, Dans la peau de John Malkovitch, extrait,1999 https://www.youtube.com/watch?v=Q6Fuxkinhug

Cinéma : S. Susco, Unfriended Dark Web, 2018 https://www.youtube.com/watch?v=v5dNwA9ccb4

Cinéma : Gus Van Sant, Elephant, Extrait, 2003 https://www.youtube.com/watch?v=JRbrfG-cP3M

Art : J. de Lappe, Dead in Iraq, 2006 http://www.delappe.net/project/dead-in-iraq/

Art vidéo : Gary Hill, Crux, 1983/87 https://garyhill.com/work/mixed_media_installation/crux.html

Performance : Jeremie Pujau, De la poule ou de l’œuf, 2014 (Viméo) https://vimeo.com/95383724

Vue subjective et Intelligence Artificielle :

Technologie : charlesleflamand,  Vincent Van Gogh in Google DeepDream Space, 2016 https://www.youtube.com/watch?v=I2y6kS7396s$

Cinema : Paul Verhoeven, Robocop, 1988, https://www.youtube.com/watch?v=Q-vnqHarr3Y

Cinema: James Cameron, Terminator, 1984 https://www.youtube.com/watch?v=hZ45RU2Xty0

Intelligence Artificielle :

Cinéma : Alex Garland, Ex-Machina, 2015, Trailer : https://www.youtube.com/watch?v=O4p1qIh8XPc

Document : Karl Sims, Evolved Virtual Creatures, 1994 https://www.youtube.com/watch?v=JBgG_VSP7f8

Cinema : Alex Proyas, I-Robot, 2004, Extrait : Battle scene :https://www.youtube.com/watch?v=RvRZogigTtQ

Cinéma : Oskar Sharp, Sunsring, 2016 https://www.youtube.com/watch?v=LY7x2Ihqjmc

Art : Pierre Huyghe, Uumwelt, 2021, Captation d’exposition :https://www.youtube.com/watch?v=Jr-Ly2RJEE4

Art : Gregory Chatonsky, Terre seconde, 2018, Document :https://www.youtube.com/watch?v=JRBkwQwy6n0&

Art : Refik Anadol, Machine Hallucinations, 2022, Captation d’exposition https://www.youtube.com/watch?v=Ts7fQB3K__M&

Evaluation (Compétences visées)

Racontez l’histoire de Chaappie de sa « naissance » à sa « mort ». (métaphysique de l’IA?)

C1-4 Explorer l’ensemble des champs de la pratique plastique et leurs hybridations, notamment avec les pratiques

numériques.

Chaappie est le premier robot doué de sensibilité , ce qui le fait agir comme un enfant. (morale pour une IA?)

C2-4 Faire preuve d’autonomie, d’initiative, de responsabilité, d’engagement et d’esprit critique dans la conduite d’un projet artistique.

Le court métrage prendra la forme d’une caméra subjective.

C4-4 Interroger et situer œuvres et démarches artistiques du point de vue de l’auteur et de celui du spectateur.

Le court métrage utilisera une intelligence artificielle lors des plans de « Bug »

C3-1 Dire avec un vocabulaire approprié ce que l’on fait, ressent, imagine, observe, analyse ; s’exprimer pour soutenir des intentions artistiques ou une interprétation d’œuvre.

Inattendu Artificiel

Notion : Outil / Durée : 1/ Difficulté : 3/3

«  Quelle place pour la complétion d’un objectif plastique et narratif dans une collaboration avec une intelligence artificielle ? »

Introduction :

https://blogpeda.ac-poitiers.fr/lesimagesenmouvement/2023/04/12/lintelligence-artificielle-dans-leducation-artistique-et-culturelle-une-revolution-creative-en-marche/

• • Collectif Obvious, Portrait d’Edmond de Belamy, 2018

  • Jason Allen via MidJourney, Théâtre D’opéra spatial , 2022

Organisation : Une vidéo finale pour l’ensemble du groupe (animation, couleur, son) résultante de collaborations individuelles et collectives avec deux intelligences artificielles

Matériel :

• ChatGPT : (Chat Generative Pre-trained Transformer) est un prototype d’agent conversationnel utilisant l’intelligence artificielle, développé par OpenAI ; Il est capable de générer des réponses à des questions, de compléter des phrases, de traduire des textes, d’écrire des articles et de tenir des conversations avec des humains.
• Appareil Photographique
• PlazmaPunk : Plazmapunk est un outil basé sur l’IA de stable diffusion qui permet de créer des vidéos de type image to video ou text to video.

Consignes et Procédure :

• 0/ Objectif :
• Expérimenter la réalisation d’une animation la plus cohérente possible produite en collaboration avec des intelligences artificielles et la part inattendue de leurs productions.
• 1/ Individuellement :
  • Choisir un mot librement.
• 2/ ChatGPT et Collectivement :
  • Afin que cette IA crée un poème contenant ces mots,

    Rédiger un Prompt.

• 3/ Collectivement :
  • Rédiger un titre au poème qui ne contiendra aucun des mots précédents.

   

  4/ Individuellement :

  • Réaliser une photographie qui illustrera un vers du poème.

   

• 5/ PlazmaPunk et Collectivement:
  • Afin que cette IA anime les photographies en fonction de l’objectif,

    Rédiger un prompt de style en fonction du Titre du poème.

• 6/ PlazmaPunk et Individuellement :
  • Afin que cette IA anime les photographies en fonction de l’objectif,

    Rédiger un prompt de contenu en fonction de votre vers.

     

• 7/ Individuellement :
  • Enregistrer la lecture de votre vers du poème
• 8/ Collectivement:
  • Monter les Rushes et la voix-off

     

• 9/ Collectivement :
  • Mesurer la complétion de l’objectif

  • Mesurer l’intérêt de la réalisation et de la démarche.

Références artistiques et culturelles:

Aléatoire et IA:

– Prototype de l’IA culturelle : Une machine autonome et aléatoire

• Art : Jean Tinguely, Méta-matics N°10, Replik, 1990 https://www.youtube.com/watch?v=4-NrTsq6bsg

Démarche scientifique : L’IA simule l’évolution

• Document : Karl Sims, Evolved Virtual Creatures, Evolution Simulation, 1994 https://www.youtube.com/watch?v=JBgG_VSP7f8

Narration absurde : Des dialogues générés par une IA

• Cinéma : Oskar Sharp, Sunsring, 2016 https://www.youtube.com/watch?v=LY7x2Ihqjmc

Portrait de l’IA : De nouvelles images à l’infini

• Art : Mario Klingemann, Memories of Passerby 1, 2019
• Document : https://www.youtube.com/watch?v=Jjv3m5oWICA&

Références et IA :

Données : Ressemblance et Autonomie

• Cinéma : Alex Garland, Ex-Machina, 2015
• Trailer : https://www.youtube.com/watch?v=O4p1qIh8XPc

Boucle : Réseau de neurones (naturels, artificiels, naturels)

• Art : Pierre Huyghe, Uumwelt, 2021
• Captation d’exposition : https://www.youtube.com/watch?v=Jr-Ly2RJEE4
• Document : https://www.youtube.com/watch?v=enx-vyWn7UU

Vraisemblance : Une histoire d’IA fictive représentée via une IA réelle (effets spéciaux)

• Cinema : Alex Proyas, I-Robot, 2004
• Extrait : Battle scene :https://www.youtube.com/watch?v=RvRZogigTtQ

Données : Ressemblance et Paréidolie

• Art : Gregory Chatonsky, Terre seconde, 2018
• Document : https://www.youtube.com/watch?v=JRBkwQwy6n0&

Boucle : Représenter par l’IA les données utilisées par l’IA

• Art : Refik Anadol, Machine Hallucinations, 2022
• Captation d’exposition: https://www.youtube.com/watch?v=Ts7fQB3K__M&
• Document : https://www.youtube.com/watch?v=I-EIVlHvHRM&

Vraisemblance : Un histoire d’IA fictive modifiée par la collaboration du spectateur et d’une IA réelle

• Art: Ian Cheng, Life after Bob, the Chalice Project, 2018
• Trailer : https://www.youtube.com/watch?v=vCc2djR25hg
• Making-of :https://www.youtube.com/watch?v=3R6_ANvF7VE&

Evaluation (Compétences visées)

4/ Individuellement : Réaliser une photographie qui illustrera un vers du poème.

• C1-4 Explorer l’ensemble des champs de la pratique plastique et leurs hybridations, notamment avec les pratiques numériques.

5/ PlazmaPunk et Collectivement: Afin que cette IA anime les photographies en fonction de l’objectif, Rédiger un prompt de style en fonction du Titre du poème.

• C2-3 Se repérer dans les étapes de la réalisation d’une production plastique et en anticiper les difficultés éventuelles

6/ PlazmaPunk et Individuellement : Afin que cette IA anime les photographies en fonction de l’objectif, Rédiger un prompt de contenu en fonction de votre vers.

• C3-1 Dire avec un vocabulaire approprié ce que l’on fait, ressent, imagine, observe, analyse ; s’exprimer pour soutenir des intentions artistiques ou une interprétation d’œuvre.

9/ Collectivement : Mesurer l’intérêt de la réalisation et de la démarche.

• C3-4 Porter un regard curieux et avisé sur son environnement artistique et culturel, proche et lointain, notamment sur la diversité des images fixes et animées, analogiques et numériques.

9/ Collectivement : Mesurer la complétion de l’objectif

• C4-4 Interroger et situer œuvres et démarches artistiques du point de vue de l’auteur et de celui du spectateur.

0/ Expérimenter la réalisation d’une animation la plus cohérente possible produite en collaboration avec des intelligences artificielles et la part inattendue de leurs productions.

• C1-1 Choisir, mobiliser et adapter des langages et des moyens plastiques variés en fonction de leurs effets dans une intention artistique en restant attentif à l’inattendu.