Cette caméra dopée à l'IA transforme vos films en tout ce que vous voulez

Camille Coirault
Publié le 11 juillet 2024 à 09h47
 La CMR-M1 arbore un look rétro plutôt sympathique © SpecialGuestX
La CMR-M1 arbore un look rétro plutôt sympathique © SpecialGuestX

Révolution technologique ou simple gadget ? Une nouvelle caméra augmentée à l'intelligence artificielle promet de bouleverser la prise de vidéos en modifiant les séquences vidéos quasiment en direct.

Nous connaissions les IA génératives de vidéos comme l'incroyable Sora ou des modèles plus modestes comme Stable Diffusion 3 Medium. Ce n'est pas de ça dont il est question ici. L'entreprise SpecialGuestX, en collaboration avec la société de production 1stAveMachine a conçu un prototype de caméra capable de capturer des vidéos en temps réel en appliquant directement des transformations établies sur l'IA. Son petit nom ? CMR-M1. Comme vous pouvez le voir sur la vidéo ci-dessous ou sur le site officiel de l'entreprise, le résultat est tout aussi étrange qu'impressionnant.

La caméra qui sublime la réalité

La CMR-M1 transcende la captation de vidéos en envoyant les séquences numériques dans un cloud et en les métamorphosant avec le modèle Stable Diffusion. Miguel Espada, co-fondateur de SpecialGuestX souligne la plus-value apportée par un tel dispositif : « La création de films est intrinsèquement physique. Les cinéastes sont habitués à utiliser des caméras, des objectifs, des trépieds, des éclairages et l'IA doit être un nouvel outil qui amplifie la créativité ». En somme, la CMR-M1 a été pensée comme une interface physique entre le créateur et les modèles d'IA.

L'appareil arbore une molette latérale permettant au cadreur d'opérer une transition fluide entre le réel et les superpositions générées par l'IA. Elle est également équipée d'un emplacement pour une puce NFC (Near Field Communication) qui lui permet de se connecter au modèle d'IA personnalisé de l'utilisateur, formé avec ses propres images et instructions spécifiques. En insérant cette carte, ce dernier peut alors appliquer des transformations et des effets encore plus sophistiqués et personnalisés aux vidéos capturées.

Pour le moment, il y a encore une certaine latence dans les transformations. Cela s'améliorera certainement à l'avenir grâce au développement de StreamDiffusion, un pipeline de diffusion en temps réel conçu pour la génération d'images interactive développé par Cumulo Autumn.

 Des transformations d'images qui n'échappent toujours pas à l'uncanny valley © SpecialGuestX
Des transformations d'images qui n'échappent toujours pas à l'uncanny valley © SpecialGuestX

Une révolution en attente ?

Néanmoins, la CMR-M1 demeure à ce jour un prototype expérimental, sans perspective immédiate de commercialisation. Elle s'inscrit dans la quête de SpecialGuestX visant à concevoir des interfaces tangibles pour l'IA générative. Aaron Duffy, fondateur et directeur de la création de SpecialGuest explique : « Pour imaginer ce que pourrait être l'avenir, il faut parfois le prototyper. C'est particulièrement vrai pour le cinéma, les technologies créatives et la communauté créative. La CMR-M1 illustre comment les créateurs pourront exploiter l'IA de façon concrète, sans être coincés devant un clavier ».

L'esthétique de la CMR-M1, évocatrice des premières caméras portables comme la Cine-Kodak de 1924 ou la Debrie Parvo de 1908, cultive délibérément une réminiscence des prémices du septième art. Son potentiel commercial n'est pas à écarter, sa conception ayant tout de même été pensée pour une éventuelle production à grande échelle.

Cet appareil révolutionnera véritablement l'industrie cinématographique ou restera-t-il un fantasme de technophiles biberonnés à l'IA ? Pour le moment, difficile de statuer vraiment ; en tout cas, d'un point de vue purement technologique, impossible de le nier : la CMR-M1 est assez épatante.

Par Camille Coirault

La tech est mon terrain de jeu, la science ma maîtresse capricieuse et le jeu vidéo (malgré mes overdoses récurrentes de AAA) mon péché mignon. Voici votre serviteur, explorant la jungle technologique armé d'un simple PC et salivant comme un bouledogue devant la moindre innovation. Transformer le jargon technique en prose savoureuse, traquer les news ultimes avec les neurones toujours à balle de caféine : voilà ma mission.

Vous êtes un utilisateur de Google Actualités ou de WhatsApp ?
Suivez-nous pour ne rien rater de l'actu tech !
Commentaires (0)
Rejoignez la communauté Clubic
Rejoignez la communauté des passionnés de nouvelles technologies. Venez partager votre passion et débattre de l’actualité avec nos membres qui s’entraident et partagent leur expertise quotidiennement.
Commentaires (1)
sebstein

Je ne vois pas l’intérêt de l’intégrer à la prise de vue… c’est quelque chose qui doit se faire à l’étape de la post-prod, vu le degré aléatoire de l’IA (qualité du prompt, seed…).