Agent’s Cut : l’IA qui transforme vos rushes en récit vidéo

Imaginez une intelligence artificielle capable de parcourir des heures de vidéo brut pour en extraire instantanément les moments qui comptent. Fini la corvée de visionnage interminable : Agent’s Cut réalise en quelques minutes ce qui prenait autrefois des journées. Cet assistant virtuel né chez Sparkle se charge du dérushage et vous livre un premier montage narratif à partir de vos rushes, le tout guidé par vos indications. Vous gardez ainsi l’essentiel : une ébauche de récit cohérente, sur laquelle bâtir le produit final, qu’il s’agisse d’un film d’entreprise, d’un documentaire ou d’une capsule formation.

Professionnels de la vidéo, journalistes ou formateurs, Agent’s Cut vous donne un coup d’accélérateur créatif. Que vous souhaitiez compiler les meilleurs moments d’une interview, résumer une longue conférence ou valoriser des archives audiovisuelles, cet outil exploite l’IA pour révéler rapidement le fil narratif caché dans vos contenus. En alliant puissance technologique et storytelling, Agent’s Cut libère les créateurs des tâches fastidieuses pour se concentrer sur la vision artistique du montage.

‍

Au cœur d’Agent’s Cut se trouve une IA dite agentique, c’est-à-dire un agent intelligent capable de planifier et d’enchaîner des actions pour accomplir des tâches complexes. Propulsée par le Vercel AI SDK (spécialisé dans les agents conversationnels), notre IA agit comme un véritable chef d’orchestre. Elle comprend la demande de l’utilisateur, décompose le projet de montage en étapes, puis mobilise différents services intelligents pour y répondre. Par exemple, si vous demandez « Crée-moi un montage des moments où l’on parle d’innovation dans ces interviews », l’agent va successivement imaginer un storyboard, interroger l’index vidéo, sélectionner les séquences pertinentes, puis préparer leur enchaînement cohérent.

Grâce à cette architecture modulable, Agent’s Cut coordonne finement les outils d’IA et les flux de traitement. Le Vercel AI SDK assure la gestion fluide du contexte et des interactions : l’agent garde en mémoire le fil de la requête, appelle les bonnes API au bon moment, et sait quand s’arrêter une fois le montage généré. Ce fonctionnement par boucles itératives confère à la solution une grande flexibilité. L’IA peut ajuster ses choix en cours de route, vérifier la cohérence narrative et même intégrer des ajustements de l’utilisateur en temps réel. Le résultat : un montage initial sur mesure, obtenu de façon automatisée mais avec une logique digne d’un monteur humain.

‍

Pour trouver les meilleures séquences, Agent’s Cut comprend réellement ce qui se passe dans vos vidéos. Il s’appuie sur Marengo, le modèle d’IA de Twelve Labs spécialisé dans l’analyse vidéo multimodale, afin d’indexer chaque contenu sous tous ses angles. Concrètement, chaque vidéo importée est passée au crible de ce moteur intelligent, qui en extrait des métadonnées riches et variées.

• Transcription intégrale des paroles pour savoir qui dit quoi et quand.
• Tags visuels identifiant les personnes, objets, lieux et scènes présents à l’image.
• Détection des actions et événements marquants (gestes, mouvements, ambiance sonore, etc.).
• Association de repères temporels précis à chaque élément détecté, pour pouvoir les retrouver instantanément.

En combinant ces dimensions (texte, audio et image), la plateforme construit une indexation fine de vos médias. Vous pouvez alors effectuer des recherches comme dans un document texte, sauf qu’ici le moteur balaie vidéos, sons et images pour retrouver la scène idéale. Un mot-clé, une description ou même un concept suffisent : Agent’s Cut localise en quelques secondes les passages pertinents correspondant à votre requête. Cette compréhension quasi « humaine » du contenu vidéo permet d’isoler l’essence d’une histoire enfouie dans des heures de rushes, ouvrant la voie à un montage vraiment centré sur votre propos.

Identifier des segments clés n’est que la première étape. Encore faut-il les assembler sans couture. Agent’s Cut relève ici un défi technique de taille : produire un montage vidéo continu à la volée à partir de multiples extraits, et ce directement côté client. Les vidéos sources sont hébergées et diffusées via la plateforme api.video, qui fournit un streaming HLS performant.

La solution Agent's Cut met en œuvre deux fonctionnalités techniques clés pour fluidifier l’expérience de montage :

• Prévisualisation dynamique dans le navigateur : Grâce à un lecteur vidéo JavaScript s’appuyant sur hls.js, l’utilisateur peut visualiser instantanément une séquence composée de plusieurs extraits streamés via api.video. Le montage est simulé en temps réel, sans génération de fichier, ce qui permet de naviguer librement entre les séquences comme dans une timeline interactive.
• Export final encodé côté client : Une fois le montage validé, les extraits sélectionnés sont récupérés et recombinés localement dans le navigateur. L'encodage du fichier final est pris en charge par la librairie mediabunny, qui assemble les morceaux en une seule vidéo continue, prête à être téléchargée ou partagée, sans dépendance à une infrastructure serveur.

En alliant storytelling et haute technologie, Agent’s Cut se positionne comme un outil novateur pour réimaginer le montage vidéo. Il permet de gagner un temps précieux tout en révélant de nouvelles perspectives créatives. Cette innovation signée Sparkle montre comment l’IA, loin de remplacer les créateurs, peut au contraire les augmenter – en faisant émerger, à partir de la masse de contenus, l’histoire qui ne demande qu’à être racontée.

‍