En montage vidéo et en création d'effets visuels (VFX), les retouches localisées font partie du quotidien : remplacer un accessoire inadéquat, effacer un logo ou un élément perturbateur en arrière-plan, modifier la matière d'un vêtement ou corriger un défaut d'image. Traditionnellement, ce processus exige une rotoscopie minutieuse image par image, du tracking planaire et du compositing multicouche complexe. La plateforme de vidéo générative Haiper propose une alternative directe grâce à son mode Repaint your Video (Video-to-Video) et son outil de masquage Vary Region, permettant aux créateurs d'isoler une zone spécifique d'un plan et de la régénérer à l'aide de prompts en langage naturel.
Ce guide détaille la méthode opérationnelle pour remplacer et modifier des éléments dans Haiper, depuis le tracé du masque et la formulation des prompts jusqu'aux contraintes techniques et à l'intégration dans une chaîne de post-production professionnelle.
Fonctionnement de la repeinte vidéo dans Haiper
La plateforme Haiper s'articule autour de quatre modes de création principaux : texte vers vidéo (Create Video With Text), animation d'images fixes (Animate Your Image), repeinte vidéo (Repaint Your Video) et extension de durée (Extend Your Video).
Le mode Repaint your Video repose sur un modèle de diffusion de vidéo à vidéo (Video-to-Video). Au lieu de concevoir une scène à partir de rien, il exploite la vidéo importée comme structure géométrique et repère de mouvement. Au sein de ce mode, l'outil Vary Region permet un inpainting ciblé :
- Masquage localisé : Un masque est appliqué au pinceau sur la première image du clip pour isoler l'élément à transformer.
- Régénération sélective : L'intelligence artificielle recalcule uniquement les pixels compris dans la zone masquée au fil du temps, en conservant intacts l'arrière-plan, l'éclairage général et les mouvements de caméra.
- Contrôle textuel : Le rendu de la zone masquée est piloté par une description textuelle, ce qui permet de remplacer un accessoire, d'ajuster des textures ou de recréer le décor pour faire disparaître un objet indésirable (technique du clean plate).
Guide étape par étape : Remplacer et modifier des éléments
Étape 1 : Accéder à l'espace de repeinte
L'accès à l'outil s'effectue selon deux méthodes :
- Sélection directe du mode : Dans l'application web Haiper (
app.haiper.ai/creations) ou sur l'application iOS, cliquez sur l'icône + pour afficher les modes de création et sélectionnez Repaint your Video. Importez votre fichier vidéo source au format MP4 ou MOV. - Depuis l'historique des générations : Si vous souhaitez retoucher un clip préalablement généré sur Haiper, survolez la vidéo dans l'historique et cliquez sur l'icône Edit / Repaint pour l'ouvrir directement dans le module de repeinte.
Étape 2 : Définir le masque avec "Vary Region"
Une fois la vidéo importée, Haiper affiche la première image du métrage sous forme de canevas d'édition :
- Ajout de masque (pinceau
+) : Activez l'outil+et peignez sur l'objet ou la région à remplacer ou à modifier. - Soustraction de zone (pinceau
-) : Utilisez l'outil-pour gommer les dépassements et affiner la découpe. - Commandes de correction : L'interface propose des boutons Annuler (Undo), Rétablir (Redo) et Réinitialiser (Reset) pour ajuster le tracé.
Conseil pratique VFX : Déborder de 5 % à 15 % autour du sujet (Padding)
Ne tracez jamais un masque collé au plus près de la silhouette de l'objet. Laissez un débordement de 5 % à 15 % autour de l'élément. Cette marge fournit au modèle de diffusion le contexte spatial nécessaire (lumière ambiante, ombres de contact et texture des surfaces adjacentes), garantissant une fusion naturelle sans démarcation visible.
Étape 3 : Rédiger un prompt textuel précis
Le résultat final dépend directement de la formulation du prompt. Adaptez votre texte selon l'objectif recherché :
1. Remplacement d'objet (Object Replacement)
Décrivez précisément le nouvel élément, ses matériaux et ses interactions avec l'éclairage ambiant :
- Exemple : Plutôt que d'écrire simplement
"a cup"(une tasse), écrivez"an antique brass goblet resting on the rustic wooden table, soft warm ambient lighting, highly detailed surface texture"(une coupe antique en laiton posée sur la table en bois rustique, lumière ambiante douce et chaude, texture de surface très détaillée). - Ancrage contextuel : Mentionner le support (table en bois) et la direction de la lumière aide l'IA à calculer des ombres et une perspective cohérentes.
2. Modification de matière ou de style (Style & Element Modification)
Conservez la forme et le mouvement tout en changeant la couleur ou l'aspect d'un vêtement :
- Exemple : Après avoir masqué la veste d'un personnage :
"a weathered dark-brown leather motorcycle jacket with metallic zipper accents, natural daylight shadows"(un blouson de motard en cuir marron foncé patiné avec fermetures éclair métalliques, ombres naturelles de lumière du jour).
3. Suppression d'éléments (Clean Plate Inpainting)
Pour effacer un objet gênant ou un panneau, évitez les tournures négatives comme "remove the sign" (supprimer le panneau). Décrivez plutôt affirmativement le décor qui doit occuper cet espace :
- Exemple : En masquant un panneau mural :
"weathered red brick wall, matching mortar lines, natural outdoor daylight, seamless texture"(mur de briques rouges patinées, joints de mortier réguliers, lumière naturelle du jour, texture continue).
Étape 4 : Vérifier les réglages et lancer la génération
Dans le panneau de configuration situé à côté du champ de prompt, vérifiez vos paramètres :
- Durée (Duration) : Haiper prend en charge nativement des durées de 2 et 4 secondes. Pour une retouche ponctuelle, il est conseillé de travailler par segments courts de 2 à 4 secondes afin de limiter les dérives de mouvement.
- Graine aléatoire (Seed) : Si une génération présente un cadrage et une dynamique satisfaisants mais que les détails de l'objet demandent un ajustement, verrouillez la valeur de la Seed et modifiez subtilement le vocabulaire du prompt.
- Format d'image (Aspect Ratio) : Le mode de repeinte conserve automatiquement le ratio d'aspect du fichier d'origine (16:9, 9:16, 1:1, 4:3, 21:9, etc.).
- Lancement : Cliquez sur Generate pour envoyer le calcul dans la file d'attente sur le cloud.
Limites techniques et contraintes de production
Bien que Vary Region réduise considérablement le temps consacré au rotoscoping manuel, certaines réalités techniques doivent être anticipées en milieu professionnel :
1. Masquage sur la première image et cohérence temporelle
La zone masquée est définie uniquement sur l'image de départ ; le suivi sur les images suivantes est calculé par les mécanismes d'attention temporelle du modèle.
- Conditions optimales : Les plans fixes sur trépied, les travellings lents et les mouvements modérés conservent une excellente stabilité d'une image à l'autre.
- Conditions difficiles : Les panoramiques rapides (whip pans), les zooms brusques ou le passage d'éléments au premier plan peuvent entraîner des scintillements de contour (edge boiling) ou de légères déformations géométriques.
2. Résolution et livraison finale
Le modèle Haiper Video 2.x génère nativement en 540p et 720p, avec une fonction d'amélioration (Enhance) vers le 1080p. Dans le cadre de livrables 4K pour le cinéma ou la diffusion télévisuelle, les clips de Haiper doivent être considérés comme des passes de compositing intermédiaires à réintégrer et mettre à l'échelle dans un logiciel de finition.
3. Consommation de crédits et licence commerciale
- D'après la grille tarifaire officielle, sur Haiper Video 2.x, la fonction Video to video consomme 8 crédits par seconde en résolution 720p. Sur Haiper Video 1.5, le coût de base est d'environ 5 crédits par seconde.
- Les comptes gratuits disposent d'un quota journalier limité et appliquent un filigrane sur les vidéos exportées.
- Les projets commerciaux nécessitent un abonnement payant Haiper Membership pour bénéficier d'exports sans filigrane, des droits d'exploitation commerciale et de files de calcul prioritaires.
Intégration dans une chaîne de post-production et de compositing
Pour combiner les plans repeints dans DaVinci Resolve, Adobe Premiere Pro ou After Effects :
- Découpage en sous-plans courts : N'exportez depuis votre banc de montage que le segment précis de 2 à 4 secondes nécessitant une retouche avant de l'envoyer sur Haiper (économie de crédits et réduction des artefacts temporels).
- Superposition sur la timeline : Placez le clip retourné par Haiper sur une piste vidéo située directement au-dessus du plan d'origine, en calant les repères temporels.
- Masque de détourage doux (Garbage Matte) : Dans votre logiciel de compositing, tracez un masque aux contours adoucis (feather) autour de la zone modifiée. Comme le masque initial a été élargi, le contour progressif masque parfaitement les infimes écarts de teinte avec le décor d'origine.
- Raccord de grain et de bruit (Grain Matching) : Les surfaces générées par IA sont souvent très lisses. Appliquez un plugin de grain argentique ou de bruit de capteur pour accorder la texture de la retouche à celle de la prise de vue originale.
- Étalonnage final harmonisé : Ajustez les niveaux de noir, le contraste et les hautes lumières sur la couche retouchée afin de l'intégrer parfaitement dans l'ambiance lumineuse générale.