在影音創作與後期剪輯流程中，鏡頭重拍與逐幀視效轉描（Rotoscoping）往往耗費極高的工時與製作預算。當導演或客戶提出需要調整畫面中演員的服裝樣式、置換手持道具的表面質感，或是在保留原始鏡頭運鏡節奏的前提下改變場景光影氛圍時，後期製作人員傳統上需要面對繁重的追蹤、遮罩繪製和多層合成工作。Haiper 推出的影片重繪（Video Repainting / Video-to-Video）功能，配合其內建的 Vary Region 局部區域筆刷工具，提供了一種基於擴散模型的生成式解決方案：能夠在鎖定鏡頭原始運動軌跡與場景透視關係的同時，對指定局部區域進行精準重繪與語意風格替換。
本文面向影視創作者、商業影片剪輯師與視覺設計師，系統梳理如何透過 Haiper Video Repainting 高效修改既有素材中的主體人物/物件、表面材質與環境光影。
一、源素材前期篩選與處理要點
生成式影片局部重繪的效果與輸入影片的品質及動態特性密切相關。Haiper 的影片擴散架構基於關鍵影格特徵進行時序擴散計算，為了確保重繪後的影格間一致性，前期素材應遵循以下篩選標準：
- 片段長度控制：Haiper 對短序列影片的處理效果最為穩定，單次輸入片段建議控制在 2 至 4 秒（在升級版模型檢查點中可支援至 8 秒）。對於長鏡頭，切忌整段上傳，應提前在剪輯軟體中將其切分成僅包含修改關鍵動作的微片段。
- 鏡頭與主體運動規律：平穩的推拉搖移（Pan/Dolly/Tracking）和等速運動的主體更容易保持穩定的特徵對應；劇烈的手持抖動、快速晃動的動態模糊以及突然出畫入畫的肢體，容易導致時序注意力計算錯位，進而引發畫面形變或重影。
- 主體邊緣與背景反差：目標物體與周圍環境有較清晰的明暗或色彩邊緣時，筆刷遮罩的選區邊界更易掌控，能有效防止生成內容向鄰近區域滲透（Bleeding）。
若源素材存在輕微抖動或較多雜訊，建議在剪輯專案（如 DaVinci Resolve 或 Adobe Premiere Pro）中先做基礎畫面穩定和輕度降噪，再匯出高品質 H.264/MP4 格式送入 Haiper。
二、重繪工作流與 Vary Region 局部筆刷配置
進入 Haiper 操作工作台後，具體操作步驟如下：
- 進入重繪模式：在創作面板或生成模式清單中，選擇 Repaint your Video（影片重繪 / Video-to-Video）。
- 上傳素材：將剪切好的短影片片段拖曳上傳至工作區。
- 開啟 Vary Region 選區功能：不同於全畫幅風格遷移，局部修改必須啟用 Vary Region 選項。此時系統會凍結影片的首影格關鍵影格，並喚起互動式筆刷塗抹介面。
- 精細繪製遮罩選區：
- 使用
+（增加選區） 筆刷，仔細塗抹需要修改的人物、服裝、道具或背景區域。 - 使用
-（橡皮擦/減去選區） 筆刷修整溢出邊緣，特別是需保持原貌的邊緣區域。 - 根據目標物體的運動幅度調整筆刷大小：靜態或慢速物體可貼緊邊緣塗抹；若目標物體在後續幾秒內有位移或晃動，選區邊界應預留適度的容差空隙，避免運動出界導致破綻。
- 若選區邊緣不理想，可利用復原（Undo）或重設（Reset）重新繪製。
- 使用
塗抹高亮的區域即為 AI 接收提示詞並重新生成像素的封閉空間，選區之外的原始背景與畫面結構將被完整保留。
三、精準重繪提示詞撰寫：主體、材質與光影
在 Haiper 中，提示詞是驅動選區內像素更新的語意核心。由於模型需要將提示詞與底層的運動向量緊密結合，撰寫時應聚焦於選區內部的具體特徵，避免冗長無關的描述：
1. 修改或替換主體（人物與道具）
當需要為既有主體換裝、增加裝備或替換道具時（例如將日常夾克改為戰術機甲外衣）：
- 錨定解剖結構與動態：明確說明主體的身分、服飾質感與動態匹配。例如：
A rugged cyberpunk warrior wearing distressed matte-black ballistic armor with illuminated orange fiber-optic accents, matching character posture and motion。 - 避免全域性干擾描述：不要在提示詞中描寫畫面外部的天空或背景環境，否則模型可能會嘗試在有限的局部選區內塞入微縮全景，導致邏輯混亂。
2. 變換表面材質與紋理
當修改汽車漆面、建築立面或道具表面質感時（例如將光滑塑膠轉變為風化青銅或粗糙混凝土）：
- 使用具象觸感詞彙：加入明確的微觀材質描述，如
brushed anodized aluminum（拉絲陽極氧化鋁）、hammered copper texture（鍛打銅紋）、weathered concrete with hairline cracks and subtle moss（帶微細裂紋與少許青苔的風化混凝土）或subsurface scattering marble（次表面散射大理石）。 - 配合結構明暗變化：提示詞中強調材質順應物體表面起伏（如
conforming to surface curvature and original highlights），幫助擴散模型根據原片的受光面與陰影分佈自然映射紋理。
3. 重塑環境光影與氛圍感
若需要將平淡的白晝漫反射轉換為電影級黃昏逆光，或在暗調場景中增加霓虹反射：
- 指明光源方向與光質：使用專業攝影布光術語，如
dramatic golden hour rim lighting, warm volumetric light rays, soft amber bounce light（戲劇性黃金時刻輪廓光、暖色體積光束、柔和琥珀色漫射光）。 - 光線與主體互動：若僅對人物局部受光面進行塗抹，可提示
glowing cyan and magenta neon light cast on skin and clothing, high-contrast specular reflections matching a rainy night street，讓重繪區域生成逼真的反光與暗部漸變。
四、影格間一致性控制與瑕疵處理技巧
影片局部重繪中最常見的問題是時序閃爍（Temporal Flicker）與結構漂移。為確保生成影片在動態播放時連貫自然，可採取以下應對策略：
- 克制形變幅度：如果原素材是一個纖細的長柄雨傘，試圖將其重繪為寬大的吉他，模型極易在後續影格產生難以預測的形變。選區新內容的幾何輪廓應盡量貼合原有物體的體積與拓撲結構。
- 多種子批次抽卡：擴散模型的生成具有隨機性。在確認滿意的提示詞後，建議使用相同參數連續生成 3 至 5 個版本，橫向對比其在播放過程中的影格間平滑度，挑選抖動最少、邊緣最穩固的批次。
- 規避複雜交叉遮擋：若畫面中存在前景肢體頻繁劃過選區的情況，單一首影格遮罩容易在交叉處產生畫面撕裂。遇到此類鏡頭，建議將複雜遮擋分段處理，或留待後期合成階段精修。
五、後期剪輯專案整合與精修工作流
在專業生產線中，AI 生成的影片片段並非最終成品，而是作為高品質的重繪圖層嵌入剪輯合成專案中：
- 雙軌疊加對齊：在 DaVinci Resolve 或 Premiere Pro 中，將 Haiper 重繪渲染出的影片放置在原版素材的正上方軌道，確保時間碼絕對對齊。
- 邊緣羽化與動態遮罩：為上方重繪軌道添加邊緣羽化遮罩（Soft Feathering Mask），將重繪邊緣與原始背景做漸變融合，消除硬切接縫。
- 時序去閃爍（Deflicker）：若重繪層存在細微的明暗頻閃，調用 DaVinci Resolve Studio 自帶的 Deflicker 外掛（選擇 Fluorescent 燈光或 Advanced 模式），平滑影格間亮度突變。
- 統一雜訊與色調融合：AI 生成的像素往往過於純淨平滑，與原相機的感光雜訊存在微小脫節。在整個時間線上掛載統一的 35mm 膠卷顆粒或數位雜訊生成器，並建立整體調色節點（LUT / Color Grade），使新生成的材質和光影完全融入整部影片質感。
六、總結
Haiper 的影片重繪（Video Repainting）功能將過去需要複雜三維建模與逐幀擦除的視效工作，轉化為直覺的「選區塗抹 + 提示詞語意引導」工作流。只要合理把控素材的運動幅度、精準圈定 Vary Region 選區邊界，並在後期軟體中完成羽化融合與去閃處理，創作者便能以極高效率實現畫面主體重塑、材質翻新與光影升級。這套工作流程非常適合社群媒體視覺創意、廣告樣片快速提案以及低成本影視 B-roll 的風格化改造。
參考資料
- Haiper - AI Video Generator
- Create Cinematic AI Video Using Haiper | Step-by-Step Tutorial — Curious Refuge
- Haiper-ai · GitHub
- GitHub - unofficialapis/Haiper-API: Readme for Haiper API · GitHub
- [2501.10018] DiffuEraser: A Diffusion Model for Video Inpainting
- [2312.03816] AVID: Any-Length Video Inpainting with Diffusion Model