在影片剪輯與視覺特效(VFX)製作中,局部畫面修改是極為常見的工作需求:替換畫面中不合適的道具、清除穿幫的商標或雜物、變更演員的服裝材質,或是修飾背景瑕疵。在傳統工作流程中,這類調整通常仰賴剪輯師耗費大量時間進行逐幀轉描(rotoscoping)、平面追蹤(planar tracking)與多圖層合成。AI 影片生成平台 Haiper 提供了基於影片到影片(Video-to-Video)的「影片重繪」(Repaint your Video)功能,並搭配「區域調整」(Vary Region)局部遮罩工具,讓創作者能直接圈選畫面中的特定區域,利用自然語言提示詞快速完成物件替換與局部元素重繪。
本文將詳細說明剪輯師與視覺特效創作者使用 Haiper 執行局部重繪的操作步驟、提示詞撰寫策略、技術邊界,以及與專業後期流程整合的實務做法。
認識 Haiper 影片重繪的核心機制
Haiper 平台主要提供四種創作模式:文字生成影片(Create Video With Text)、靜態圖像生成影片(Animate Your Image)、影片重繪(Repaint Your Video)以及影片延長(Extend Your Video)。
其中,「影片重繪」屬於典型的 Video-to-Video 擴散模型工作流程。它以使用者匯入的既有影片作為結構與動態基準,而其內建的 Vary Region(區域調整) 功能則進一步提供了局部重繪(Inpainting)能力:
- 局部隔離重繪: 創作者在影片首幀上為目標物件繪製選取遮罩,AI 僅重新計算並生成被遮罩覆蓋的像素區域。
- 保留原有動態基準: 未塗抹的背景、攝影機鏡頭運動軌跡與主體動態保持原樣,大幅降低畫面整體畸變的風險。
- 提示詞引導生成: 透過文字指令定義重繪區域的新內容,既能無縫替換物件,亦可透過生成匹配的背景紋理達成物件消除(Clean Plate)的效果。
實務操作步驟:局部物件替換與修改流程
第一步:進入影片重繪工作區
創作者可透過以下兩種路徑開啟重繪工具:
- 直接新建模式: 在 Haiper Web 應用程式(
app.haiper.ai/creations)或 iOS App 首頁,點擊底部的「+」號展開創作模式選單,選擇 Repaint your Video(影片重繪),接著上傳需要修改的來源影片檔案(MP4 或 MOV 格式)。 - 從歷史生成紀錄載入: 若要修改先前在 Haiper 生成的影片,可直接在結果展示面板上方點擊 Edit / Repaint 圖示,系統會直接將該鏡頭帶入重繪工作流程。
第二步:使用 Vary Region 繪製選取遮罩
上傳影片後,系統會呈現該影片第一幀的遮罩編輯畫布:
- 添加遮罩選區(
+筆刷): 選取+工具,塗抹需要替換或修改的目標物件。 - 擦除多餘選區(
-筆刷): 若筆刷溢出邊界,切換至-工具擦除多餘部分,維持邊界乾淨。 - 復原與重置控制: 畫布提供復原(Undo)、重做(Redo)與重置(Reset)按鈕,方便隨時調整遮罩範圍。
特效師實務技巧:適度向外擴展遮罩邊界(Padding)
繪製遮罩時切勿緊貼物體邊緣。建議將遮罩範圍向外擴張約 5% 至 15%。預留這段環境緩衝區,能讓擴散模型充分參考周遭的光源入射角、接觸陰影以及相鄰表面的物理材質紋理,使重新生成的區域與原畫面無縫融合。
第三步:撰寫精準提示詞
重繪區域的最終成像取決於提示詞的指引。針對不同的後製目的,提示詞的構建方式有所不同:
1. 物件替換(Object Replacement)
具體描繪新物件的材質、造型特徵及其與環境的光影互動:
- 範例: 避免僅輸入
"a cup"(杯子),建議撰寫"an antique brass goblet resting on the rustic wooden table, soft warm ambient lighting, highly detailed surface texture"(放置在質樸木桌上的復古黃銅高腳杯,柔和溫暖的環境光,高精度金屬表面紋理)。 - 環境錨定: 在描述中加入接觸面材質與光線方向,能協助模型計算出準確的陰影走向與透視關係。
2. 修改元素材質與風格(Style & Element Modification)
維持主體動作與輪廓,僅變更局部顏色、布料或質感:
- 範例: 圈選演員的外套後輸入
"a weathered dark-brown leather motorcycle jacket with metallic zipper accents, natural daylight shadows"(帶有金屬拉鍊細節的深棕色仿舊皮質機車夾克,自然日光陰影)。
3. 物件消除(Clean Plate Inpainting)
若要移除畫面中的穿幫道具、雜物或看板,切忌在提示詞中使用 "remove the trash can"(移除垃圾桶)等否定句,應改用肯定句詳細描述該處原本應有的背景樣貌:
- 範例: 圈選穿幫標牌後輸入
"weathered red brick wall, matching mortar lines, natural outdoor daylight, seamless texture"(風化紅磚牆面,接縫水泥線條一致,自然戶外採光,無縫材質)。
第四步:設定參數並送出運算
在提示詞輸入框旁開啟設定選單,檢核生成參數:
- 影片時長(Duration): Haiper 原生支援 2 秒與 4 秒影片段落。針對局部重繪工作,建議先以 2 至 4 秒短鏡頭進行測試與調整。
- 隨機噪點種子(Seed): 當某次生成的動態節奏與光影氛圍令人滿意,但物件細節需要微調時,可鎖定 Seed 數值,再微調提示詞用字。
- 長寬比(Aspect Ratio): 影片重繪模式會自動沿用輸入影片的原始長寬比例(標準支援包括 16:9、9:16、1:1、4:3、21:9 等)。
- 啟動生成: 確認參數後點擊 Generate,任務即進入雲端佇列開始運算。
剪輯與特效製作中的技術限制與考量
雖然 Haiper 的 Vary Region 功能大幅縮短了手動繪製遮罩的時間,但在專業影視與商業廣告製作中,仍須理解其技術邊界:
1. 首幀遮罩與時間連續性(Temporal Coherence)
Haiper 的 Vary Region 遮罩設定在首幀,隨後模型依據內建的時間注意力機制推算後續各幀的動態演變。
- 適用情境: 固定機位(Locked-off)、運鏡平穩的推拉鏡頭,或是主體位移速度適中的畫面,重繪區域能維持優異的幀間一致性。
- 高難度情境: 快速搖鏡(Whip Pan)、大幅度變焦或物體穿過前景遮擋時,邊緣可能會出現時序抖動(Edge Boiling)或輕微形態漂移。
2. 解析度與成片規格
Haiper Video 2.x 目前原生支援 540p 與 720p 運算,並提供 1080p 畫面增強模式。針對 4K 院線或電視廣播母帶,AI 重繪片段更適合作為局部生成素材,在後期軟體中進行升頻與精細合成。
3. 點數消耗與商業授權規範
- 依據官方定價文件,在 Haiper Video 2.x 模型架構下,Video to video 運算費用為每秒 8 點數(8 credits / second)(720p 解析度)。在 Haiper Video 1.5 下基礎生成為每秒 5 點數。
- 免費帳號僅提供每日有限的體驗點數,匯出影片帶有官方浮水印。
- 商業專案與專業製作團隊需升級至 Haiper 會員方案,以取得無浮水印下載、商業授權以及更高的同時並行生成通道。
整合至專業後期剪輯與合成流程
為確保 Haiper 重繪素材能完美融入 DaVinci Resolve、Adobe Premiere Pro 或 After Effects 等專業後期環境,建議採用以下修飾流程:
- 僅擷取關鍵短鏡頭: 在剪輯軟體中只切出需修改的 2 至 4 秒片段並單獨輸出,再上傳至 Haiper 進行重繪,避免整段長素材浪費點數並降低時間軸漂移機率。
- 多軌道分層堆疊: 將 Haiper 算出的影片匯入專案,放置在原素材正上方的軌道並對齊時間點。
- 羽化局部遮罩(Garbage Matte): 在合成節點上為重繪圖層建立一個邊緣適度羽化(Feather)的遮罩,僅露出實際更換的核心物件。因在生成階段擴大了遮罩範圍,羽化能完美隱藏背景交界處的微小色差。
- 顆粒與噪點匹配(Grain & Noise Matching): AI 擴散模型生成的區域通常較為平滑。在後期合成中套用相應的底片顆粒(Film Grain)或感光元件噪點外掛,使重繪區與原攝影機拍攝素材質感完全一致。
- 整合色彩校正: 針對合成圖層進行最終調色,調準黑平衡、亮部反射與環境色相,使重繪物件無縫融入原始鏡頭光影。