如何用 AI 將影片動作遷移至圖片角色

陳映彤
陳映彤

更新於: 2026-10-26

4 分鐘閱讀 , 1 瀏覽

你有一張喜歡的角色圖片,現在想讓角色揮手、走路,或跳出你錄下的舞步。只用文字提示詞逐一描述動作並不容易,尤其是需要掌握節奏的時候。

AI 動作遷移提供了另一種控制動作的方式:準備一段示範動作的影片,再提供一張角色圖片,工具就能結合這些參考素材生成新影片。

本指南將介紹如何將影片動作遷移至圖片角色,使用LitVideo Genjutsu示範如何搭配素材,以及結果不理想時該調整哪些地方。我們會以一個簡單案例貫穿全文:讓原創插畫角色跟隨一段簡短的揮手表演。

揮手參考影片、角色圖片與 AI 動作遷移結果的並排對照

 

01 什麼是 AI 動作遷移?

AI 動作遷移會利用參考影片中的動作,引導另一個主體的動畫生成。影片提供表演內容,圖片則提供你想讓它動起來的角色外觀。

  • 參考影片:提供要跟隨的動作、姿勢變化與時間節奏。
  • 角色圖片:引導臉部、服裝、比例與視覺風格。
  • 文字提示詞:描述預期的變化,並說明重要的視覺細節。

使用一般的圖片轉影片功能時,你可能會用文字指令要求模型自行生成揮手動作。以參考影片為基礎的動作遷移,則是直接示範希望角色跟隨的揮手方式。當表演的節奏或動作順序難以用文字描述時,這種方式就很實用。

雖然常見說法是「將影片動作轉移至圖片」,輸出的仍是動態影片。AI 會生成新影格,而不是單純把原始片段貼到靜態圖片上。臉部細節、肢體結構、背景與個別姿勢都可能與參考素材有所不同。

 

02 開始前需要準備什麼?

清晰的角色圖片

選擇主體容易辨識、身體輪廓清楚的圖片。以揮手案例來說,能看見頭部、軀幹、手臂與雙手的圖片,比只裁切臉部的特寫能提供更多相關資訊。

如果要呈現全身舞蹈,請使用全身角色圖。否則,模型就必須自行補出未出現的腿部、鞋子或服裝。背景也應保持簡單,讓主體容易辨識。

合適的動作參考影片

先從一位清楚可見的表演者,以及一個容易辨識的動作開始。例如,不切換鏡頭,錄下人物抬手、揮手,再放下手的過程。人物周圍要留出空間,確保手部不會超出畫面。

上傳前先裁掉無關片段。如果影片有多位表演者、頻繁切換鏡頭,或有人從主體前方經過,模型就更難判斷要跟隨的動作。

相容的構圖與朝向

生成前先比較兩份素材。正面角色圖搭配正面揮手影片,比坐姿人像搭配全身旋轉動作更容易處理。讓兩份素材露出的身體範圍接近,也能減少模型需要補出的細節。

請使用你有權使用的角色圖片與參考影片。自行錄製簡短表演,是控制動作與構圖的實用方式。

 

03 如何使用 LitVideo Genjutsu 將影片動作遷移至角色圖片

LitVideo Genjutsu 結合影片、參考圖片與文字提示詞,引導動作遷移、角色替換等變化。以下是一套適合入門的操作流程。

步驟 1:開啟 LitVideo Genjutsu

前往LitVideo Genjutsu 頁面並選擇動作遷移分頁。進行這個案例前,請先準備揮手參考影片與插畫角色圖。

你可以先在頁面加入參考素材,再進入生成工作區。上傳時請依照欄位旁顯示的素材要求操作。

LitVideo Genjutsu 動作遷移分頁與影片、圖片上傳欄位

步驟 2:上傳參考影片

加入包含目標動作的影片。在本例中,表演者面對鏡頭完成一次簡單的揮手。不要為了延長影片而加入無關動作。

上傳前先完整觀看一次。確認手部始終可見,且鏡頭不會在動作進行到一半時切換。

步驟 3:加入角色參考圖片

上傳你希望出現在新影片中的角色圖片。參考圖應清楚呈現服裝、臉部,以及完成揮手動作需要的手臂。

如果還沒有合適的圖片,可以使用文字生成圖片工具來製作。描述符合表演需求的構圖,例如面向正前方、雙臂清楚可見的原創角色。

步驟 4:描述預期結果

用聚焦的提示詞,將角色參考圖與表演連結起來。描述要跟隨的動作,以及重要的外觀細節,避免同時加入多個無關的場景變化。

以參考圖片中的插畫角色為主體,讓角色跟隨參考影片中的揮手動作與時間節奏。整段影片中,請維持藍色外套、髮型與插畫風格的辨識度。

請依照自己的圖片調整服裝與外觀細節。這段提示詞可作為起點,但並非經過測試的效果保證。避免提出與參考影片衝突的要求,例如表演者正在跳舞,卻要求角色坐著不動。

步驟 5:生成並檢查結果

點擊建立按鈕,將參考素材帶入 Genjutsu 工作區。確認可用的生成設定後,再提交任務。

將輸出結果與原始表演比較:手臂是否在接近的時間抬起?揮手動作是否清楚?角色是否仍容易辨識?決定調整內容前,先檢查開頭、動作最明顯的時刻與結尾。

如果某個部分不理想,先判斷可能需要調整哪一份素材。手部被裁切可能是構圖問題;手勢不明確,則可能需要簡化參考動作。每次集中修改一點,再生成另一個版本。

參考表演與生成角色在對應時刻的揮手姿勢對照

 

04 讓動作遷移結果更一致的技巧

從簡單、清楚的動作開始

揮手或走幾步都很適合作為第一次測試。了解角色的生成表現後,再嘗試更複雜的表演。快速轉身或四肢重疊,會增加需要檢查的難點。

讓圖片符合表演需求

除了裁切範圍,也要考慮身體比例。將真人舞蹈套用到四肢很短或體型特殊的角色時,可能需要更多測試。先選擇符合角色身體結構的動作。

確保主體清楚可見

優先使用表演者與背景容易區分的影片。如果家具遮住腿部,或手部反覆移到頭部後方,可以換個角度,或重新錄製更清楚的表演。

一次只調整一項輸入

比較角色圖片時固定參考影片;測試較簡單的片段時則固定圖片。同時修改圖片、提示詞與影片,會難以判斷哪項調整有效。

 

05 AI 動作遷移的常見問題與調整方式

以下建議可作為下一次測試的起點,但不保證每個高難度動作都能成功遷移。

問題檢查重點可嘗試的調整
臉部外觀改變圖片細節模糊,或頭部轉動幅度過大改用更清晰的角色圖,或轉頭幅度較小的參考影片。
手腳變形四肢被裁切、遮擋,或動作過快選擇四肢清楚可見的素材,並簡化動作。
動作與參考影片不同同時出現多個動作,或提示詞指令互相衝突將片段裁成單一動作,並讓提示詞與影片內容一致。
服裝或比例改變缺少身體細節,或構圖不相容改用身體資訊更完整、可見範圍與影片接近的圖片。
背景不穩定鏡頭晃動,或場景過於複雜測試更穩定的影片,或更簡單的環境。

 

06 AI 動作遷移可以創作哪些內容?

  • 角色舞蹈影片:使用參考舞步引導原創角色表演。如果偏好現成舞蹈範本,可以試試AI 舞蹈影片生成器,無須自行提供動作參考影片。
  • 角色反應短片:將揮手、慶祝或驚訝的手勢製作成動畫片段。
  • 社群影片變化版:讓多個原創角色設計演繹同一段表演,再比較結果。

每段影片設定一個清楚的創作目標。簡短、易懂的表演,往往比充滿干擾性視覺變化的複雜片段更能傳達訊息。

 

07 常見問答

可以把影片動作遷移至 AI 生成的角色嗎?

可以。角色圖片能在動作遷移流程中提供外觀參考。請使用清晰的圖片,並選擇符合角色身體比例的動作。

可以使用插畫或動漫風格圖片嗎?

可以使用插畫角色作為參考,但結果取決於角色設計、表演內容與模型。先測試簡單動作,再確認視覺風格是否仍清楚可辨。

一定要使用全身圖片嗎?

如果參考影片呈現全身動作,建議使用全身圖片。若只是上半身手勢,清楚呈現相關手臂、雙手與軀幹的圖片,通常比臉部特寫更適合作為起點。

生成結果會與參考影片完全一致嗎?

無法保證完全一致。參考影片會引導動作,但輸出包含 AI 生成的影格,時間節奏、肢體結構、臉部特徵與環境都可能改變。

動作遷移與角色替換有什麼不同?

動作遷移著重以參考表演讓目標主體動起來。AI 角色替換則著重改變既有場景中出現的人物。兩者流程可能重疊,但保留或重建多少場景,取決於工具與設定。

需要動作捕捉設備或綁定骨架的 3D 模型嗎?

本指南介紹的 LitVideo 流程,只需提供影片、角色參考圖與提示詞。不需要事先準備已綁定骨架的 3D 角色,也不需要穿戴動作捕捉服。

 

08 用動作參考讓角色動起來

1

若要將影片動作遷移至圖片角色,先準備相容的參考素材:一段清楚的表演,以及能呈現該動作所需身體細節的角色圖。生成短片後與原始素材比較,再依照可見問題調整對應的輸入。

準備好嘗試自己的角色了嗎?開啟 LitVideo Genjutsu,從簡單的揮手、走路或舞蹈參考開始。