AI視頻換人工具來了！動作表情完美還原，附下載鏈接

近年來，隨著AI擴散模型的發(fā)展，角色動畫技術(shù)在電影制作、廣告、數(shù)字人創(chuàng)建等領(lǐng)域取得了巨大的應(yīng)用潛力。然而，現(xiàn)有技術(shù)大多是“局部”的，即要么專注于臉部、口型替換，要么只能模仿遷移角色的簡單動作，且許多模型在生成質(zhì)量、肢體與表情的控制力以及對不同角色的泛化能力上仍有不足。正是在這樣的背景下，Season應(yīng)運而生，它旨在提供一個全面的、高性能的解決方案，推動角色動畫技術(shù)的發(fā)展和應(yīng)用

Season是一款多模態(tài)視頻生成模型，其核心功能集中在“動作模仿”和“角色扮演”兩大方面，用戶只需上傳一張人物圖片和一段視頻，就能精準(zhǔn)實現(xiàn)動作復(fù)刻與角色替換

動作模仿：將視頻角色的動作、表情遷移到圖片角色中，以驅(qū)動圖片角色實現(xiàn)動畫效果，輸出視頻流暢自然，特別擅長唇形同步，支持多種語言和口音適應(yīng)

角色扮演：在保留原始視頻的動作、表情及環(huán)境的基礎(chǔ)上，將視頻中的角色替換為圖片中的角色，這意味著用戶能輕松“換人”而不破壞整體敘事

Season構(gòu)建了一個涵蓋說話、面部表情和身體動作的大規(guī)模人物視頻數(shù)據(jù)集，并基于先進(jìn)的圖生視頻模型進(jìn)行訓(xùn)練。Season支持驅(qū)動人物、動漫形象和動物照片，可應(yīng)用于視頻創(chuàng)作、舞蹈模板生成、動漫制作等領(lǐng)域

Season最新中文版：

百度網(wǎng)盤：https://pan.baidu.com/s/1KL9YsX-Vjgw-nkhutt2WYA?pwd=x7x2

技術(shù)優(yōu)勢

· 統(tǒng)一輸入范式：將參考圖像、時間幀指導(dǎo)和環(huán)境信息統(tǒng)一輸入公式，使得微調(diào)過程更加高效

· 精準(zhǔn)控制表情與肢體：采用2D骨架信號和“解耦控制”策略，能夠穩(wěn)健處理復(fù)雜動作和捕捉微妙的面部表情細(xì)節(jié)

· 通用符號表示框架：分割角色區(qū)域置零生成二值掩碼，僅在掩碼為零的區(qū)域內(nèi)生成內(nèi)容，實現(xiàn)統(tǒng)一架構(gòu)的雙模式的生成

· 真實光影重塑：引入重光照輔助LoRA，在保持身份一致的前提下，自適應(yīng)調(diào)整色調(diào)與光照，實現(xiàn)物理合理的環(huán)境融合

使用方法

1.選擇模式

主體替換：視頻人物替換

動作遷移：遷移視頻角色的動作到圖片中，由圖片生成視頻

2.上傳視頻文件

3.上傳人物圖片

4.點擊選擇需要替換的視頻對象，一般點擊人物的面部、左肩、右肩、左下、右下，這5處即可，適用于多人場景下的精準(zhǔn)定位

5.選擇生成視頻的長度和迭代數(shù)，高端顯卡一次可生成十幾秒的短視頻，迭代數(shù)越高人物替換效果越好，生成時間也越長，一般保持默認(rèn)6即可

6.選擇生成視頻的寬高，默認(rèn)480:832，數(shù)值可調(diào)，低顯卡可以選擇320:480，橫版視頻比例832:480

7.（可選）開啟視頻高清修復(fù)，默認(rèn)1080p分辨率，可以自行調(diào)整

8.以上是圖片和視頻人物替換的方法，如果只想“替換服裝不替換人物”或者“只替換人物不替換服裝”，可以在文本框中輸入提示詞，支持中英文

9.點擊生成，可以批量生成視頻，每多點一次，就會添加一個新的任務(wù)到隊列中

可以在軟件后臺查看當(dāng)前的執(zhí)行進(jìn)度，程序處理完畢會輸出信息outputs，生成的視頻默認(rèn)保存在項目路徑的“生成結(jié)果”文件夾下，也可以在“輸出界面”的右上角點擊下載

注意事項

①項目經(jīng)過了優(yōu)化，支持GTX1060 6G以上N卡運行此項目

②顯卡越好，人物替換效果越好，建議顯存不低于8G

③使用過程中若不慎關(guān)閉軟件后臺，請重新打開，并刷新網(wǎng)頁