AI动作迁移是什么
AI动作迁移,是把一段视频里的动作,交给另一个角色去做。你提供一段参考视频和一张角色图,得到的就是你的角色完成同样动作的新视频。
做短视频时常有这种需求:一支舞或一个手势舞很顺,想让自己的角色来跳。角色可以是二次元、国风,也可以是品牌形象。动作迁移解决的就是这件事。
系统会逐帧读取参考视频,再把动作映射到你的角色身上:
- 复制的部分: 姿态、手势、节奏、肢体的运动弧线,还有走路的步调。
- 保留的部分: 角色图里的脸、体型比例和整体样子,以及角色图所在的场景。
- 比提示词更稳: “她自信地走路”可以生成十种不同的走法。有了参考视频,就不用再猜,动作看起来更自然。
AI动作迁移示例
同一段参考舞蹈,可以有两种用法。动作迁移把它搬到角色图里的宇航员身上,让她在自己的红色荒漠里起舞。Morphic Recast 则保留原来的屋顶、镜头和光线,只换掉舞者。
参考视频
动作迁移
Morphic Recast
走路是最容易迁移干净的动作之一。步速和回头的那一瞥来自参考视频,男人、他的外套和秋天的公园则来自角色图。
参考视频
动作迁移
在 Morphic 里怎么做动作迁移
Motion control 直接在 Canvas 上运行。结果会和你的其他镜头放在一起,可以接着裁剪、延长或配乐,不用导出。
打开 Motion control
打开 Motion control 工具。提示栏会要求你放入一张角色图和一段动作参考视频。

放入参考视频和角色图,并给它们命名
上传参考视频和角色图。写提示词时,用名字指代它们。比如:“Image 1 里的宇航员,在自己的红色荒漠里完成 Video 1 里的舞蹈”。想换成国风或二次元角色,就换一张角色图,再改一下描述。比如:“Image 1 里的国风少女完成 Video 1 里的舞蹈”。

生成,然后在 Canvas 上查看
点击生成。新视频会出现在 Canvas 上。它的详情里保留了提示词和两份参考,所以你可以用同一套设置重新提示。

更想用大白话下指令?在 Copilot 里附上同样两个文件,并说明各自的名字。比如:“让 Image 1 里的角色做 Video 1 里的舞蹈”。Copilot 会替你完成动作迁移。

需要定制的动作迁移 Workflow? 我们和你一起搭。
面向工作室、代理公司和游戏团队。告诉我们你的角色、参考视频和交付方式。我们会围绕它们设计专属的动作迁移 Workflow,从第一次迁移,到剪好的成片。
动作迁移哪些效果稳,哪些会出错
效果稳的情况
- 全身入镜的动作: 走路、跳舞、做手势、运动动作。
- 稳定的节奏: 摇摆、迈步、挥手,给模型的信号最干净。
- 体型相近: 角色和参考主体比例接近,更容易保住角色自己的样子。
容易出错的情况
- 遮挡: 主体被裁掉、被挡住或背对镜头,模型只能猜姿态。
- 又快又细的细节: 手指、快速的手部动作和细微的表情,最先变形。
- 形体差异大: 让四足动物跳人类的舞,会露出吃力的痕迹。
- 长镜头: 片段越往后,角色越容易走样,所以参考视频越短越稳。
如何准备干净的动作迁移参考视频
让整个主体入镜
从头到尾,让做动作的身体完整留在画面里。最干净的输入是:主体正面朝向镜头,光线好,背景简单。
保持简短、连贯
几秒钟、只有一个清晰动作的视频,比拼了好几个动作的长视频好用。需要两个动作,就分两次运行。
让角色与动作相配
选一张站立、正面朝向的角色图,比例要和参考主体接近。二次元角色、国风角色同样适用。
把动作和角色形象分开评判
先看动作的节奏对不对,再看角色到最后一帧还像不像自己。动作有偏差,就换一段更干净的参考视频。形象有偏差,就换一张更强的角色图。
动作迁移、视频转视频,还是换角?
有四种工具,都是从你已有的动作或素材出发。按“哪些内容必须保留”来选。
| 工具 | 保留 | 改变 |
|---|---|---|
| 动作迁移 | 参考视频里的动作 | 角色和场景,来自你的角色图 |
| Morphic Recast | 场景、镜头、剪辑点和声音 | 画面里的人,换成你照片里的人 |
| 视频转视频 | 动作和节奏 | 外观、年代或环境 |
| 图生视频 | 你的静态图片 | 动作,由提示词生成 |
参考视频跑通以后,可以反复使用。让 Copilot 把同一段视频,依次套到每个新角色上,比如一整组二次元角色或品牌形象。想看逐步点击的版本,见如何将视频动作转移到 AI 角色。
常见问题
AI动作迁移会读取参考视频里的动作,包括姿态、手势和节奏,再套到另一个角色身上,通常是一张角色图。角色会做出参考视频里的动作,同时保持自己的样子。动作取自真实的拍摄,所以往往比用提示词生成同样的动作更自然。
可以。关键不在画风,而在角色图:用站立、正面朝向、比例和参考主体接近的图,效果最稳。同一段舞蹈视频,可以分别套到不同画风的角色上。每个角色各跑一次,就得到一组画风不同、动作一致的版本。
一段几秒钟的短视频,做动作的主体完整入镜,光线好,背景简单。走路、跳舞、做手势这类全身动作迁得最干净。避开被裁掉、被挡住或背对镜头的主体。
又快又细的细节最先变形,比如手指、快速的手部动作和细微的表情。镜头太长,角色也可能走样。参考视频短一点,再选一个体型和参考主体接近的角色,都有助于稳住。
能,前提是物体的形体适合这个动作。能跟着动作变化的形状,效果不错。让小物件去模仿人的步幅,就会露出吃力的痕迹。让动作和目标的体型相配。
两者保留的东西相反。动作迁移保留参考视频的动作,放到新角色身上。视频转视频保留你那段素材的动作,改变它的外观。想让角色完成某个具体动作,用动作迁移。想给手头的素材换风格,用视频转视频。
动作迁移会把角色放进角色图自己的场景里,参考视频只提供动作。换角则保留原视频的场景、镜头和声音,只把里面的人换成你照片里的人。画面本身很重要,就用 Morphic Recast 换角。想让角色待在自己的世界里,就用动作迁移。
可以。用同一段参考视频,给每个角色各跑一次。每次得到的,都是该角色完成这个动作的视频。想让整组角色做同一个手势,这是最快的办法。
