使用的AI工具:
- 图:MidJourney、Nano Banana Pro
- 视频:Vidu、Sora 2、Veo 3.1、可灵O1、即梦
- 配音:Minimax Audio
这个动画创作并发表于 2025 年的12 月,平安夜嘿嘿!一个小小的圣诞特辑。主要是为了探索一下生视频时候的人物动作控制~
制作过程非常艰难。。。结论是:很不好控!
以下为当时的制作分享:
---
斗胆搓了一支动作多些的小片片,主打沙雕欢乐乱斗~
(其实肝的过程头发在掉,心在淌血……
浅浅总结一下在生视频阶段,我试过的一些动作控制小方法,有其他方法欢迎评论区补充!
这里特指:
非纯靠提示词 + 咱就要角色做一串特定要求的动作姿态(不是模型训练成熟的那种)~
【 骨骼迁移大法】
适用场景:复刻成片中已有动作
优点:所谓一键成片吧
缺点:要有优质的参考片、卡通/非人角色仍然不完美
最近新发布了一些的能够自适应骨骼的动作迁移工具(也就是卡通/非人角色,号称终于不会被拉变形了),
比如Steady dancer、One to all 和SCAIL等,
玩下来确实比以前的“动作模仿”可用了,最强的是SCAIL,支持多人,用法大家可以搜到很多教程~
以SCAIL为例小TIPS:
1)角色还是正常一点比较好,比如我这片中的羊毛毡女孩,哪怕只有单人,迁移后变四只手
2) 非人比例的卡通角色 + 多人,就不要考虑了,目前还是会被拉变形
3)参考视频如果是人类,输出的动作会过于丝滑,在一些需要顿挫感、夸张感的动画上,很违和
【 多帧大法】
适用场景:其实就是让模型做补间动画
优点:可双人、不限画风、还原关键帧
缺点:你得是把做图好手 + 疯狂肝分镜~
多帧很多模型早就有了,主要受限于帧间时长太长的问题,
用来控制快速变化的动作效果不太好。
现在最低能控到0.5秒,这样就有的玩了!
血泪TIPS:
首尾放空帧+描述前序/后序动作,我感觉会更好一点,让你的动作开始和结尾能有个自然点的动势
【 线稿序列参考大法】
适用场景:不追求一模一样,就是味儿差不多就得
优点:可双人、比起多帧大法,做图不肝
缺点:很难完全一样,依赖抽卡
这种,就必须用支持多参的视频模型了。
TIPS:
1) 手绘不了的话,让Gemini大神帮你做是蛮省力的
2)把这个动作序列线稿作为参考,4 个以内好一点,我感觉 6 个以上的动作很容易乱掉
3)提示词加上让角色连续流畅的按编号顺序做动作
4)不放心的话,就把每个动作是啥再文字大致描述一下
以上!
我感觉目前多数还是靠提示词 + 依赖模型本身的训练数据,
想要精准的在视频过程精准控制运动姿态不容易,同理可以延展到表情等等……