hjbhjh shared this post · 2h ago
CF长风

这几天在推上刷屏的“神级动捕/动作迁移视频”,底层真实管道梳理清楚了!

不是无脑丢给视频模型抽卡,

而是硬核的工业化管线:

RGBMoCap → 骨骼重定向 → MiniMax H3 → Character Swap LoRA

完整技术栈拆解:

  1. RGB MoCap 单目动捕:

普通手机随手拍一段日常视频,

直接解算 3D 人体网格(SMPL/SMPL-X),零穿戴设备直接扒出完整骨骼动画;

  1. 骨骼重定向(Retargeting):

把真人的骨骼体型映射到目标角色资产上,自动解算修复滑步与穿模,输出干净的 3D 控制层;

  1. MiniMax H3 扛物理底模:

用 H3 极强的时序连贯性和大动态物理稳定性做生成基座,彻底避免大幅度动作导致的抽搐崩坏;

  1. Character-Swap LoRA 换皮渲染:

姿态锁死后交由仅 155MB 的微调 LoRA(Ref2VA int8 + Turbo 8step 官方配方)逐帧重构外观、服饰与光影。

以前动辄上万的动捕服和繁琐的手工关键帧,现在可以被单目视频解算 + 小体积 LoRA 吃透了。

当姿态控制与生成基座分层解耦,AI 视频生成的稳定性才算真正跨过了玩具门槛,有兴趣的朋友可以尝试下。 https://x.com/OJI3_NIKKE/status/2119161807038550342/video/1

372 28 45 17.4K