当你的照片也能跳一支舞AI动作迁移完全指南【免费下载链接】ComfyUI-MimicMotionWrapper项目地址: https://gitcode.com/gh_mirrors/co/ComfyUI-MimicMotionWrapper你拍一张照片放进舞蹈视频里照片里的人就开始跟着视频跳舞、逐帧摆动。ComfyUI-MimicMotionWrapper是一个把腾讯 MimicMotion 技术装进 ComfyUI 的动作迁移插件喂给它一张参考图和一个动作视频它就输出一段这个人在跳这支舞的新视频。 你拿到的是什么动作迁移解决的三件事不用动捕服动作来自普通视频视频里的人能被看清系统就能识别出骨架长相只认参考图脸、服装、整体形象跟着你给的参考图走只有动作被替换纯可视化操作全部是 ComfyUI 节点连线、点运行不需要写一行代码模型自动下载首次运行自动拉取 MimicMotion 主模型约 3GB和 SVD 基础模型约 4GB不用手动找地址速度可调节可切换少步数调度器先快速看效果再精修⚡ 从安装到出片跑通你的第一个动作迁移先把插件装进 ComfyUI 的 custom_nodes 目录依赖一条命令装完git clone https://gitcode.com/gh_mirrors/co/ComfyUI-MimicMotionWrapper cd ComfyUI-MimicMotionWrapper pip install -r requirements.txt你要准备的两样东西它的输入其实就两样参考图你想让谁跳和动作视频想跳哪支舞。两者分辨率必须一致工作流里已有校验这是唯一硬性要求。仓库里自带示例动作视频assets/example_data/videos/pose1.mp4第一次可以直接拿它试。加载示例工作流打开 ComfyUI载入examples/mimic_motion_example_02.json这条示例工作流把示例素材换成你自己的图片和视频即可。节点链路是固定的加载动作视频 → 提取姿态 → 参考图与姿态一起送入采样器 → 解码 → 合成视频输出。推荐起始值第一次跑建议全用默认值25 步推理、cfg 强度 2.0、fps 15、pose_strength 保持 1.0。嫌慢就把 DiffusersScheduler 节点切成少步调度器、把 steps 调小。先跑通再说参数后面慢慢磨。 AI动作迁移是怎么实现的一段话讲清原理打个比方它像看着影子学动作先把动作视频里的人抽成一张张火柴人骨架图再让扩散模型照着骨架把参考图里那个人一帧帧画出来。数据流很直白输入参考图 动作视频帧序列抽姿态mimicmotion/dwpose/里的 DWPose 检测器逐帧识别并画出骨架然后按线性缩放把骨架对齐到参考图的人物尺寸——这一步保证新视频里的人不会忽大忽小生成与解码mimicmotion/pipelines/中的管线把参考图和骨架序列作为条件分块做扩散采样最后把潜变量解码成视频帧不用记任何公式只需要记住一句话动作被翻译成数据再回放给另一副身体。 三个今晚就能用的场景模特批量换一套动态电商或穿搭账号里模特只拍得出静态图但客户要动起来。拿同体型模特的动作视频加目标模特的服装图批量生成同一套动作的新画面。舞蹈视频换主角短视频创作者做换人跳舞原编舞视频不变只把画面里的人换成你给的照片素材立刻翻新成本接近零。拍摄前先看动作效果动作指导或内容策划在实拍前想确认某段走位在另一体型的人身上好不好看可以先用迁移预览一版把不合适的动作提前筛掉。 参数调优与常见坑的答案为什么新视频里的人忽大忽小姿态提取会按参考图自动对齐尺寸但动作视频和参考图的人物占比差距太大时仍会偏差。把两个素材都裁到人占满画面基本就稳了。为什么慢、或者显存不够用先把 steps 从 25 降到 20换成少步调度器长视频可以调大 context_overlap 减少分块重复计算。跑完把 keep_model_loaded 关掉能立刻腾出显存。cfg_min 和 cfg_max 两个数是干嘛的它们是整段视频里引导强度的下限和上限。两个填一样默认都是 2.0就是恒定强度填成不同值强度会在视频里渐进过渡。参数作用推荐值steps推理步数越多越稳25少步调度可更低cfg_min / cfg_max引导强度上下限2.0 / 2.0pose_strength对骨架动作的跟随程度1.0context_size长视频分块长度161.1 模型用 72fps输出帧率15⚖️ 对比传统做法变化在哪维度动捕 / 手动关键帧本项目启动成本动捕设备或建模技能一张图加一段视频试一个动作数小时起步几分钟改一版动作重打关键帧 / 重捕改参数重跑多角色批量逐个制作换参考图连跑设备依赖动捕服、影棚一张显卡加 ComfyUI差距不是 AI 已经等于专业动画而是单次试错成本降了一个数量级——对打样和筛选阶段来说这足以改变工作方式。 边界实话有两点留意动作视频和其中的人物可能涉及版权与肖像权商用前想清楚授权另外它输出的是视频画面不是可用的 3D 骨骼动画没法直接喂给游戏引擎最适合出片不适合做资产生产。 看完就能动手了今晚你就能跑出自己的第一条动作迁移视频把自己的照片和视频换上examples/里的示例工作流点运行。第一条片子不会完美调几轮参数就有惊喜——去玩吧 【免费下载链接】ComfyUI-MimicMotionWrapper项目地址: https://gitcode.com/gh_mirrors/co/ComfyUI-MimicMotionWrapper创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考