跳到正文

MusePose

用姿势引导把参考图像变成人物舞蹈视频

访问官网

MusePose 是什么

MusePose 被介绍为由腾讯音乐娱乐 Lyra Lab 开发的图像到视频生成框架,通过姿势控制信号生成虚拟人物视频。资料称它是 Muse 开源系列的最后一个构建块,与 MuseV 和 MuseTalk 一起,基于扩散模型和姿势引导生成参考图像中人物的舞蹈视频。

你可以用它做什么

  • 根据给定的姿势序列生成参考图像中人物的舞蹈视频
  • 用姿势对齐算法对任意舞蹈视频和参考图像进行对齐
  • 使用基于 Moore-AnimateAnyone 代码修复与改进后的实现
  • 需要时用 FaceFusion 增强人脸区域以提升面部一致性

应用场景

  • 游戏开发者使用 MusePose 生成游戏角色的动态舞蹈视频
  • 动画制作者利用 MusePose 快速制作动画短片中的人物动作
  • 虚拟现实内容创作者为虚拟环境中的角色添加自然流畅的动作

上手流程

  • 安装 Python 环境和 opencv、diffusers、mmcv 等必要的包
  • 下载并准备 MusePose 的预训练模型和其他组件权重
  • 按示例把参考图像和舞蹈视频组织在指定文件夹中
  • 执行姿势对齐,获取参考图像的对齐姿势

优点与缺点

✓ 我们认可的地方

  • 基于 Moore-AnimateAnyone 代码做了重要 bug 修复与改进
  • 提供详细的新手安装教程与模型训练指南

! 需要留意的地方

  • 推理前需要先执行姿势对齐
  • 需下载并准备预训练模型与其他组件权重

常见问题

由谁开发?

资料写明由腾讯音乐娱乐的 Lyra Lab 开发。

姿势对齐有什么作用?

功能列表说明可对任意舞蹈视频和参考图像进行对齐,提升推理性能与模型可用性。

最后评测: 2026-11-15

更多 AI 视频生成 工具

查看全部 →

评测方法