DreamActor-M1 是什么
DreamActor-M1 被介绍为一个基于扩散变换器(DiT)的人类动画框架,具备细粒度的整体可控性、多尺度适应性和长期时间一致性。该模型通过混合引导生成高表现力和真实感的人类视频,主要优势在于高保真度和身份保留。
你可以用它做什么
- 用隐式面部表示、3D 头球和 3D 身体骨架稳健控制面部表情与身体动作
- 通过逐步训练策略适应各种身体姿势和不同分辨率的图像
- 整合连续帧的运动模式与视觉参考,保持复杂动作中未观察区域的时间一致性
- 扩展至音频驱动的面部动画,实现多语言口型同步
应用场景
- 在动画电影制作中生成高质量的人类角色动画
- 在游戏开发中为游戏角色创建流畅的动作表现
- 在社交媒体内容创作中生成短视频
上手流程
- 准备好参考图像和驱动视频帧
- 将参考图像和视频帧输入到模型中
- 设置混合引导参数以调节面部和身体动作
- 运行模型,生成目标动画视频
优点与缺点
✓ 我们认可的地方
- 高保真度并保留身份特征
- 支持肖像与全身视图及不同分辨率图像
! 需要留意的地方
- 运动转移需要参考图像与驱动视频帧
- 面部与身体动作需设置混合引导参数
常见问题
框架基于什么技术?
资料介绍它是基于扩散变换器(DiT)的人类图像动画框架。
能只传递部分运动吗?
功能列表写明支持仅传递部分运动,例如面部表情和头部运动。
最后评测: 2026-11-15