跳到正文

Hallo

由音频驱动的扩散模型肖像动画技术

访问官网

Hallo 是什么

Hallo 被介绍为由复旦大学开发的肖像图像动画技术,利用扩散模型生成逼真且动态的肖像动画。

你可以用它做什么

  • 用扩散模型创建逼真的肖像动画
  • 将嘴唇、表情和姿态运动与音频对齐
  • 自适应控制表情与姿态的多样性
  • 面向不同身份实现个性化定制

技术构成

  • 端到端扩散范式取代依赖参数模型的中间面部表示
  • 基于 UNet 的去噪器用于提高图像质量
  • 时间对齐技术确保动画与音频输入同步
  • 参考网络改善面部动作的精确度

应用场景

  • 电影制作中生成角色逼真的面部表情和口型
  • 游戏开发中为虚拟角色提供动态面部动画
  • 虚拟现实中为用户交互提供更真实的面部反馈

优点与缺点

✓ 我们认可的地方

  • 用基于 UNet 的去噪器提高图像质量
  • 参考网络用于改善面部动作的精确度

! 需要留意的地方

  • 资料记录的入口是产品页面与技术细节
  • 嘴唇、表情与姿态的对齐依赖音频输入

常见问题

由谁开发?

资料写明由复旦大学开发。

合成模块对齐哪些部分?

资料列出嘴唇、表情和姿态运动与音频输入的对齐。

最后评测: 2026-11-15

更多 AI 图像生成 工具

查看全部 →

评测方法