跳到正文

HOI-Swap

兼顾手物交互的视频物体交换

访问官网

HOI-Swap 是什么

HOI-Swap 被介绍为一个基于扩散模型、关注手与物体交互的视频编辑框架,先在单帧完成物体交换,再把编辑扩展到整段序列。

你可以用它做什么

  • 用提供的参考图像替换物体
  • 按物体形状与功能变化调整手部交互
  • 用自生成的数据进行自监督训练

应用场景

  • 视频制作者替换物体,营造更逼真的场面
  • 电影后期人员调整替换后的手部动作
  • 虚拟现实开发者实现更自然的手物交互

优点与缺点

✓ 我们认可的地方

  • 抓握方式随物体形状与功能调整
  • 第二阶段重建完整视频序列

! 需要留意的地方

  • 编辑从单帧替换开始
  • 需要准备物体的参考图像

常见问题

分几个阶段?

资料描述了单帧替换阶段,以及把编辑扩展到视频序列的阶段。

需要标注吗?

资料说明采用自监督训练,无需外部标注数据。

最后评测: 2026-11-15

更多 AI 视频生成 工具

查看全部 →

评测方法