跳到正文

Orthogonal Finetuning (OFT)

用 OFT 微调文本到图像扩散模型

访问官网

Orthogonal Finetuning (OFT) 是什么

正交微调被介绍为一种有效引导或控制文本到图像生成模型完成下游任务的方法。它保持神经元之间的超球面能量不变,从而防止模型坍塌并维持生成能力。

你可以用它做什么

  • 用少量样本微调 DALL-E 生成指定主题图像
  • 结合文字、参考图与控制信号生成可控图像
  • 在微调中避免生成能力退化

方法说明

  • 神经元之间的超球面能量保持不变
  • 防止生成能力下降或模型坍塌
  • 资料列出主体驱动生成与可控生成

优点与缺点

✓ 我们认可的地方

  • 微调时保持原有生成能力
  • 资料列出两类重要微调任务

! 需要留意的地方

  • 方法针对文本到图像扩散模型
  • 所述工作围绕微调任务展开

常见问题

OFT 保持什么不变?

功能列表说明神经元之间的超球面能量保持不变。

研究了哪些任务?

资料列出主体驱动生成和可控生成两类微调任务。

最后评测: 2026-11-15

更多 AI 图像生成 工具

查看全部 →

评测方法