三花快讯 · 2024, 5月23日

T-GATE: 几乎无损的扩散模型性能提升

给你的 diffusion 模型带来 10%-50% 的性能提升

T-GATE 可以在保持原始构图,略微降低生成图像的质量的情况下给你的 diffusion 模型带来 10%-50% 的性能提升。

其原理为通过观察在文本到图像的转换过程中,注意力机制的输出会在几次迭代后稳定下来,将生成过程分为规划和细节优化两个阶段。在规划阶段,T-GATE 会缓存这些输出,并在后续的细节优化阶段重复使用它们,从而减少计算量,提升生图速度。

作者表示,TGATE-V2 速度会更快,可以期待一波

商业转载请联系三花微信公众号获得授权,非商业转载请注明本文出处及文章链接,您可以自由地在任何媒体以任何形式复制和分发作品,也可以修改和创作,但是分发衍生作品时必须采用相同的许可协议。

本文采用 CC BY-NC-SA 4.0 - 非商业性使用 - 相同方式共享 4.0 国际 进行许可。