微软开源图片模型ART,可生成多图层透明图片

站长之家 2025-03-05 11:27:24新闻资讯
386

在图像生成领域,多层图像生成技术正逐渐改变用户与生成模型的互动方式,允许用户隔离、选择并编辑特定的图像层。近日,微软研究人员推出了一种名为 “Anonymous Region Transformer”(ART)的新型技术,它能够根据全球文本提示和匿名区域布局,直接生成可变多层透明图像。

微软开源图片模型ART,可生成多图层透明图片

ART 的设计灵感来源于 “图式理论”,通过采用匿名区域布局,使生成模型可以自主决定哪些视觉信息与哪些文本信息对齐。这一方法与以往的语义布局形成鲜明对比。传统的语义布局通常需要明确的对应关系,而 ART 的匿名区域布局则提供了更大的灵活性。

值得注意的是,ART 引入了一种逐层区域裁剪机制,该机制只选择与每个匿名区域相关的视觉信息,从而显著降低了注意力计算的成本。这种方法不仅加快了生成速度,使其比全注意力方法快12倍以上,还有效减少了图层之间的冲突,能够处理50个以上不同层次的图像生成。

此外,ART 还提出了一种高质量的多层透明图像自编码器,支持以联合方式直接编码和解码可变多层图像的透明度。这一创新设计为精确控制和可扩展的层生成提供了新的可能性,进一步推动了交互式内容创作的发展。

项目:https://art-msra.github.io/

微软 图片模型
THE END
tom
不图事事圆满 但图事事甘心。

相关推荐

Artalk:一款开源、轻量且可自托管的评论系统,支持部署到任何网站
Artalk 是一款基于 Golang 后端和 JavaScript/TypeScript 前端的开源自托管评论系统,专为博客、静态网站、企业官网等场景设计。项目采用 MIT许可证,支持多语言、多站点管理...
2025-09-12 新闻资讯
536

国内中文字体商用授权情况一览(微软雅黑、思源黑体等)
在数字化内容创作与商业传播中,中文字体的选择已从单纯的美学需求演变为法律合规与商业安全的双重考量。本文站长工具网聚焦微软雅黑、思源黑体等主流中文字体,结合方正字库...
2025-09-12 站长之家
523

VibeVoice:微软开源的一款文本到语音(TTS)生成模型
VibeVoice 是微软研究院开源的一款革命性音频生成模型,其1.5B版本在语音合成领域实现了多项重大技术突破,被业界誉为"语音界的Sora"。作为基于人工智能的文本转语音(TTS)系统...
2025-08-26 新闻资讯
903

Wassette:微软开源的一款专为AI Agent设计的安全工具
Wassette 是微软开源的一款专为AI Agent设计的安全工具扩展运行时,基于Rust语言和WebAssembly(Wasm)技术构建。其核心目标是解决AI Agent在动态加载外部工具时的安全性问题...
2025-08-08 新闻资讯
504

ART(Agent Reinforcement Trainer):OpenPipe开源的强化学习(RL)框架
ART(Agent Reinforcement Trainer)是由OpenPipe团队开发的一个全新开源强化学习(RL)框架,专门设计用于训练各类智能体(Agent)在各种任务中实现更优表现。作为一个基于P...
2025-07-16 新闻资讯
704

EarthMind:面向多粒度多传感器地球观测的统一多模态大模型
EarthMind 是由意大利特伦托大学、德国柏林工业大学、慕尼黑工业大学以及保加利亚INSAIT研究院联合开发的开源多模态大模型项目,专门针对地球观测(Earth Observation, EO)数据...
2025-07-07 新闻资讯
372