阿里ReplaceAnything框架火了:照片中万物皆可AI替换

站长之家 2024-01-15 14:56:23新闻资讯
309

在近期,人工智能图像处理技术(AIGC技术)备受瞩目,其在图像编辑、生成等领域展现出强大的能力。然而,一个备受挑战的问题是在生成新内容的同时,严格保持指定对象的身份不变。正是为了解决这一难题,ReplaceAnything框架应运而生。

由阿里巴巴集团智能计算研究院团队成员提出了ReplaceAnything框架。这一框架具有极高的灵活性,可广泛应用于人物替换、服装替换、背景替换等多个场景。简单的说,现在只需框住你需要保留的区域,就能把想保留的区域放大任何其它场景中。

其中,引人注目的是在服装替换中,框架能够严格保留掩模区域,实现了内容替换的高质量和高度自定义。

如下图,选中目标物体,如衣服,书包,就能无缝穿在另外一个人身上:

ReplaceAnything.png

再如下图,选中物体,就能把他们放到任何场景中:

ReplaceAnything2.png

比如选中霉霉的脸,就能让她穿上中国旗袍,结果发饰、服装、背景等各种细节全都替换掉了。

ReplaceAnything3.png

这一技术的推出标志着内容替换领域的一项重大进展,为多个行业提供了强大的工具和解决方案。ReplaceAnything框架的引入,将有望推动人工智能在图像处理领域的应用进一步发展,为用户提供更丰富、更个性化的体验。不仅如此,其在多个场景的应用也将为各行各业带来更多的可能性和创新。

目前已经可以免费体验,只要上传图片,点击要保留的对象,输入Prompt或者参考图像,等待生成结果即可。在选择对象时,只需要滑动一下,然后它就会自动识别你要保留的对象。

ReplaceAnything4.png

项目huggingface网址:https://huggingface.co/spaces/modelscope/ReplaceAnything

项目github网址:https://aigcdesigngroup.github.io/replace-anything/

ai
THE END
tom
不图事事圆满 但图事事甘心。

相关推荐

SE-Agent:中科院、清华大学和阶跃星辰等联合开源的创新型自进化智能体框架
一、SE-Agent是什么SE-Agent(Self-Evolution Agent)是由中国科学院、清华大学和阶跃星辰等机构联合开发的一款创新型自进化智能体框架,旨在通过系统性地优化语言模型(LL...
2025-08-21 新闻资讯
555

MemU:NevaMind-AI团队专为AI伴侣打造的开源长期记忆框架
MemU(Memory Unit)是由NevaMind-AI团队开发的一款专注于AI伴侣场景的下一代开源记忆框架,其核心目标是解决当前AI系统普遍存在的"健忘"问题。与传统的静态数据存储不同,Me...
2025-08-19 新闻资讯
1062

AudioGenie:多模态输入驱动的无训练多智能体音频生成框架
AudioGenie 是由腾讯AI Lab与香港科技大学(广州)联合研发的无需训练的多智能体系统,专注于多模态到多音频生成(MultiModality-to-MultiAudio, MM2MA)任务。它能够从视频、...
2025-08-19 新闻资讯
526

VeOmni:字节跳动与火山引擎开源的全模态AI训练框架
VeOmni 是字节跳动Seed团队与火山引擎联合研发并开源的一款全模态PyTorch原生训练框架,旨在解决当前AI领域从单一文本模态向多模态(文本、图像、语音、视频)演进过程中的系...
2025-08-18 新闻资讯
501

RynnRCP:阿里巴巴达摩院开源的一套机器人上下文协议及框架
RynnRCP 是阿里巴巴达摩院自主研发并开源的一套机器人上下文协议及框架,全称为Robotics Context Protocol。它首次将模型上下文协议(MCP)理念引入具身智能领域,旨在打通从传...
2025-08-14 新闻资讯
482

Voost:NXN实验室开源的一款双向虚拟试衣框架
Voost 是由NXN实验室开发的一款创新性虚拟试衣框架,它通过单个扩散变换器(DiT)实现了虚拟试穿(Virtual Try-On, VTON)与逆向试穿(Virtual Try-Off)的联合学习,解决了传统方法...
2025-08-14 新闻资讯
489