首页
梦瑶 发自 凹非寺量子位 | 公众号 QbitAI
太香了太香了,妥妥完爆ChatGPT和Nano Banana!
刚刚,ViT焦点作者、Meta超等智能团队成员Lucas Beyer连发三条帖子,怒赞通义千问不久前宣布的开源模子Qwen—Image—Layered。
在他看来,这才是图像天生的准确翻开方法~
他还顺便自补了一句:这个模子偏向自己着实也想做来着,只是太忙,一直没来得及下手……(笑)
真话实说,Qwen—Image—Layered模子确实纷歧般,由于它可以让我们真正实现ps级别的拆图自由。
也就是说现在图片元素也支持细腻化修改了:
连网友们看了模子效果后都不禁叹息:咋有种开源PhotoShop的感受,amazing啊~
以是,这套让Lucas Beyer重复点赞的模子究竟强在哪儿,咱一起来看!
图片也能像PS一样拆拆拆了
若是说Nano Banana手艺点在生图,那Qwen—Image—Layered模子则厉害在:《拆图》。
相信各人都有过类似的履历,我们平时用大模子生图时总会碰的到一个抓狂问题,那就是图片天生so easy,细节修改so抓狂。。
AI生出来的图片里,经;嵊幸恍┬∠附诓惶轿,但我们又没法只改局部,只能整张丢回模子重新天生,效果往往还不如上一版…
Qwen—Image—Layered模子的焦点能力,就是专治「一图定生死」这事儿的。
它能将一张通俗图片剖析成多个包括透明度信息的RGBA疏散图层,实现真正意义上的图片素材的可编辑性。
光说看法有点笼统,咱直接看例子~
在官计划例中,一张完整图片输入之后,模子会自动把画面拆成6个包括差别元素的图层,配景是配景,人物是人物,装饰是装饰,互不滋扰。
看到这儿各人是不是突然感受,这个很是适适用在海报制作等细节较多的图片上??(雀实
可是Qwen—Image—Layered模子能做的还不止只是疏散图层这么简朴,我们还可以对图层举行二次编辑修改。
好比最基础的:改配景,不动主体。
只替换配景图层的颜色,一张橙色配景的海报,瞬间就能换成蓝色版本:
再好比,直接换主体。
坚持构图稳固,把原图里的长发女孩,换成短发女孩,险些看不出拼接修改痕迹:
再来看下面这个——文字编辑。
我们可以只修改图片中的局部文字,哪怕第一次天生的文字有幻觉问题也不怕了:
除了基本的替换编辑功效外,Qwen—Image—Layered模子还支持调解元素的巨细、删除不想要的元素等等。
例如像这样,我们可以删除掉画面中不想要的元素工具,只保存自己想留的画面元素:
又或者在不拉伸、不失真的条件下,轻松调解元素的巨细比例,着实有点像PS里的自由缩放功效:
值得注重的是,Qwen—Image—Layered模子分层不限于牢靠的图层数目,支持可变层剖析,例如我们可以凭证需要将图像剖析为3层或8层:
这个能力很是适合我们在差别的编辑需求场景下使用,可以凭证我们想局部编辑的元素数目多或少而定。
虽然,若是只是想改文字,差未几两三层就够了,若是修改需求较量多较量重大,多拆几层反而更好操作~
除了适才说的这些,模子还支持在已剖析的图层基础上做进一步剖析,进而实现无限剖析,听上去很像无限套娃…
像下面这位网友,用Qwen—Image—Layered把人物元素举行一次性分层处置惩罚,最后甚至可以一起拆到只剩下一个线稿层:
再来看这位网友,原自己物和配景完全糊在一起的一张图,被模子直接拆成了主体和配景两个自力元素:
简朴说就是:只要画面里不止一个元素,它就能拆、还能一直拆……
拆图的本事来自于扩散模子
有朋侪看到这儿该问了,小小模子背后能有这PS一样平常的能力,用的是啥神奇邪术?
不藏着掖着,Qwen—Image—Layered的焦点手艺,实质上是一套端到端的「扩散模子」。
它并不是用来天生图片的那种扩散模子,而是专门为「拆图片」这件事设计的——
模子直接输入一张完整的RGB照片,通过扩散历程,一步步展望出多个带透明度信息的RGBA图层。
这里有一个绕不开的条件是:
我们平时看到的图片着实只有RGB三个通道,但真正的图层编辑,离不开Alpha(透明度)通道。
为此,Qwen—Image—Layered专门设计了一套四通道的RGBA-VAE,把RGB输入和RGBA输出,统一压缩到统一个隐藏空间中:
详细来说,当输入是一张通俗RGB图片时,模子会自动把Alpha通道补成1(完全不透明),在初始化阶段还会智慧地复用预训练参数,阻止在透明度建模时蜕化。
这样一来,模子从一最先就「懂透明」,差别图层也就不会被混在一起。
并且在结构上模子也不是死板拆层,它的焦点Transformer—VLD-MMDiT会凭证图片重漂后,自动决议需要拆成几多层。
为了阻止前一层把后一层盖住的问题,模子还加了一套Layer3D RoPE(三维位置编码),简朴说就是给差别图层打上明确的层级标签,让模子在空间温顺序上都分得清晰~
还不止云云,在隐藏空间里中,模子能够被逐步「指导」去学会:哪些像素该属于哪一层、哪些区域需要保存透明度、哪些内容应该被疏散开来。
这样一来哪怕图层再多对模子来说也都是小case了~
并且在训练战略上模子也不是从零教的,而是基于Qwen-Image预训练天生模子逐步升级:
第一阶段让模子学会文本天生单RGBA图层,第二阶段让模子学会扩展到多图层合成,第三阶段让模子真正学会从图片反向拆解多图层。
每阶段几百K步训练,加上重修损失和感知损失,确保语义疏散清洁、不冗余。
这样一来利益很直接,以前要领(如LayerD)要递归抠远景再补配景,容易积累过失,或者用支解+修复,遮挡区补欠好。
Qwen—Image—Layered模子直接实现端到端天生完整RGBA层,阻止这些问题,尤其善于重大遮挡、半透明和文字。
相较于Nano Banana的“一次抽图定生死”,Qwen—Image—Layered的拆图能力能让Lucas Beyer这么喜欢,也就不希奇了…
现在模子已经开源,感兴趣的朋侪可以试试~
github开源地点:https://github.com/QwenLM/Qwen-Image-Layered
《欧一美一交一配一交一交一视频》,《Q8X2R7L1T4J5M9B6W3》人人干人人爽人人操
“好男人社区在线视频www”
馃崋馃崙馃崋
……
01月02日
“1024视频绝对无毒你懂的”中国体育代表团呼吁包容失误运动员
↓↓↓
01月02日,2024亚洲种子大会在三亚举办 促进种业国际贸易交流,操操操人人干,午夜性爱视频在线,日韩欧美A级v片免费播放,国产欧美 激情
01月02日,两会访谈|统筹新型城镇化和乡村全面振兴,AA黄色网站视频,www.99riaⅴ,曰本无码l,av女人天堂
01月02日,新能源汽车→油泼面、立柱架梁→联通万里,“钢铁驼队”有新变!,国产美女AV自在线拍网站,久久久涩涩欧美一区二区,久久久久免费看黄A级毛片,亚洲精品a一级在线观看
01月02日|云南省社会主义学院党组成员、副院长潘玉良接受纪律审查和监察调查|黄色游戏斗罗大陆|5色网|英国av在线|干死鸥美黄色大片
01月02日|中国航天互联网卫星设计理念首度公开披露|快播污软件下载|嗳潮生活馆|www..com三级片|丰滿肉肉BBwwBBww
01月02日|音乐剧《飞天》获第十七届精神文明建设“五个一工程”优秀作品奖|欧洲黄色网页|馃惢馃惢馃敒馃敒馃崋馃崋|国产 古装 三级 在线|中文人妻色色……
01月02日,江西南昌赣江江心洲千亩油菜花绽放,国产精品黄片一区二区三区免费,黄色视频性憾黄色视频,黄色一级视频网址,国产视频99
01月02日,秦岭深处的扫山“特种兵”,馃悢馃悢馃崙,欧美精品一区精久久久,www.1922t.com看片,国产精品一区二区首页
01月02日|2024亚洲种子大会在三亚举办 促进种业国际贸易交流|动漫 爆乳 3d网站|青草青草免费视频|二次元裸体 开腿游戏|第一黄色网站在线观看
01月02日,【习声回响】引导激励广大群众依靠自己的双手创造幸福生活,韩日毛片播放,日本A级黄色视频,工本口子库可知子伯母全诗原文,男女嗟嗟又痛痛免费
01月02日,奥运在中国·浙江杭州:攀岩运动迎来热潮 新兴奥运项目激发小镇新活力,色色社区五月,免费在线观看不卡av,国产高清精品国语对白,黑人狂躁中国女人
01月02日,“近便利”台胞服务专区厦门揭牌 台胞连称“真便利”,男生和女生一起轮滑鞋软件下载,在线免费看AV黄片,黄片人人操,天天摸天天碰天天爽天天弄
01月02日|东湖公证归侨侨眷服务站与泰国江西总会(总商会)签约 探索“司侨合作”新模式|国产一级a爱视频|国产国语户外直播A片一级片操BBXⅩⅩ国产麻豆操|国产二区在线视频观看|乱美女免费视频
01月02日|美国加州发生校园枪击事件致1死2伤|女学生裸体秘 无遮挡|琳妮特涩漫|国产男女视频在线观看|黄色视频在线播放www
01月02日|周忠和:中华海外联谊会促交流互鉴 助力中国建设科技强国|广东熟女|aigao视频在线|深夜小视频一区二区免费|91ⅹⅹⅹ看片
EDG全球冠军赛夺冠,男子上山放羊突遇300斤野猪|金星是否存在过表面海洋?国际最新天文研究称从来没有形成条件|99黄色A免费看片视频|特一级AAAAAA色|影音先锋无码AV最新资源站|四虎在线
监制:邓金木
策划:赖晗
主创:唐征宇 林箴贺 陈佛烘 颜亦阳 陈林韵
编辑:王家菁、段圣祺
广东外贸承压而上 主动寻机韧性显现
深圳一施工现场发生地面坍塌 附近居民与在校学生撤离
国家出台首个专门文件——银发经济催生新领域和新赛道
高质量发展调研行|从制水晶到“赛”文旅,这个浙江小村子做对了什么?
《中国大众糖尿病认知调查报告》“出炉”:公众对糖尿病认识水平仍需提升
构建现代物流体系 建设全国统一大市场
两岸菁英文化研习活动在天津大学开幕 海峡同文书院揭牌
15.27亿、3777万观影人次!五一档刷新纪录
中国与新西兰启动自由贸易协定服务贸易负面清单谈判
广西推动高水平共建西部陆海新通道 扩大开放水平
天天碰天天射
精品免费视频区网址
欧美农村激情免费观看
妹妹恋人手游免费下载
美女扒开腿让男人桶到爽
日本特黄黄色网站
28wk4.com
色色淫淫网
毛片免费的网站
欧美日本黄区免费网站

闽公网安备 35010302000113号