首页
梦瑶 发自 凹非寺量子位 | 公众号 QbitAI
太香了太香了,妥妥完爆ChatGPT和Nano Banana!
刚刚,ViT焦点作者、Meta超等智能团队成员Lucas Beyer连发三条帖子,怒赞通义千问不久前宣布的开源模子Qwen—Image—Layered。
在他看来,这才是图像天生的准确翻开方法~
他还顺便自补了一句:这个模子偏向自己着实也想做来着,只是太忙,一直没来得及下手……(笑)
真话实说,Qwen—Image—Layered模子确实纷歧般,由于它可以让我们真正实现ps级别的拆图自由。
也就是说现在图片元素也支持细腻化修改了:
连网友们看了模子效果后都不禁叹息:咋有种开源PhotoShop的感受,amazing啊~
以是,这套让Lucas Beyer重复点赞的模子究竟强在哪儿,咱一起来看!
图片也能像PS一样拆拆拆了
若是说Nano Banana手艺点在生图,那Qwen—Image—Layered模子则厉害在:《拆图》。
相信各人都有过类似的履历,我们平时用大模子生图时总会碰的到一个抓狂问题,那就是图片天生so easy,细节修改so抓狂。。
AI生出来的图片里,经;嵊幸恍┬∠附诓惶轿,但我们又没法只改局部,只能整张丢回模子重新天生,效果往往还不如上一版…
Qwen—Image—Layered模子的焦点能力,就是专治「一图定生死」这事儿的。
它能将一张通俗图片剖析成多个包括透明度信息的RGBA疏散图层,实现真正意义上的图片素材的可编辑性。
光说看法有点笼统,咱直接看例子~
在官计划例中,一张完整图片输入之后,模子会自动把画面拆成6个包括差别元素的图层,配景是配景,人物是人物,装饰是装饰,互不滋扰。
看到这儿各人是不是突然感受,这个很是适适用在海报制作等细节较多的图片上??(雀实
可是Qwen—Image—Layered模子能做的还不止只是疏散图层这么简朴,我们还可以对图层举行二次编辑修改。
好比最基础的:改配景,不动主体。
只替换配景图层的颜色,一张橙色配景的海报,瞬间就能换成蓝色版本:
再好比,直接换主体。
坚持构图稳固,把原图里的长发女孩,换成短发女孩,险些看不出拼接修改痕迹:
再来看下面这个——文字编辑。
我们可以只修改图片中的局部文字,哪怕第一次天生的文字有幻觉问题也不怕了:
除了基本的替换编辑功效外,Qwen—Image—Layered模子还支持调解元素的巨细、删除不想要的元素等等。
例如像这样,我们可以删除掉画面中不想要的元素工具,只保存自己想留的画面元素:
又或者在不拉伸、不失真的条件下,轻松调解元素的巨细比例,着实有点像PS里的自由缩放功效:
值得注重的是,Qwen—Image—Layered模子分层不限于牢靠的图层数目,支持可变层剖析,例如我们可以凭证需要将图像剖析为3层或8层:
这个能力很是适合我们在差别的编辑需求场景下使用,可以凭证我们想局部编辑的元素数目多或少而定。
虽然,若是只是想改文字,差未几两三层就够了,若是修改需求较量多较量重大,多拆几层反而更好操作~
除了适才说的这些,模子还支持在已剖析的图层基础上做进一步剖析,进而实现无限剖析,听上去很像无限套娃…
像下面这位网友,用Qwen—Image—Layered把人物元素举行一次性分层处置惩罚,最后甚至可以一起拆到只剩下一个线稿层:
再来看这位网友,原自己物和配景完全糊在一起的一张图,被模子直接拆成了主体和配景两个自力元素:
简朴说就是:只要画面里不止一个元素,它就能拆、还能一直拆……
拆图的本事来自于扩散模子
有朋侪看到这儿该问了,小小模子背后能有这PS一样平常的能力,用的是啥神奇邪术?
不藏着掖着,Qwen—Image—Layered的焦点手艺,实质上是一套端到端的「扩散模子」。
它并不是用来天生图片的那种扩散模子,而是专门为「拆图片」这件事设计的——
模子直接输入一张完整的RGB照片,通过扩散历程,一步步展望出多个带透明度信息的RGBA图层。
这里有一个绕不开的条件是:
我们平时看到的图片着实只有RGB三个通道,但真正的图层编辑,离不开Alpha(透明度)通道。
为此,Qwen—Image—Layered专门设计了一套四通道的RGBA-VAE,把RGB输入和RGBA输出,统一压缩到统一个隐藏空间中:
详细来说,当输入是一张通俗RGB图片时,模子会自动把Alpha通道补成1(完全不透明),在初始化阶段还会智慧地复用预训练参数,阻止在透明度建模时蜕化。
这样一来,模子从一最先就「懂透明」,差别图层也就不会被混在一起。
并且在结构上模子也不是死板拆层,它的焦点Transformer—VLD-MMDiT会凭证图片重漂后,自动决议需要拆成几多层。
为了阻止前一层把后一层盖住的问题,模子还加了一套Layer3D RoPE(三维位置编码),简朴说就是给差别图层打上明确的层级标签,让模子在空间温顺序上都分得清晰~
还不止云云,在隐藏空间里中,模子能够被逐步「指导」去学会:哪些像素该属于哪一层、哪些区域需要保存透明度、哪些内容应该被疏散开来。
这样一来哪怕图层再多对模子来说也都是小case了~
并且在训练战略上模子也不是从零教的,而是基于Qwen-Image预训练天生模子逐步升级:
第一阶段让模子学会文本天生单RGBA图层,第二阶段让模子学会扩展到多图层合成,第三阶段让模子真正学会从图片反向拆解多图层。
每阶段几百K步训练,加上重修损失和感知损失,确保语义疏散清洁、不冗余。
这样一来利益很直接,以前要领(如LayerD)要递归抠远景再补配景,容易积累过失,或者用支解+修复,遮挡区补欠好。
Qwen—Image—Layered模子直接实现端到端天生完整RGBA层,阻止这些问题,尤其善于重大遮挡、半透明和文字。
相较于Nano Banana的“一次抽图定生死”,Qwen—Image—Layered的拆图能力能让Lucas Beyer这么喜欢,也就不希奇了…
现在模子已经开源,感兴趣的朋侪可以试试~
github开源地点:https://github.com/QwenLM/Qwen-Image-Layered
《抠小逼小说》,《Q8X2R7L1T4J5M9B6W3》17c男桶女唧唧
“欧美性爱顶爆”
亚洲视频在线观看视频
……
01月02日
“91色色色色视频”邓超 水瓶座
↓↓↓
01月02日,时隔12年夺回汤杯尤杯 国羽迈进新一代,女同被 c 扒衣服小说,调教师下载视频,在线综合亚洲欧洲综合网站,18鍕曫煃嗮煃戰煍炩潓鉂屸潓
01月02日,东西问·名家坊丨白先勇:青春版《牡丹亭》何以青春?,电锯人创黄,免费无码十八禁污污网站,www.4455AV,成人午夜黄色视频
01月02日,黑色星期一,日韩股市重挫!,久久久99人妻免费精品区一,www,三级片,futa XXX Hentap,一级在线毛片
01月02日|内蒙古达里湖冬捕:传承渔猎文化 进行生态保护|色网站视频|久久精品高清一区二区三区亚洲|男生打 视频gvwww|www.草
01月02日|中国各地文旅借《黑神话:悟空》热度上演“七十二变”|又色又污又黄又爽又吃胸|抹布安迷修微博高清合集|深夜yello想要草|超超碰在频
01月02日|2024年北京市社区运动会营养社区行启动|少妇免费一区二区三区|日韩久久无码免费看A天天影院|欧美日韩一区二区在线精品|欧美大战性久久一区二区三区……
01月02日,跨省也能给家人用 快来学习“医保钱包”如何操作,操操女人,色狼APP官方版下载,aaaaa三级片黄色网站视频免费观看,你懂的国产在线观看
01月02日,提高就业补助资金使用效益 哪些人可以享受职业培训和社会保险补贴?,91人人人人操,巨颈中出人妻,丝袜性爱视频,美女a片床上线免费看不卡,
01月02日|西安机场进境水果指定监管场地迎来今年首批进口水果|国产精品久久久久久亚洲按摩|无码免费一区二区三区免费播放|在线免费观看啊嗯视频|男生女生一起修滑轮车
01月02日,往来港澳“说走就走”,大湾区融合加力提速,海姆斯利外网原版gif,亚洲国产91精品国自产拍,四川妇女野外打野战A片,A片二级在线观看
01月02日,美国冬季风暴肆虐 近2000个航班被取消,www高清性爱视频,色色色资源一区二区,东京热无码人妻AⅤ综合,视频福利免费
01月02日,【代表委员之声】兜住、兜准、兜牢民生底线,黄片永久免费,:欧美性爱XⅩⅩⅩX视频,蜜桃91精品秘 入口,国产一区二区 无码 在线视频
01月02日|中新健康丨步入转型升级期的药店走向何方?业界:差异化竞争、打造全链条服务|秋霞理伦|亚洲色图 偷窥|日韩女优在线视频|国模少妇一区二区三区三区
01月02日|中国海警局就菲位南海多点侵权挑衅发表谈话|美女夺逼|鸡鸡图露胸|亚洲色图欧美色图日韩|日本国产精品老热女
01月02日|财政部:将会同相关部门指导地方合理把握专项债券发行节奏|91人妻 论坛|欧美日韩国产深喉七海|女人爽到高潮视频国产在线观看|人妻无码中文字幕Av不卡
揭露波音安全问题的前员工被发现死亡,张艺兴给王大陆叫外卖|今年前两个月中国汽车销量达402.6万辆|Angelina高潮在线观看|最新欧美熟妇精品视频|免费男人网站|精品人妻网站
监制:邓金木
策划:赖晗
主创:唐征宇 林箴贺 陈佛烘 颜亦阳 陈林韵
编辑:王家菁、段圣祺
“战争对美国人和美国经济都有害”
美运动员兴奋剂阳性却参加奥运 中国反兴奋剂中心:USADA赤裸裸的虚伪双标
【小新的Vlog】走啊!跟着小新“穿越”古今 火山岩间赏杜鹃
通讯:穿着狩猎服饰赴“尔滨”的内蒙古“80后”
香港交易所将推出虚拟资产指数系列
为何新疆多地震感强烈?还会有较强余震吗?专家解析
西藏戍边民警守护震后小镇 期待重归往日光景
中国工信部:暂停公示公告新的钢铁产能置换方案
习语|“不负青春、不负韶华”
“奥运滑板少女”的新“曦”望:参加更多高水平比赛提升自己
国产综合色产在线精品观看
91福利网站
黄视频免费观看网站
视频一区日韩
91亚洲嫩草
白素贞一级婬片A片
日韩男女啪黄在线观看
自拍偷拍日韩有码制服丝袜
国产一区二区视频免费看
人形雷达女孩漫画免费

闽公网安备 35010302000113号