猫眼影戏
猫眼影戏
萧太后河
手机审查
猫眼影戏记者 威尔史密斯 报道Q8X2R7L1T4J5M9B6W3
新智元报道
编辑:LRST
【新智元导读】最新要领FFGo改变了我们对视频天生模子中第一帧的明确。第一帧并非简朴起点,而是模子的「看法影象体」,存储了后续画面的视觉元素。FFGo通过少量样本和特殊训练,激活模子的这种能力,实现高质量的视频定制,无需修改模子结构或大宗数据,为视频天生开发了新偏向。
在Text-to-Video / Image-to-Video 手艺突飞猛进的今天,我们已经习惯了这样一个知识:
视频天生的第一。‵irst Frame)只是时间轴的起点,是后续动画的起始画面。
但马里兰大学、南加利福尼亚大学、麻省理工学院的最新研究发明:第一帧的真正角色完全不是「起点」,它着实是视频模子的「看法影象体」(conceptual memory buffer), 所有后续画面引用的视觉实体,都被它默默贮保存这一帧里。
论文链接:https://arxiv.org/abs/2511.15700
项目主页:http://firstframego.github.io
该研究的起点,源于对视频天生模子中一个普遍保存但尚未被系统研究的征象的深入思索。
论文的焦点洞察很是大胆:视频天生模子会自动把首帧中的角色、物体、纹理、结构等视觉实体,所有「记着」,并在后续帧中一直复用。
换句话说,岂论你给几多参考物体,模子都会在第一帧悄悄把它们打包成一个「看法蓝图(blueprint)」。
研究者用Veo3、Sora2、Wan2.2等视频模子测试发明:
若首帧泛起多工具组合, 在很少的情形下,通过使用特殊的转场提醒词 ,模子在后续帧里能自然融合它们, 甚至能支持跨场景转场、坚持角色属性一致;
可是这个神奇的转场提醒词 关于每个模子,每个要天生的视频都是纷歧样的,并且模子在转场融合多物体后常;岜⑽锾,场景一致性损失,或者物体丧失的问题。
这说明:
? 第一帧是模子「影象」外来参考的地方
? 但默认情形下,这种能力「不稳固、不可控」
FFGo要领
不改结构、不大规模微调,只用20–50个例子就能让任何预训练的视频模子变身强盛的「参考图驱动视频定制系统」。
研究者基于这个洞见提出了一套极其轻量的做法 :FFGo。
要害优势震撼整个行业:
? 不修改任何模子结构? 不需要百万级训练数据? 只需 20–50 个 carefully curated 的视频例子? 几个小时的 LoRA 训练? 就能实现SOTA级别的视频内容定制
这在现有要领中险些是不可想象的。
研究职员列出了6大应用场景:
机械人操作(Robot Manipulation)
自动驾驶模拟(Driving Simulation)
航拍/水下/无人机模拟(Aerial / Underwater)
多产品展示
影视制作
恣意多角色组合视频天生
用户只需要给模子一张包括多个物体/角色的首帧,再配一个文本prompt,FFGo就能让模子自动「记着」所有元素并天生交互视频, 且画面一致性、物体身份坚持、行动连贯都很是强,甚至支持「多达5个参考实体同时融合」, 而 VACE/SkyReels-A2限制在3个以内,会直接漏物体。
手艺亮点
用VLM自动构建20–50条高质量训练集
用Gemini-2.5 Pro自动识别远景物体, 用SAM2提取RGBA mask, 自动天生视频文本形貌,构建适配视频模子输入的训练样本, 这大大降低了手工事情量。
使用Few-shot LoRA激活模子「影象机制」
研究发明:
模子自然具备融合多参考物体的能力, 但默认难以「触发」
一段特殊prompt(如「ad23r2 the camera view suddenly changes」)能起到「转场信号」的作用
LoRA学到的不是新能力,而是「怎样触发这些能力」,推理时只需丢掉前4。╓an2.2的压缩。
视频真正的混淆内容在第5帧之后最先。前4帧是压缩帧,直接舍弃即可。
FFGo为什么这么强?
研究职员做了大宗比照实验:? FFGo 能坚持物体身份一致性(Identity Preservation)? 能处置惩罚更多参考工具(5个 vs 3个)? 能阻止大模子微调带来的「灾难性遗忘」? 输出画面更自然、更连贯
特殊是在多物体场景和通用的多物体互动场景下 FFGo的天生效果显著优于VACE和SkyReels-A2。
基础模子无意「乐成」,代表了什么?
在研究FFGo的历程中,有一个特殊要害的实验图示值得单独拿出来说:在无意的、极有数的情形下,Wan2.2原始I2V模子也能完成一次「完善」的使命:
多个参考物体没有消逝
场景转场坚持稳固
行动连贯、身份一致
与文本提醒(例如 wingsuit 航行者与 Cybertruck 贴合运动)高度匹配
若是只看这一组效果,你甚至会以为原始模子自己就具备稳固的多工具融合能力。
但事实恰恰相反,乐成的意义并不在于「基础模子体现很好」,而是在于:基础模子原来就「拥有」这种能力,只是大大都时间无法被稳固激活。
研究团队的洞察在这里被证实:
? 视频天生模子确实会把多个参考实体存进第一帧的内部影象结构中? 视频模子自己能执行「多工具+行动一致」的天生? 但这种行为默认险些不可控、不稳固、难复现
这就像模子体内藏着一块「隐藏 GPU」,无意会亮一下,但你完全不可指望它全天候事情。
FFGo不是教会模子新能力,而是让它「稳固施展」
在上述比照中,FFGo的效果与原始模子的「无意乐效果果」险些一致,这说明:FFGo的LoRA不是在重写模子,而是在激活已有的潜在能力。
换句话说:原始模子=有潜力,但无法一连施展,而FFGo=让潜力酿成稳固能力(且不破损预训练知识)
论文中提到,FFGo能保存原模子的天生质量,而不是像古板大规模微调那样牺牲泛化能力, 没有任何微调可以媲美预训练的数据质量和学习效果。
这个实验也证实晰一件极具革命性的事:首帧自己就具备「看法影象体」的角色、视频模子天生可以做多工具融合、要害只是缺乏一个「触发机制」。
FFGo做的就是:用几十条样本、一个全心设计的转场标记(transition phrase)、Few-shot LoRA,把这种能力重新「开机」,并且让它可控、稳固、可靠。
这也是为什么:FFGo能用20–50个样例,把SOTA模子甩在死后。
这个实验所转达的,实质上就是一句话:视频模子已经足够强,只是我们已往一直没有找到准确的用法。
而FFGo正是在教我们一件事:怎样「准确使用」视频天生模子。
总结
用一句话归纳综合这篇论文的研究意义:它不是让模子学会新能力,而是教我们怎样使用模子已经拥有但从未被准确使用的能力。
研究职员提出了一个极具启发性的未来偏向:
更智慧地使用模子,而不是更暴力地训练模子 用更少的数据、更轻的微调,获得更强的定制能力 把「首帧作为看法影象体」酿成视频天生的新范式
总之,在视频模子中:
第一帧不是起点,而是模子的「影象库」, 视频模子自然具备多工具融合能力
FFGo用极低本钱把这种能力「叫醒」, 不改结构、不必大数据, 仅20–50个例子即可实现SOTA视频定制
实验笼罩机械人、驾驶、影视等多场景, 用户研究中以81.2%票数大幅领先
这篇论文不但是一个手艺突破,更像是翻开了视频天生模子的「隐藏手艺树」。
参考资料:
https://arxiv.org/abs/2511.15700
秒追ASI
?点赞、转发、在看一键三连?
点亮星标,锁定新智元极速推送!
UniV
??时势1:A片视频免费在线播放
??12月03日,一汽车撞上白宫建筑群外围安全护栏 司机当场死亡,
村人一惊,尤其是孩子们,感受到了阵阵冷冽的寒意,怎么说翻脸就翻脸了?
,黄色三级无遮挡乱弄很黄一进一出。??12月03日,石河子大学启动农田残膜污染治理项目,
(二)开展首届“美德少年”评选表扬活动。加入美德少年评选的队员通过电子大屏幕先容了小我私家事迹,在队员中爆发了优异的影响。经由评选,有xx名同砚获得“美德少年”称呼,并在六一节举行了表扬;疃目怪傅既逖懊赖隆⒑胙锩赖,践行美德,在家中为尊长尽孝心,在学校为同砚送体贴,在社会为他人献爱心,争做富有理想、品行高尚、充满活力和创立力的新时代好少年。
,bj女团熊猫班全员卸甲视,12岁初中生打扑克,最新国产视频。??时势2:小美女性爱车轮战
??12月03日,浓情端午,奏响文旅融合“龙船调”,
进一步增强信息、督查、政策研究质料的报送事情。地委办公室承办的信息、督查和政策研究事情既是各某地某、各部分向地委以致自治某地党委事情的主渠道,也是地委掌握各某地某、各部分贯彻落实党委决媾和各项事情安排情形的主要手段。近年来,各某地某、各部分起劲报送种种信息、督查和政策研究质料,做了大宗事情。某某、巴里坤某地、伊吾某地、经贸委、生长妄想委员会、统计局、农业局、林业局、建设局、公安局、清静局、劳动包管局等单位在这些方面做得较好。希望继续发挥效果,再接再厉,力争各项事情能再上新台阶。其他单位也要认真查找缺乏,起劲遇上来。与此同时,我们也要苏醒看到,现在党委的信息、督查和政策研究事情与新形势、新使命的生长需要相比,同各级党委的要求相比,尚有一定的差别,还保存一些问题和缺乏。主要体现在:一是信息、督查和政策研究的整体水平还不高,报送的质料有的针对性不强、文字质量不高、数据禁绝确;有的简朴停留在征象表层,缺乏深度思索和剖析,也没有提出操作性较强的应对步伐,能上升到地委向导决议视野的偏少;二是部分一些主要信息、紧迫信息的报送还不敷实时,甚至有迟报、漏报、瞒报的征象。三是机构刷新以后,督查机构举行了新的设置,有的部分对党委督查事情缺乏足够的重视。这里我要强调指出的是,党委督查的机构设置虽然有转变,但督查事情的主要性没有变,督查事情的内容、手段、要求没有变。希望各人切实使用好信息、督查和政策研究事情这一渠道,知缺乏而思进,接纳切实有用的步伐,认真加以解决。
,欧美乱交在线,韩国撸管欧美撸管,原神大尺度视频网站。??12月03日,洛阳古墓博物馆上演“乐舞复活记”,
他事实属于哪一族?回归现实天下后若是将其身份打探出来,一定会让该族成为笑柄,今日这是奇闻。
,国产交换配乱婬直播,欧美日韩免费高清视频在线观看,国在线产精品。??时势3:一个一级黄色一级片
??12月03日,皇岗、福田口岸一个多月迎送出入境人员逾706万人次,
远处的山林间,小不点一怔,这头虎可不简朴,血气兴旺,体内竟生有神秘符文,是一头凶兽。
,咬梨by周扶妖,户籍猎手(破解版)免费下载,青青青国产手机视频在线观看。??12月03日,【新春纪事】174组动车组集结 犹如“陆地航母”蓄势待发,
今天我们在这里举行数信学院消防培训和演练大会。将分两个阶段举行:第一个阶段是消防清静的培训,第二个阶段是实战演练。首先请允许我先容今天到会的守卫处同志,他们是:认真消防培训的黄宏宇做事,认真室外演练的马杰做事,张平做事,陆伟做事。
,国产在线观看一,国产亚洲视频在线免费观看,www.xxx videos.com。??时势4:猛男大粗猛爽h男人味69重置
??12月03日,《海南省陆生野生动物及其栖息地保护规划(2024-2030年)》公开征求意见,
来自云天宫的两个小女人正在跟小不点谈天,咯咯笑个一直,她们时时捏捏小不点的粉嫩小脸,以为这个小孩子特可爱。
,裸交一进一出高潮,91华人自拍视频,黄色视频黄色视频黄色视频黄色视频黄色网址黄色网址黄色网址。??12月03日,国产大飞机即将执飞上海-广州航线,
他看不清真容,整小我私家犹如一个紫色的太阳一样平常,那里光华极盛,将他整小我私家都淹没当中。
,国精产品视频一二二区在线看,韩国午夜理论片在线观看717,被插进去受不了视频。责编:梁晓华
审核:刘柳
责编:加德纳
Copyright (C) 2001- dzwww.com. All Rights Reserved
新闻信息效劳允许证 - 音像制品出书允许证 - 广播电视节目制作谋划允许证 - 网络视听允许证 - 网络文化谋划允许证
山东省互联网传媒集团主理 联系电话:0531-85193202 违法不良信息举报电话:0531-85196540
Copyright (C) 2001- Dzwww 鲁ICP备09023866号-1