(2秒快速入门)福利夜网站苹果版v50.75.36.03.80.995-2265安卓网

k1体育麻将胡了

搜索 猫眼影戏 融媒体矩阵
  • 山东手机报

  • 猫眼影戏

  • 公共网官方微信

  • 公共网官方微博

  • 抖音

  • 人民号

  • 天下党媒平台

  • 央视频

  • 百家号

  • 快手

  • 头条号

  • 哔哩哔哩

首页 >新闻 >社会新闻

南大腾讯联合提出TimeLens ,数据+算法全方位升级

2026-01-12 16:45:15
泉源:

猫眼影戏

作者:

冯兰友

手机审查

  猫眼影戏记者 沈晓芳 报道Q8X2R7L1T4J5M9B6W3

随着多模态大模子(MLLMs)的飞速生长 ,模子已经能够很好地明确视频中 “爆发了什么(What)” ,却无法精准地定位到事务在视频中 “何时爆发(When)”。这种视频时序定位(Video Temporal Grounding, VTG)能力的严重缺陷 ,已成为制约 MLLM 迈向更细腻化的视频明确的主要瓶颈。

恒久以来 ,大宗研究致力于设计重大的模子结构 ,却忽视了两个要害问题:在数据层面 ,我们依赖的评测基准是否可靠 ?在算法层面 ,是否保存一套精练通用的最佳实践 ?

针对上述痛点 ,来自南京大学、腾讯 ARC Lab 和上海 AI Lab 的联合研究团队提出了TimeLens(时间透镜) ,系统性地展现了现有数据的“评测陷阱” ,构建出更可靠的评测基准和高质量训练数据 ,并探索出一套精练有用的算法优化。得益于这些孝顺 ,仅8B 参数的 TimeLens 模子成为了开源模子中的新 SOTA ,更击败了 GPT-5 和 Gemini-2.5-Flash 等闭源巨头。

论文问题:TimeLens: Rethinking Video Temporal Grounding with Multimodal LLMs论文链接: https://arxiv.org/abs/2512.14698项目主页: https://timelens-arc-lab.github.io/代码链接: https://github.com/TencentARC/TimeLens

焦点洞察:拨开数据质量的迷雾

在深度学习中 ,“Data is fuel”(数据即燃料)是公认的真理。然而 ,团队发明 ,在 VTG 领域 ,燃料的质量却令人担心。

1. 现有基准的 “隐形陷阱”

研究团队通过一套标注流水线 ,对 Charades-STA、ActivityNet Captions 和 QVHighlights 等主流基准举行了严酷的人工核验 ,发明这些基准数据集中充满着大宗的标注过失。许多样本中的文本形貌模糊不清 ,或是文本形貌的事务在视频中基础未泛起。标注方面 ,也保存大宗的时间界线标注过失 ,或是统一形貌对应了视频中的多个片断却只标注了其中之一(漏标)。统计数据显示 ,这些过失在现有基准中的比例极高。

2. TimeLens-Bench:对评估效果的“拨乱横竖”

为相识决现有数据集中保存的严重过失 ,团队构建了严酷的标注准则 ,对上述三个基准数据集举行了周全的修复和重新标注 ,推出了TimeLens-Bench。这是一个经由严酷交织验证的高质量评测基准 ,能够更真实地反应模子的时序定位能力。

将 TimeLens-Bench 和原始 Benchmark 上的评测效果举行比照 ,揭破了过往评估效果的不可靠—— 旧基准严重高估了开源模子的能力 ,而掩饰了前沿闭源模子(如 Gemini)的真实水平。TimeLens-Bench 对这一过失举行了拨乱横竖 ,事实上 ,现有开源模子仍显着落伍于闭源模子。

3. 高质量训练数据:TimeLens-100K

针对同样低质量的训练数据 ,团队设计了一套自动化流水线 ,对训练数据举行了大规模的洗濯和重标 ,宣布了高质量的大型训练数据集 TimeLens-100K。实验证实 ,数据质量的提升能带来显著的性能增添。

算法设计的“最佳实践”

在夯实数据基础后 ,TimeLens 进一步对 MLLM 在 VTG 使命上的算法设计举行了全方位的消融实验 ,从时间戳编码到训练范式 ,总结出一套精练有用的 “最佳实践”。

1. 精练有用的时间戳编码

时间戳编码(timestamp encoding)是 VTG 使命中的要害模子结构设计 ,决议了模子能否准确地感知到输入的每一视频帧的采样时间。

团队周全地比照了种种时间戳编码方法的优劣。实验效果批注 ,最优的时间戳编码方法是简朴的交织文本编码(Interleaved Textual Encoding) 战略 ,即在每一帧的视觉 Token 前插入文本形式的时间戳 token。这种要领无需修改 LLM 的底层架构 ,包管了实现上的精练 ,同时还能取得最优的效果。

2. 训练范式:Thinking-free RLVR 的胜利

随着 DeepSeek-R1 等一系列事情的提出 ,带有可验证奖励机制的强化学习(RLVR)范式在提升模子推理能力方面的作用备受关注。而在 VTG 领域 ,关于训练范式的几个要害问题尚无定论:

有监视微调(SFT)仍是 VTG 领域最为主流的训练范式 ,RLVR 范式在同样的训练开销下 ,是否显着优于 SFT ?时序定位使命是一个以感知 (Perception) 而非推理 (Reasoning) 为主的使命。针对这样的使命举行 RLVR 训练时 ,显式的思索历程(thinking)是否是必需的 ?SFT+RLVR 的多阶段训练 ,是否比单阶段训练的效果更好 ?

TimeLens 比照了多种训练范式的优劣。结论出人意料且极具启发性:单阶段的 Thinking-free RLVR 训练范式在盘算效率和性能上均取得了最优。该范式直接让模子输出定位效果 ,并凭证定位准确率(IoU)给予奖励。这种方法不需要天生冗长的中心思索历程 ,训练和推理效率高于 Thinking-based RLVR 范式和多阶段训练范式 ,且性能优于 SFT 范式。

这一效果批注 ,关于时序定位这种偏向感知(Perception-heavy)的使命 ,显式的思索历程不是必需的。 模子可以直接学习从使命输入到输出的映射 ,不需要举行重大的逻辑推理。

3. 要害训练技巧:Early Stopping 与 Difficulty-based Sampling

针对Thinking-free RLVR范式 ,团队举行了越发深入的实验探讨 ,发明了两个要害的训练技巧。

首先 ,与 SFT 中 “训练越久越好” 的共识差别 ,在 RL 训练中 ,当奖励指标进入平台期后 ,就应该接纳早息兵略(Early Stopping) 连忙阻止训练 ,在该阶段之后继续训练反而会使得模子的性能下降。

其次 ,基于难度的数据采样(Difficulty-based Sampling) 至关主要。纵然数据的标注质量有包管 ,也并非所有的数据都适适用于 RLVR 训练。需要预先使用待训练的模子举行推理 ,评估每个训练样本的难度 ,采样足够具有挑战性的样本举行 RLVR 训练 ,才华最洪流平上提升模子的性能。

实验验证:8B 模子逆袭闭源巨头

研究团队将上述数据和算法层面的所有刷新聚合在了一起 ,每一项手艺都带来了显着的性能提升 ,最终获得了 TimeLens 系列模子。

评测效果批注 ,TimeLens-8B 展现出了惊人的性能 ,不但大幅逾越了 Qwen3-VL 等开源模子成为新的开源 SOTA ,更以 8B 的参数目 ,在多项焦点指标上周全击败了 GPT-5 和 Gemini-2.5-Flash 等前沿的闭源模子。

这一效果有力地证实晰:在 VTG 使命中 ,通过系统性地提升数据质量并接纳有用的算法设计 ,开源小尺寸模子完全具备挑战甚至逾越闭源大模子的能力。

总结

TimeLens 的孝顺不止于一个 SOTA 开源模子。团队在数据和算法双维度的系统性探索 ,为后续研究提供了极具参考价值的要领论与设计蓝图。

现在 ,TimeLens 的代码、模子、训练数据和评测基准都已开源 ,希望能为未来的视频时序定位研究提供一个更好的起点。

??时势1:新超碰国产人人插人人操人人射

??01月12日,“龙的传人”书画艺术交流展台北开幕 ,

  (一)树立勤政为民的作风

,91日本。

??01月12日,给国务院的建言收到了,感谢你!,

  漫山遍野都是凶兽 ,大荒外一片末日般的场景 ,在强盛的遗种的向导下 ,兽潮血洗四方 ,冲向大地止境。

,熟女69导航,九色美女,一级免费小视频。

??时势2:国产黄色A片高清无码在线观看

??01月12日,把生态优势变成发展优势,

  尤其是那些险些被铲平的大教 ,更是心惊肉跳 ,外加咬牙切齿 ,熊孩子归来 ,鬼知道会不会又针对他们。一群人如临大敌 ,一个个面色难看 ,主要的期待。

,国产精品久久精品综合,亚洲一道本无码视频,久色永久免费视频下载。

??01月12日,台湾师生西安行:品悟学府的“年轮”与“新枝”,

  效果 ,小不点专治这类人 ,一时间符文漫天 ,曦光翱翔 ,一战接一战下来 ,地上又倒了一大片。

,欧美、亚洲、国产一区二区,AV原创在线,h色视频网站。

??时势3:一区亚洲视频

??01月12日,商务部:去年12月社会消费品零售总额同比增7.4%,

  恢复溺水者呼吸是抢救成败的要害 ,应连忙举行人工呼吸 ,可接纳口对口或口对鼻的人工呼吸方法 ,在抢救的同时应迅速送往医院救治。

,天堂网WWW在线资源中文,免费无码毛片免费看,午夜操一操福利影院。

??01月12日,代表通道丨高松:更多地参与高水平研究是培养创造力的重要途径之一,

  一进门售票员就免费赠予了一把手枪模子 ,我兴奋极了 ,拿着随处乱“射”。进入展览馆后 ,我发明内里人山人海 ,都是看展览的。我也管不了那么多 ,一看 ,“咦?这是什么?”我指着前方的一个游艇模子问道。我们走向前 ,仔细的看了看先容 ,原来是美国尼米兹级航空母舰 ,“尼米兹”级航空母舰是当今天下水师威力最大的海上巨无霸 ,是美国水师独家拥有的大型核动力航空母舰 ,它的重大威力令任何海上敌手瞠乎其后 ?梢运 ,“尼米兹”级航母是今世航空母舰家族中最具代表性的一员。舰长:332.9米舰宽:40.8米 ,航行甲板最宽76.8米吃水:11.3米 ?梢宰跋潞娇樟20架F-14 ,20架F/A-18 ,4架EA-6B ,16架A-6E ,4架E-2C ,6架S-3A/B;直升机:8架SH-3G/H“海王”或SH-60F“海鹰”。“哇!能停那么多飞机啊!”我惊讶地叫道。接着 ,我们又来到了“神舟五号”的模子飞船边 ,我又指着谁人模子说:“跟真的一模一样。哇!真好。”我嘻嘻的笑起来 ,站在了旁边摆了个行动 ,“爸爸!快给我拍张照片!”爸爸听后 ,拿出照相手机 ,“咔嚓”一下 ,给我拍了一张照片。爸爸说;“神舟五号飞船乐成实现了我国首次载人航天航行 ,充分显示呈现在我国飞船和火箭上的多项要害手艺已经处于天下领先职位。”然后 ,我们又来到了美国F117隐形战机的眼前。“爸爸 ,不是说隐形战斗机吗?怎么我的眼睛还看的见?”我好奇地问道。爸爸看了看说明笑了笑 ,说:“这个意思你明确错了 ,这个啊 ,隐形战机并不是真的可以隐形 ,只是我们不可以雷达侦测到它。为什么可以有这种特征呢?让我们从雷达的运作方法来诠释。所谓‘雷达侦测’ ,就是让雷达发出电磁波 ,电磁波被飞机的金属外貌反射向原来的偏向 ,再被雷达吸收到。雷达凭证发射和吸收相差的时间和偏向便可以求得飞机的位置。而隐形战机是雷达侦测不到的 ,以是叫“隐形”战机。”而我国自行研制的第三代战斗机歼一1O让我们倍敢自豪。歼一10是一种性能优异的轻型战斗机 ,集中体现了我国航空工业20年生长的效果。“那是什么?”我的眼光停留在了一个火箭模子上。“那是长征系列火箭。”爸爸一本正经地说。我国自1956年最先睁开现代火箭的研制事情。1964年6月29日 ,中国自行设计研制的中程火箭试飞乐成之后 ,即着手研制多级火箭 ,向空间手艺进军。经由了五年的艰辛起劲 ,1970年4月24日“长征1号”运载火箭降生 ,首次发射“东方红1号”卫星乐成。中国航天手艺迈出了主要的一步。现在 ,“长征”系列火箭已经走向天下 ,享誉全球 ,在国际发射市场占有主要一席。

,无码视频播放c,兔子先生第一季6期免费,欧美性色精品视频在线看。

??时势4:黑人变态深video特大巨大

??01月12日,(乡村行·看振兴)山西中阳:“农文旅康”融合串起乡村振兴“致富链”,

  这若是传出去 ,一定会引发大惊动 ,惊掉一地下巴。破入这个境界已经很难了 ,很少听说有人连破境界 ,在这一瞬间连开两个洞天极其有数 ,非天纵之姿不可为 ,被外界知晓的话 ,会吓到人瞠目结舌。

?第八章 青鳞鹰,特级黄片AAAAAA,黑客家庭破解100部在线观看,欧美h片在线。

??01月12日,弘扬东北抗联精神 电视剧《归队》杀青,

  着实他们很想说 ,你这孩子有点憨 ,真是闲的没事可做 ,才弄出这么极品的事 ,引人来围观。

,手机在线你懂的,人人操人人人人人人干人人操人人,免费看色网站。

责编:瓦吉克

审核:费雷尔

责编:姜丝

相关推荐 换一换

Copyright (C) 2001-   dzwww.com. All Rights Reserved

新闻信息效劳允许证 - 音像制品出书允许证 - 广播电视节目制作谋划允许证 - 网络视听允许证 - 网络文化谋划允许证

山东省互联网传媒集团主理  联系电话:0531-85193202  违法不良信息举报电话:0531-85196540

鲁ICP备09023866号-1   鲁公网安备 37010202000111号  

Copyright (C) 2001- Dzwww   鲁ICP备09023866号-1

网站地图