91中文字幕永久,专为热爱品质生活的你打造,每一次点击都是新的惊喜

k1体育麻将胡了

搜索 猫眼影戏 融媒体矩阵
  • 山东手机报

  • 猫眼影戏

  • 公共网官方微信

  • 公共网官方微博

  • 抖音

  • 人民号

  • 天下党媒平台

  • 央视频

  • 百家号

  • 快手

  • 头条号

  • 哔哩哔哩

首页 >新闻 >社会新闻

浙江大学突破视频AI瓶颈_金字塔要领提升视频AI效率10倍

2025-12-11 07:45:55
泉源:

猫眼影戏

作者:

张翼

手机审查

  猫眼影戏记者 和小威 报道Q8X2R7L1T4J5M9B6W3

这项由浙江大学ZIP实验室的李小龙、谷友平、林希、王伟杰和庄博涵配合完成的研究揭晓于2025年12月,论文编号为arXiv:2512.04025v1,为视频AI领域带来了一项主要突破 。有兴趣深入相识的读者可以通过该编号盘问完整论文 。

要明确这项研究的主要性,我们得先从一个一样平常体验提及 。当你用手机看高清视频时,是否注重过有时间加载很慢,或者电池消耗特殊快 ?这背后的缘故原由,就是处置惩罚视频对盘算机来说确实是一件"重体力活" 。现在的AI模子在明确和天生视频时面临着一个重大的挑战:盘算量太大了 。就好比要一小我私家同时记着一本小说的每个字、每个标点符号,然后还要明确整个故事情节一样难题 。

古板的AI处置惩罚视频时,接纳的是"全注重力"机制,这就像是一个极端专注的学生,对课本上的每一个字都投入同样的精神去明确 。这种要领虽然准确,但效率极低 。好比处置惩罚一段720p、81帧的视频时,使用Wan2.1-14B模子在单个NVIDIA H20 GPU上需要近两个小时,而其中80%以上的时间都花在了注重力盘算上 。这种效率显然无法知足现实应用的需求 。

为相识决这个问题,科研界提出了"希罕注重力"手艺,就像是让学生学会"重点阅读"——只关注主要的部分,忽略不主要的内容 。现在主流的要领是"块希罕注重力",它把视频内容分成许多小块,然后用简朴的"要或不要"来决议是否处置惩罚每个块 。这就像用一把粗糙的筛子来过滤信息,虽然速率快了,但在高希罕度(也就是扬弃大宗信息)的情形下,主要信息也会被误删,导致质量下降 。

浙江大学的研究团队提出了一个巧妙的解决计划:金字塔希罕注重力(PSA) 。这个要领的焦点头脑可以用视察景物来比喻 。当你站在山顶俯瞰山下的都会时,你会自然地对差别距离的事物接纳差别的视察精度:近处的修建你能看清每扇窗户,中等距离的你能区分出修建轮廓,远处的可能只能看到一片朦胧的色彩 。PSA就是模拟了这种人类视觉的自顺应机制 。

这种要领的巧妙之处在于,它不再简朴地"要或不要"某个信息块,而是凭证主要性给每个信息块分派差别的"视察精度" 。关于主要的部分,它会坚持高精度的处置惩罚(就像仔细视察近处的景物);关于次主要的部分,它会适度降低精度(就像简陋视察中距离的景物);关于最不主要的部分,它会大幅降低精度或者完全忽略 。

详细来说,PSA构建了一个多条理的"金字塔"结构 。在这个金字塔中,底层坚持原始的高区分率信息,而每向上一层,信息就会通过平均池化变得越发粗糙 。研究团队发明,相邻的视频帧在内容上往往很相似,这为这种分层处置惩罚提供了理论基础 。通过巧妙的主要性评估和多条理掩码天生,PSA能够为每个盘问动态分派最合适的处置惩罚层级 。

为了确保这种要领在现实硬件上也能高效运行,研究团队还开发了一个硬件友好的内核设计 。他们接纳了"解耦块-瓦片"设计,将逻辑块巨细与硬件瓦片巨细疏散,这样纵然处置惩罚的信息块巨细各不相同,也能坚持高效的GPU使用率 。这种设计在NVIDIA H200上相比质朴实现能够抵达10倍的加速 。

实验效果令人印象深刻 。在视频明确使命中,使用Qwen2.5-VL模子在Video-MME数据集上的测试显示,PSA在坚持与全注重力相当准确度的同时,将盘算量降低到了原来的35% 。在视频天生使命中,PSA在多个模子上都体现精彩 。以Wan2.1-1.3B模子为例,在高达91%的希罕度下,PSA天生的视频在PSNR、SSIM等要害指标上都显着优于其他希罕注重力要领,同时在VBench评分的美学质量、配景一致性等方面也体现更佳 。

特殊值得一提的是,PSA还能与其他优化手艺很好地连系 。研究团队将PSA与TDM蒸馏框架连系,在CogVideoX-5B模子上实现了30倍的推理加速,同时VBench评分甚至凌驾了原始模子 。这批注PSA不但是一个自力的优化计划,更是一个可以与其他手艺协同事情的通用 ? 。

从手艺实现角度来看,PSA包括三个焦点组件 。首先是金字塔KV块构建,通过渐进式池化建设多条理体现 。其次是多条理掩码天生器,它能够凭证盘问-键块对的主要性动态分派处置惩罚层级 。最后是自顺应金字塔注重力盘算,在包管概率漫衍一致性的同时高效盘算注重力权重 。

研究团队还举行了详尽的消融实验来验证设计选择的合理性 。他们发明,多条理掩码相比古板二进制掩码能够显著提升性能;基于阈值的掩码分派战略比基于分位数的战略越发无邪有用;余弦相似性约束能够进一步提升模子在特定使命上的体现 。这些实验效果为PSA的设计提供了坚实的理论支持 。

更令人兴奋的是,PSA展现出了极强的通用性 。它既可以应用于因果注重力场景(如视频天生),也可以用于双向注重力场景(如视频明确) 。这种无邪性使得PSA成为了一个真正的"即插即用" ?,可以轻松集成到现有的种种视频AI系统中 。

从更宏观的角度来看,PSA代表了希罕注重力手艺的一个主要生长偏向 。它证实晰在盘算效率和质量之间并非只有简朴的取舍关系,通过更细腻的设计,我们可以在大幅提升效率的同时坚持甚至提高输出质量 。这为未来的视频AI应用,特殊是实时视频处置惩罚、移动端视频天生等场景提供了新的可能性 。

说究竟,这项研究的价值不但在于解决了目今视频AI面临的盘算瓶颈,更在于它为整个领域提供了一个新的思索框架 。通过模拟人类视觉系统的自顺应处置惩罚机制,PSA展示了怎样在人工智能系统中实现越发智能化的资源分派 。随着视频内容在我们一样平常生涯中的主要性一直提升,这种高效的处置惩罚手艺将为更多立异应用铺平蹊径,让通俗用户也能享受到更流通、更智能的视频AI体验 。关于那些希望深入相识手艺细节的读者,可以通过论文编号arXiv:2512.04025v1查阅完整的研究报告 。

Q&A

Q1:金字塔希罕注重力相比古板要领有什么优势 ?

A:金字塔希罕注重力的最大优势是能够凭证信息主要性分派差别的处置惩罚精度,而不是简朴的"要或不要" 。这就像用差别倍率的望远镜视察差别距离的物体,既包管了主要信息的清晰度,又大幅降低了盘算量 。实验显示它能在91%希罕度下仍坚持优异的视频天生质量 。

Q2:金字塔希罕注重力能用在哪些现实应用中 ?

A:这项手艺可以普遍应用于视频明确和天生使命中,包括手机上的视频编辑、实时视频通话、短视频平台的内容天生、安防监控的智能剖析等 。特殊是在移动装备上,它能显著降低电池消耗和发热,让用户获得更流通的视频AI体验 。

Q3:通俗用户什么时间能体验到金字塔希罕注重力手艺 ?

A:虽然这项手艺现在主要在学术研究阶段,但其"即插即用"的设计特点使得它很容易集成到现有的AI视频系统中 。预计在不久的未来,各大科技公司会将类似手艺应用到消耗级产品中,用户可能会在视频编辑App、智能手机相机功效等应用中体验到这种手艺带来的性能提升 。

??时势1:国产高清色色

??12月11日,湖北荆门发力装配式产业 绿色低碳建设助城市更新,  演练中各艇依次睁开编队运动、大角度转向,情报侦探与电子防御等课目训练 。此次训练,驻足重大条件淬炼军力 。突出指挥控制、职员协同配合、应急情形处置惩罚 。发明解决疑难杂症,磨练武器装备性能的同时进一步提升步队能战胜战能力 。,糖心安装包 。

??12月11日,又见最低消费,春节不是饭店“法外时间”,

  石飞蛟等人虽然希望他们早点离去,可是这群人怎会宁愿,纷纷体现不需要进村,住在外面即可,在村中能讨口水喝就行 。

,欧美粗大日韩在线,久久在线,亚洲图区在线 。

??时势2:在线综合一区

??12月11日,去年中国海关缉私部门侦办涉税走私案3057起,

  本次网络直播学习是一次十分有意义的活动,旨在强化大学生维护国家清静的责任感和能力,同时营造国家清静人人有责、人人可为的浓重气氛 。

,国内偷拍网址,特a级黄片在线视频,大馒头上下晃动怎么回事视频 。

??12月11日,公安部:2023年打掉涉黑恶犯罪组织1900余个 抓获犯罪嫌疑人2.7万名,

  黑漆黑尽是粗重的喘气声,连跑了数里远,十几个孩子累坏了,适才又惊又怕,青鳞鹰那种凶物太强盛了,若是被追上,一爪子下来,他们必定会成为一滩血泥与碎骨 。

,αV在钱免费视频,男女猛烈无遮挡gif视频免费,fi11.cnn研究所实验室隐藏入口 。

??时势3:A片欧美黄色视频

??12月11日,西南地区东部等地多阴雨 西川盆地贵州等地气温偏低,

  形成两大中心:就是将总部建设成为酿造中心和文化休闲中心 。在继续生长和牢靠全球最大的酿造中心职位同时,美化和刷新总部情形,建设好博物馆,打造文化休闲中心 。

,色播影院性播激情在线,久草A片免费在线热99精品看片,caoporen永久免费公开视频 。

??12月11日,广东省广州市人大常委会副主任于绍文接受审查调查,

  每一次伤痕累累的回来,他都会服食下药鼎中金色液体,体质在一直蜕变,一天比一天强盛,令村人都有点不敢相信,他前进竟可以这样神速 。

,wwww黄色网站在线播放,97免费超碰,fi11cnn实验室免费2023网站 。

??时势4:特一级黄色片免费在线手机播放视频

??12月11日,香港举行研讨会纪念香港基本法颁布34周年,

  清廉自律不但关系党的事业,并且是关系我们干部的政治前途 。最近我们省里又查出了好几个县级甚至省级向导干部违纪案件 。现实社会中,陷阱许多,诱惑也许多,希望同志们好自为之 。我为什么总是提醒这些问题?现在社会很重大,你们不要以为洗头店、洗脚店好洗,可能自己不知道已经受骗受骗了 。一种是你自己不注重,另外一种是人家要陷害你,让你犯过失,我讲这个问题是有真实案例的 。总之,要害要靠自律,做到勤政、廉政、善政 。我们干部当到一定的时间,各人的能力水平可能较量靠近,真正能分出崎岖的是在责任心、事业心、公心与清廉这点上 。有的同志很受苦,一心扑在事情上,那他的水平,他所作的孝顺就纷歧样 。干部一定要有“为官一任造福一方”的理想,又要有“在位一天、赶考一天”的意识,起劲坚持共产党人的政治本色,多为党和人民立功立业 。在详细事情和生涯中,一定要把牢“三条线”,做到“有四个心”、“五个一个样” 。“三条线”:就是一定要苏醒地把牢执法与纪律的高压线,这个高压线绝不可碰,谁碰谁触电;一定要苏醒地把牢公与私的警戒线,公就是公,私就是私;一定要苏醒地把牢小我私家与家庭的情绪线,现在许多干部就是由于情绪出轨,搞恋爱的广度开放,以是出问题 。“四个心”:就是以平和之心来看待名,以恬淡之心来看待位,以知足之心来看待利,以敬畏之心来看待权 。归纳综合起来讲,我们每个同志都要有上进心,但又要坚持寻常心 。“五个一样”:就是始终要做到台上台下一个样,上班下班一个样,进家离家一个样,外地外地一个样,人前人后一个样 。这是党对我们的要求,也是我们做人的最少的品德品质 。有的人可能几个纷歧样,主要是修养不抵家,也可能是情形造成的,以是我们要多方面起劲,增强修养,做到“五个都一样”,一直提高自身素质,使我们政研室出更多的干部,出更多的人才 。

,日韩图区中文字幕,A片免费看网址,快手星野和光头哥视频完整 。

??12月11日,2024年四川省“百城千乡万村·社区”全民健身系列赛事活动启动,

  “任何一种生灵,其精神都是最神秘的,更胜其肉身 。”柳树传音,为他诠释,道:“你的精神进来了,在这里宛若履历了一番再生,与真身在此没有什么区别 。”

,欧美人人插视频,农村黄色片,扒开双腿疯狂进出爽爽爽视频 。

【邹敬园夺得巴黎奥运会体操男子双杠金牌】

【黑龙江黑河段现数十里平流雾宛如仙境】

责编:邹毅斌

审核:多空

责编:胡军连

相关推荐 换一换

Copyright (C) 2001-   dzwww.com. All Rights Reserved

新闻信息效劳允许证 - 音像制品出书允许证 - 广播电视节目制作谋划允许证 - 网络视听允许证 - 网络文化谋划允许证

山东省互联网传媒集团主理  联系电话:0531-85193202  违法不良信息举报电话:0531-85196540

鲁ICP备09023866号-1   鲁公网安备 37010202000111号  

Copyright (C) 2001- Dzwww   鲁ICP备09023866号-1

网站地图