xxxx888,覆盖全网最新内容,实时更新不间断,精彩一手掌握

k1体育麻将胡了

搜索 猫眼影戏 融媒体矩阵
  • 山东手机报

  • 猫眼影戏

  • 公共网官方微信

  • 公共网官方微博

  • 抖音

  • 人民号

  • 天下党媒平台

  • 央视频

  • 百家号

  • 快手

  • 头条号

  • 哔哩哔哩

首页 >新闻 >社会新闻

浙江大学突破视频AI瓶颈_金字塔要领提升视频AI效率10倍

2025-12-09 06:31:59
泉源:

猫眼影戏

作者:

吉尼斯

手机审查

  猫眼影戏记者 阿纳托利·库切林纳 报道Q8X2R7L1T4J5M9B6W3

这项由浙江大学ZIP实验室的李小龙、谷友平、林希、王伟杰和庄博涵配合完成的研究揭晓于2025年12月 ,论文编号为arXiv:2512.04025v1 ,为视频AI领域带来了一项主要突破。有兴趣深入相识的读者可以通过该编号盘问完整论文。

要明确这项研究的主要性 ,我们得先从一个一样平常体验提及。当你用手机看高清视频时 ,是否注重过有时间加载很慢 ,或者电池消耗特殊快?这背后的缘故原由 ,就是处置惩罚视频对盘算机来说确实是一件"重体力活"。现在的AI模子在明确和天生视频时面临着一个重大的挑战:盘算量太大了。就好比要一小我私家同时记着一本小说的每个字、每个标点符号 ,然后还要明确整个故事情节一样难题。

古板的AI处置惩罚视频时 ,接纳的是"全注重力"机制 ,这就像是一个极端专注的学生 ,对课本上的每一个字都投入同样的精神去明确。这种要领虽然准确 ,但效率极低。好比处置惩罚一段720p、81帧的视频时 ,使用Wan2.1-14B模子在单个NVIDIA H20 GPU上需要近两个小时 ,而其中80%以上的时间都花在了注重力盘算上。这种效率显然无法知足现实应用的需求。

为相识决这个问题 ,科研界提出了"希罕注重力"手艺 ,就像是让学生学会"重点阅读"——只关注主要的部分 ,忽略不主要的内容。现在主流的要领是"块希罕注重力" ,它把视频内容分成许多小块 ,然后用简朴的"要或不要"来决议是否处置惩罚每个块。这就像用一把粗糙的筛子来过滤信息 ,虽然速率快了 ,但在高希罕度(也就是扬弃大宗信息)的情形下 ,主要信息也会被误删 ,导致质量下降。

浙江大学的研究团队提出了一个巧妙的解决计划:金字塔希罕注重力(PSA)。这个要领的焦点头脑可以用视察景物来比喻。当你站在山顶俯瞰山下的都会时 ,你会自然地对差别距离的事物接纳差别的视察精度:近处的修建你能看清每扇窗户 ,中等距离的你能区分出修建轮廓 ,远处的可能只能看到一片朦胧的色彩。PSA就是模拟了这种人类视觉的自顺应机制。

这种要领的巧妙之处在于 ,它不再简朴地"要或不要"某个信息块 ,而是凭证主要性给每个信息块分派差别的"视察精度"。关于主要的部分 ,它会坚持高精度的处置惩罚(就像仔细视察近处的景物);关于次主要的部分 ,它会适度降低精度(就像简陋视察中距离的景物);关于最不主要的部分 ,它会大幅降低精度或者完全忽略。

详细来说 ,PSA构建了一个多条理的"金字塔"结构。在这个金字塔中 ,底层坚持原始的高区分率信息 ,而每向上一层 ,信息就会通过平均池化变得越发粗糙。研究团队发明 ,相邻的视频帧在内容上往往很相似 ,这为这种分层处置惩罚提供了理论基础。通过巧妙的主要性评估和多条理掩码天生 ,PSA能够为每个盘问动态分派最合适的处置惩罚层级。

为了确保这种要领在现实硬件上也能高效运行 ,研究团队还开发了一个硬件友好的内核设计。他们接纳了"解耦块-瓦片"设计 ,将逻辑块巨细与硬件瓦片巨细疏散 ,这样纵然处置惩罚的信息块巨细各不相同 ,也能坚持高效的GPU使用率。这种设计在NVIDIA H200上相比质朴实现能够抵达10倍的加速。

实验效果令人印象深刻。在视频明确使命中 ,使用Qwen2.5-VL模子在Video-MME数据集上的测试显示 ,PSA在坚持与全注重力相当准确度的同时 ,将盘算量降低到了原来的35%。在视频天生使命中 ,PSA在多个模子上都体现精彩。以Wan2.1-1.3B模子为例 ,在高达91%的希罕度下 ,PSA天生的视频在PSNR、SSIM等要害指标上都显着优于其他希罕注重力要领 ,同时在VBench评分的美学质量、配景一致性等方面也体现更佳。

特殊值得一提的是 ,PSA还能与其他优化手艺很好地连系。研究团队将PSA与TDM蒸馏框架连系 ,在CogVideoX-5B模子上实现了30倍的推理加速 ,同时VBench评分甚至凌驾了原始模子。这批注PSA不但是一个自力的优化计划 ,更是一个可以与其他手艺协同事情的通用?。

从手艺实现角度来看 ,PSA包括三个焦点组件。首先是金字塔KV块构建 ,通过渐进式池化建设多条理体现。其次是多条理掩码天生器 ,它能够凭证盘问-键块对的主要性动态分派处置惩罚层级。最后是自顺应金字塔注重力盘算 ,在包管概率漫衍一致性的同时高效盘算注重力权重。

研究团队还举行了详尽的消融实验来验证设计选择的合理性。他们发明 ,多条理掩码相比古板二进制掩码能够显著提升性能;基于阈值的掩码分派战略比基于分位数的战略越发无邪有用;余弦相似性约束能够进一步提升模子在特定使命上的体现。这些实验效果为PSA的设计提供了坚实的理论支持。

更令人兴奋的是 ,PSA展现出了极强的通用性。它既可以应用于因果注重力场景(如视频天生) ,也可以用于双向注重力场景(如视频明确)。这种无邪性使得PSA成为了一个真正的"即插即用"? ,可以轻松集成到现有的种种视频AI系统中。

从更宏观的角度来看 ,PSA代表了希罕注重力手艺的一个主要生长偏向。它证实晰在盘算效率和质量之间并非只有简朴的取舍关系 ,通过更细腻的设计 ,我们可以在大幅提升效率的同时坚持甚至提高输出质量。这为未来的视频AI应用 ,特殊是实时视频处置惩罚、移动端视频天生等场景提供了新的可能性。

说究竟 ,这项研究的价值不但在于解决了目今视频AI面临的盘算瓶颈 ,更在于它为整个领域提供了一个新的思索框架。通过模拟人类视觉系统的自顺应处置惩罚机制 ,PSA展示了怎样在人工智能系统中实现越发智能化的资源分派。随着视频内容在我们一样平常生涯中的主要性一直提升 ,这种高效的处置惩罚手艺将为更多立异应用铺平蹊径 ,让通俗用户也能享受到更流通、更智能的视频AI体验。关于那些希望深入相识手艺细节的读者 ,可以通过论文编号arXiv:2512.04025v1查阅完整的研究报告。

Q&A

Q1:金字塔希罕注重力相比古板要领有什么优势?

A:金字塔希罕注重力的最大优势是能够凭证信息主要性分派差别的处置惩罚精度 ,而不是简朴的"要或不要"。这就像用差别倍率的望远镜视察差别距离的物体 ,既包管了主要信息的清晰度 ,又大幅降低了盘算量。实验显示它能在91%希罕度下仍坚持优异的视频天生质量。

Q2:金字塔希罕注重力能用在哪些现实应用中?

A:这项手艺可以普遍应用于视频明确和天生使命中 ,包括手机上的视频编辑、实时视频通话、短视频平台的内容天生、安防监控的智能剖析等。特殊是在移动装备上 ,它能显著降低电池消耗和发热 ,让用户获得更流通的视频AI体验。

Q3:通俗用户什么时间能体验到金字塔希罕注重力手艺?

A:虽然这项手艺现在主要在学术研究阶段 ,但其"即插即用"的设计特点使得它很容易集成到现有的AI视频系统中。预计在不久的未来 ,各大科技公司会将类似手艺应用到消耗级产品中 ,用户可能会在视频编辑App、智能手机相机功效等应用中体验到这种手艺带来的性能提升。

??时势1:回爷爷家被村民轮流欺负

??12月09日,他没拿到影帝,是这届金像奖最大的遗憾,

  首先我代表学校对全校的少先队员体现节日的祝贺:祝你们节日快乐!天天快乐!永远快乐!祝愿所有的孩子能康健生长 ,祝愿我们的学校能日新月异。同时 ,要对辛勤培育你们生长的先生道一声:辛勤了!是先生们把知识的阳光洒满你们的心田 ,让祖国的花朵在妖冶的春天里绚烂开放 ,一直以来 ,先生们勤勤恳恳 ,教书育人 ,任劳任怨 ,创立了东峡乡中心学校优美的情形和优良的教学质量 ,为学校的生长与腾飞创立了优异的基础和条件。我们更要谢谢一直体贴学校生长和孩子康健生长的上级主管部分、社会各界和家长朋侪 ,有了他们的关爱和支持 ,你们才华康健生长。他们在经济上资助我们 ,在精神上勉励我们 ,在舆论上肯定我们 ,使得你们始终有一个协调生长的优异育人情形。

,国产制服在线。

??12月09日,哇!Chinese Kungfu!中国传统体育项目点燃巴黎街头,  本轮高温历程与往常差别的特点体现在:地温高、一连时间长。山西、陕西、河南、河北和山东等地午后地表温度可能超60℃ ,局地甚至可超70℃。并且高温不但一连多日一直 ,一天中高温的一连时间也可能抵达8小时甚至10小时以上。河北南部、河南北部、山东部分地区高温甚至从10点前后就最先 ,到了晚上19至20点才陆续竣事 ,有种“高温陪你上下班”的感受。,扁豆曰本熟妇不卡无码一、二区在线费看,免费播放婬乱男女婬视频吃奶,国产小电视外观像mp4。

??时势2:打扑牌不盖被子怎么办!

??12月09日,2024万峰林警察半程马拉松赛开跑,

  族长决议 ,要用狻猊宝体、离火牛魔的宝角、恶魔猿的手臂为他洗礼 ,将其与远古遗种真血以及宝骨等封于鼎中 ,举行磨炼。

,Japan女学生惩罚打光屁屁,色色视频网站免费,草久久性爱视频。

??12月09日,创新产品 精进服务 安利推动大健康产业消费活力,

  “可恨!”老四低吼 ,他知道无力回天了 ,这意味着什么不言而喻 ,怀抱着虚弱的小不点 ,他感受很欠好受。

,无码国产精品一区第二页,美女下面露出来的黄色视频,永久黄色免费黄色网站。

??时势3:国产一级A片在线播放高清

??12月09日,围棋爱好者“棋”聚 上海这家咖啡馆以“棋”会友,

  “柳神……你好了?”有族老颤声道。

,日韩免费无遮挡毛片一区,无码系列av中文网站,十大裸体软件破解版。

??12月09日,近十年最大规模吴湖帆作品展在上海举办,

  高二 ,从某种水平上说 ,截然差别于高一。它是我们打基础、练能力的要害一年。履历了高一的懵懂渺茫 ,高二 ,应该是我们用老黄牛的扎实、用雄鹰的搏击创立历史的新的历史时空。新的航程 ,新的天地 ,新的生涯 ,我们要有新的使命 ,要有新的思绪 ,更应有崭新的形象。我们每个同砚都可以站在一个新的历史平台上创立我们属于我们自己的历史。这是我们的幸运 ,也是我们的庆幸。

,jiuse国产在线视频,日韩欧美在线电影区二区,强迫91少女吃奶视频。

??时势4:嗯~啊~好快啊~进来了视频

??12月09日,湖南张家界上演峰林杂技秀 多国杂技表演者登台献技,

  小不点大眼光束惊人 ,如两团小火炬似的 ,体态如神鹤展翅 ,划出一道优美的轨迹 ,右臂一探 ,砰的一声捉住了那条晶莹的藕臂 ,此后猛力一带 ,将漂亮的女子扯了一个趔趄 ,身子低矮了下来。

,精品视频一区二区三三区四区,锕锕锕锕锕锕~太深了软件,wwww黄色网站在线播放。

??12月09日,资深电影人建议青年导演:拍那些触动你心灵的事,

  若是这个孩子生长起来 ,必定可以睥睨天下 ,睥睨群雄 ,到了谁人时间 ,他们怎样面临……简直不敢想象了。

,黄色网站国99在线免费观看,17c·mooc,看A片就上AV网。

责编:舒米

审核:周秀红

责编:布鲁姆

相关推荐 换一换

Copyright (C) 2001-   dzwww.com. All Rights Reserved

新闻信息效劳允许证 - 音像制品出书允许证 - 广播电视节目制作谋划允许证 - 网络视听允许证 - 网络文化谋划允许证

山东省互联网传媒集团主理  联系电话:0531-85193202  违法不良信息举报电话:0531-85196540

鲁ICP备09023866号-1   鲁公网安备 37010202000111号  

Copyright (C) 2001- Dzwww   鲁ICP备09023866号-1

网站地图