8 8 永久华人入口,海量高清资源免费畅享,热门影视综艺一网打尽

k1体育麻将胡了

搜索 猫眼影戏 融媒体矩阵
  • 山东手机报

  • 猫眼影戏

  • 公共网官方微信

  • 公共网官方微博

  • 抖音

  • 人民号

  • 天下党媒平台

  • 央视频

  • 百家号

  • 快手

  • 头条号

  • 哔哩哔哩

首页 >新闻 >社会新闻

浙江大学突破视频AI瓶颈_金字塔要领提升视频AI效率10倍

2025-12-09 00:40:51
泉源:

猫眼影戏

作者:

扶陶金

手机审查

  猫眼影戏记者 孔繁东 报道Q8X2R7L1T4J5M9B6W3

这项由浙江大学ZIP实验室的李小龙、谷友平、林希、王伟杰和庄博涵配合完成的研究揭晓于2025年12月  ,论文编号为arXiv:2512.04025v1  ,为视频AI领域带来了一项主要突破。有兴趣深入相识的读者可以通过该编号盘问完整论文。

要明确这项研究的主要性  ,我们得先从一个一样平常体验提及。当你用手机看高清视频时  ,是否注重过有时间加载很慢  ,或者电池消耗特殊快?这背后的缘故原由  ,就是处置惩罚视频对盘算机来说确实是一件"重体力活"。现在的AI模子在明确和天生视频时面临着一个重大的挑战:盘算量太大了。就好比要一小我私家同时记着一本小说的每个字、每个标点符号  ,然后还要明确整个故事情节一样难题。

古板的AI处置惩罚视频时  ,接纳的是"全注重力"机制  ,这就像是一个极端专注的学生  ,对课本上的每一个字都投入同样的精神去明确。这种要领虽然准确  ,但效率极低。好比处置惩罚一段720p、81帧的视频时  ,使用Wan2.1-14B模子在单个NVIDIA H20 GPU上需要近两个小时  ,而其中80%以上的时间都花在了注重力盘算上。这种效率显然无法知足现实应用的需求。

为相识决这个问题  ,科研界提出了"希罕注重力"手艺  ,就像是让学生学会"重点阅读"——只关注主要的部分  ,忽略不主要的内容。现在主流的要领是"块希罕注重力"  ,它把视频内容分成许多小块  ,然后用简朴的"要或不要"来决议是否处置惩罚每个块。这就像用一把粗糙的筛子来过滤信息  ,虽然速率快了  ,但在高希罕度(也就是扬弃大宗信息)的情形下  ,主要信息也会被误删  ,导致质量下降。

浙江大学的研究团队提出了一个巧妙的解决计划:金字塔希罕注重力(PSA)。这个要领的焦点头脑可以用视察景物来比喻。当你站在山顶俯瞰山下的都会时  ,你会自然地对差别距离的事物接纳差别的视察精度:近处的修建你能看清每扇窗户  ,中等距离的你能区分出修建轮廓  ,远处的可能只能看到一片朦胧的色彩。PSA就是模拟了这种人类视觉的自顺应机制。

这种要领的巧妙之处在于  ,它不再简朴地"要或不要"某个信息块  ,而是凭证主要性给每个信息块分派差别的"视察精度"。关于主要的部分  ,它会坚持高精度的处置惩罚(就像仔细视察近处的景物);关于次主要的部分  ,它会适度降低精度(就像简陋视察中距离的景物);关于最不主要的部分  ,它会大幅降低精度或者完全忽略。

详细来说  ,PSA构建了一个多条理的"金字塔"结构。在这个金字塔中  ,底层坚持原始的高区分率信息  ,而每向上一层  ,信息就会通过平均池化变得越发粗糙。研究团队发明  ,相邻的视频帧在内容上往往很相似  ,这为这种分层处置惩罚提供了理论基础。通过巧妙的主要性评估和多条理掩码天生  ,PSA能够为每个盘问动态分派最合适的处置惩罚层级。

为了确保这种要领在现实硬件上也能高效运行  ,研究团队还开发了一个硬件友好的内核设计。他们接纳了"解耦块-瓦片"设计  ,将逻辑块巨细与硬件瓦片巨细疏散  ,这样纵然处置惩罚的信息块巨细各不相同  ,也能坚持高效的GPU使用率。这种设计在NVIDIA H200上相比质朴实现能够抵达10倍的加速。

实验效果令人印象深刻。在视频明确使命中  ,使用Qwen2.5-VL模子在Video-MME数据集上的测试显示  ,PSA在坚持与全注重力相当准确度的同时  ,将盘算量降低到了原来的35%。在视频天生使命中  ,PSA在多个模子上都体现精彩。以Wan2.1-1.3B模子为例  ,在高达91%的希罕度下  ,PSA天生的视频在PSNR、SSIM等要害指标上都显着优于其他希罕注重力要领  ,同时在VBench评分的美学质量、配景一致性等方面也体现更佳。

特殊值得一提的是  ,PSA还能与其他优化手艺很好地连系。研究团队将PSA与TDM蒸馏框架连系  ,在CogVideoX-5B模子上实现了30倍的推理加速  ,同时VBench评分甚至凌驾了原始模子。这批注PSA不但是一个自力的优化计划  ,更是一个可以与其他手艺协同事情的通用?。

从手艺实现角度来看  ,PSA包括三个焦点组件。首先是金字塔KV块构建  ,通过渐进式池化建设多条理体现。其次是多条理掩码天生器  ,它能够凭证盘问-键块对的主要性动态分派处置惩罚层级。最后是自顺应金字塔注重力盘算  ,在包管概率漫衍一致性的同时高效盘算注重力权重。

研究团队还举行了详尽的消融实验来验证设计选择的合理性。他们发明  ,多条理掩码相比古板二进制掩码能够显著提升性能;基于阈值的掩码分派战略比基于分位数的战略越发无邪有用;余弦相似性约束能够进一步提升模子在特定使命上的体现。这些实验效果为PSA的设计提供了坚实的理论支持。

更令人兴奋的是  ,PSA展现出了极强的通用性。它既可以应用于因果注重力场景(如视频天生)  ,也可以用于双向注重力场景(如视频明确)。这种无邪性使得PSA成为了一个真正的"即插即用"?  ,可以轻松集成到现有的种种视频AI系统中。

从更宏观的角度来看  ,PSA代表了希罕注重力手艺的一个主要生长偏向。它证实晰在盘算效率和质量之间并非只有简朴的取舍关系  ,通过更细腻的设计  ,我们可以在大幅提升效率的同时坚持甚至提高输出质量。这为未来的视频AI应用  ,特殊是实时视频处置惩罚、移动端视频天生等场景提供了新的可能性。

说究竟  ,这项研究的价值不但在于解决了目今视频AI面临的盘算瓶颈  ,更在于它为整个领域提供了一个新的思索框架。通过模拟人类视觉系统的自顺应处置惩罚机制  ,PSA展示了怎样在人工智能系统中实现越发智能化的资源分派。随着视频内容在我们一样平常生涯中的主要性一直提升  ,这种高效的处置惩罚手艺将为更多立异应用铺平蹊径  ,让通俗用户也能享受到更流通、更智能的视频AI体验。关于那些希望深入相识手艺细节的读者  ,可以通过论文编号arXiv:2512.04025v1查阅完整的研究报告。

Q&A

Q1:金字塔希罕注重力相比古板要领有什么优势?

A:金字塔希罕注重力的最大优势是能够凭证信息主要性分派差别的处置惩罚精度  ,而不是简朴的"要或不要"。这就像用差别倍率的望远镜视察差别距离的物体  ,既包管了主要信息的清晰度  ,又大幅降低了盘算量。实验显示它能在91%希罕度下仍坚持优异的视频天生质量。

Q2:金字塔希罕注重力能用在哪些现实应用中?

A:这项手艺可以普遍应用于视频明确和天生使命中  ,包括手机上的视频编辑、实时视频通话、短视频平台的内容天生、安防监控的智能剖析等。特殊是在移动装备上  ,它能显著降低电池消耗和发热  ,让用户获得更流通的视频AI体验。

Q3:通俗用户什么时间能体验到金字塔希罕注重力手艺?

A:虽然这项手艺现在主要在学术研究阶段  ,但其"即插即用"的设计特点使得它很容易集成到现有的AI视频系统中。预计在不久的未来  ,各大科技公司会将类似手艺应用到消耗级产品中  ,用户可能会在视频编辑App、智能手机相机功效等应用中体验到这种手艺带来的性能提升。

??时势1:国产对白刺激精品乱子伦视频

??12月09日,欧盟发布初裁披露 拟对中国电动汽车征收临时反补贴税,

信用卡逾期是现在社会中普遍保存的问题之一  ,而当逾期情形严重时  ,银行可能会接纳律手段追讨欠款。在这其中  ,招商银行作为海内领先的银行之一  ,也不破例。本文将围绕“信用卡逾期招商银行起诉”这一话题睁开讨论  ,探讨逾期后的律程序以及逾期者可能面临的处境。 一、信用卡逾期招商银行起诉真的 关于信用卡逾期...

,在线播放自拍。

??12月09日,【巴黎奥运会】张雨霏:眼泪为挥舞的五星红旗而流 观众都在挺我,

  “你吃我?”金色巨鸟斜睨  ,瞳孔宛若金色的漩涡  ,极为恐怖  ,竟要将人的灵魂吞进去。

,oumeihuangse,欧美性爱网站有哪些?,人人模人人操人人干。

??时势2:91熟女丨九色综合

??12月09日,黑色星期一,日韩股市重挫!,

  请记。航裉煳乙*院为荣  ,明天*院以我为傲!

,日韩高清网站,一道本无码在线视频,博人用阴茎把小南高潮。

??12月09日,江南名楼滕王阁北园即将开放 章江晓渡再现赣江之滨,

开学学校向导讲话 篇8

,国产美女一级a做受水多,黄色性爱欧美狂野澳门,欧美一级黄色性爱片。

??时势3:黄片18岁禁止免费

??12月09日,沙疗康养“黄金时间”到!新疆吐鲁番高温“吹热”沙经济,

  铁箭没入其伤口中  ,带起一大片的血花  ,令远古魔禽后裔剧痛  ,身体稍微的痉挛  ,眼中有怒也有悲  ,它此时难以转动  ,不然通常这些人岂敢邻近它!

,欧美免费黄,中国黄色1级视频,近亲五十路六十路亲亲。

??12月09日,中国力推东北冰雪经济发展 探索设立专门假期,

  各人好:同砚们  ,学业水平考试离我们越来越近了  ,学考决战的军号就要吹响了。我们全体先生与同砚们的心一起跳动。再此  ,我作为先生代表  ,想和同砚们谈几个问题。 第一 要树立信心  ,信心助你乐成

,18女高潮喷液抽搐视频,Chinese熟女销魂呻吟,69xy熟女阿䧅亂。

??时势4:97人妻碰碰碰碰久久久久总站

??12月09日,民政部就《取缔非法社会组织办法(修订草案征求意见稿)》公开征求意见,  “好比英文支教研学不是要让城里孩子简朴地去给墟落孩子教英语  ,而是要作育他们的社会眷注。”华中师范大学素质教育研究中心主任陶宏开向记者体现  ,真正将研学和公益连系  ,是要让大凉山孩子走出大山  ,还要让他们立志资助大凉山致富。,亚洲啪AⅤ永久无码精品放毛片,欧美少妇性爱视频,成人版色情巜女超人H版。

??12月09日,中缅边境云南龙陵首现滇西马蓝 花型酷似马头,

  “那是什么人  ,他们毁掉了这个墟落?”大壮等人受惊  ,感受到了一股寒意。

,性色星,欧美a片在线导航,性少妇mdms丰满hjilehe。

【医疗服务进步 港人平均预期寿命增加】

【捕捉“倏忽一瞬” 《余生》新书分享会举办】

责编:郑霖

审核:中情局—贝索斯

责编:侯振国

相关推荐 换一换

Copyright (C) 2001-   dzwww.com. All Rights Reserved

新闻信息效劳允许证 - 音像制品出书允许证 - 广播电视节目制作谋划允许证 - 网络视听允许证 - 网络文化谋划允许证

山东省互联网传媒集团主理  联系电话:0531-85193202  违法不良信息举报电话:0531-85196540

鲁ICP备09023866号-1   鲁公网安备 37010202000111号  

Copyright (C) 2001- Dzwww   鲁ICP备09023866号-1

网站地图