(10秒一步到位)自拍网站视频一区鸿蒙版v10.0.50.55.9.66.2.36-2265安卓网

k1体育麻将胡了

搜索 猫眼影戏 融媒体矩阵
  • 山东手机报

  • 猫眼影戏

  • 公共网官方微信

  • 公共网官方微博

  • 抖音

  • 人民号

  • 天下党媒平台

  • 央视频

  • 百家号

  • 快手

  • 头条号

  • 哔哩哔哩

首页 >新闻 >社会新闻

浙江大学突破视频AI瓶颈_金字塔要领提升视频AI效率10倍

2025-12-10 08:32:17
泉源:

猫眼影戏

作者:

萨达姆·侯赛因

手机审查

  猫眼影戏记者 阎学通 报道Q8X2R7L1T4J5M9B6W3

这项由浙江大学ZIP实验室的李小龙、谷友平、林希、王伟杰和庄博涵配合完成的研究揭晓于2025年12月,论文编号为arXiv:2512.04025v1,为视频AI领域带来了一项主要突破。有兴趣深入相识的读者可以通过该编号盘问完整论文。

要明确这项研究的主要性,我们得先从一个一样平常体验提及。当你用手机看高清视频时,是否注重过有时间加载很慢,或者电池消耗特殊快?这背后的缘故原由,就是处置惩罚视频对盘算机来说确实是一件"重体力活"。现在的AI模子在明确和天生视频时面临着一个重大的挑战:盘算量太大了。就好比要一小我私家同时记着一本小说的每个字、每个标点符号,然后还要明确整个故事情节一样难题。

古板的AI处置惩罚视频时,接纳的是"全注重力"机制,这就像是一个极端专注的学生,对课本上的每一个字都投入同样的精神去明确。这种要领虽然准确,但效率极低。好比处置惩罚一段720p、81帧的视频时,使用Wan2.1-14B模子在单个NVIDIA H20 GPU上需要近两个小时,而其中80%以上的时间都花在了注重力盘算上。这种效率显然无法知足现实应用的需求。

为相识决这个问题,科研界提出了"希罕注重力"手艺,就像是让学生学会"重点阅读"——只关注主要的部分,忽略不主要的内容。现在主流的要领是"块希罕注重力",它把视频内容分成许多小块,然后用简朴的"要或不要"来决议是否处置惩罚每个块。这就像用一把粗糙的筛子来过滤信息,虽然速率快了,但在高希罕度(也就是扬弃大宗信息)的情形下,主要信息也会被误删,导致质量下降。

浙江大学的研究团队提出了一个巧妙的解决计划:金字塔希罕注重力(PSA)。这个要领的焦点头脑可以用视察景物来比喻。当你站在山顶俯瞰山下的都会时,你会自然地对差别距离的事物接纳差别的视察精度:近处的修建你能看清每扇窗户,中等距离的你能区分出修建轮廓,远处的可能只能看到一片朦胧的色彩。PSA就是模拟了这种人类视觉的自顺应机制。

这种要领的巧妙之处在于,它不再简朴地"要或不要"某个信息块,而是凭证主要性给每个信息块分派差别的"视察精度"。关于主要的部分,它会坚持高精度的处置惩罚(就像仔细视察近处的景物) ;关于次主要的部分,它会适度降低精度(就像简陋视察中距离的景物) ;关于最不主要的部分,它会大幅降低精度或者完全忽略。

详细来说,PSA构建了一个多条理的"金字塔"结构。在这个金字塔中,底层坚持原始的高区分率信息,而每向上一层,信息就会通过平均池化变得越发粗糙。研究团队发明,相邻的视频帧在内容上往往很相似,这为这种分层处置惩罚提供了理论基础。通过巧妙的主要性评估和多条理掩码天生,PSA能够为每个盘问动态分派最合适的处置惩罚层级。

为了确保这种要领在现实硬件上也能高效运行,研究团队还开发了一个硬件友好的内核设计。他们接纳了"解耦块-瓦片"设计,将逻辑块巨细与硬件瓦片巨细疏散,这样纵然处置惩罚的信息块巨细各不相同,也能坚持高效的GPU使用率。这种设计在NVIDIA H200上相比质朴实现能够抵达10倍的加速。

实验效果令人印象深刻。在视频明确使命中,使用Qwen2.5-VL模子在Video-MME数据集上的测试显示,PSA在坚持与全注重力相当准确度的同时,将盘算量降低到了原来的35%。在视频天生使命中,PSA在多个模子上都体现精彩。以Wan2.1-1.3B模子为例,在高达91%的希罕度下,PSA天生的视频在PSNR、SSIM等要害指标上都显着优于其他希罕注重力要领,同时在VBench评分的美学质量、配景一致性等方面也体现更佳。

特殊值得一提的是,PSA还能与其他优化手艺很好地连系。研究团队将PSA与TDM蒸馏框架连系,在CogVideoX-5B模子上实现了30倍的推理加速,同时VBench评分甚至凌驾了原始模子。这批注PSA不但是一个自力的优化计划,更是一个可以与其他手艺协同事情的通用模块。

从手艺实现角度来看,PSA包括三个焦点组件。首先是金字塔KV块构建,通过渐进式池化建设多条理体现。其次是多条理掩码天生器,它能够凭证盘问-键块对的主要性动态分派处置惩罚层级。最后是自顺应金字塔注重力盘算,在包管概率漫衍一致性的同时高效盘算注重力权重。

研究团队还举行了详尽的消融实验来验证设计选择的合理性。他们发明,多条理掩码相比古板二进制掩码能够显著提升性能 ;基于阈值的掩码分派战略比基于分位数的战略越发无邪有用 ;余弦相似性约束能够进一步提升模子在特定使命上的体现。这些实验效果为PSA的设计提供了坚实的理论支持。

更令人兴奋的是,PSA展现出了极强的通用性。它既可以应用于因果注重力场景(如视频天生),也可以用于双向注重力场景(如视频明确)。这种无邪性使得PSA成为了一个真正的"即插即用"模块,可以轻松集成到现有的种种视频AI系统中。

从更宏观的角度来看,PSA代表了希罕注重力手艺的一个主要生长偏向。它证实晰在盘算效率和质量之间并非只有简朴的取舍关系,通过更细腻的设计,我们可以在大幅提升效率的同时坚持甚至提高输出质量。这为未来的视频AI应用,特殊是实时视频处置惩罚、移动端视频天生等场景提供了新的可能性。

说究竟,这项研究的价值不但在于解决了目今视频AI面临的盘算瓶颈,更在于它为整个领域提供了一个新的思索框架。通过模拟人类视觉系统的自顺应处置惩罚机制,PSA展示了怎样在人工智能系统中实现越发智能化的资源分派。随着视频内容在我们一样平常生涯中的主要性一直提升,这种高效的处置惩罚手艺将为更多立异应用铺平蹊径,让通俗用户也能享受到更流通、更智能的视频AI体验。关于那些希望深入相识手艺细节的读者,可以通过论文编号arXiv:2512.04025v1查阅完整的研究报告。

Q&A

Q1:金字塔希罕注重力相比古板要领有什么优势?

A:金字塔希罕注重力的最大优势是能够凭证信息主要性分派差别的处置惩罚精度,而不是简朴的"要或不要"。这就像用差别倍率的望远镜视察差别距离的物体,既包管了主要信息的清晰度,又大幅降低了盘算量。实验显示它能在91%希罕度下仍坚持优异的视频天生质量。

Q2:金字塔希罕注重力能用在哪些现实应用中?

A:这项手艺可以普遍应用于视频明确和天生使命中,包括手机上的视频编辑、实时视频通话、短视频平台的内容天生、安防监控的智能剖析等。特殊是在移动装备上,它能显著降低电池消耗和发热,让用户获得更流通的视频AI体验。

Q3:通俗用户什么时间能体验到金字塔希罕注重力手艺?

A:虽然这项手艺现在主要在学术研究阶段,但其"即插即用"的设计特点使得它很容易集成到现有的AI视频系统中。预计在不久的未来,各大科技公司会将类似手艺应用到消耗级产品中,用户可能会在视频编辑App、智能手机相机功效等应用中体验到这种手艺带来的性能提升。

??时势1:琪拉黃色片

??12月10日,共赴羽坛“蓉”耀之约 成都2024汤尤杯志愿者陆续上岗,

  向导干部是人民的公仆,顺应民意、化解民忧、为民投契是自己的天职。这就要求我们必需紧跟时代生长的程序,与时俱进,开拓立异,把主要精神用在经济生长和社会稳固上,以求实的作风,始终把人民群众的利益挂在心上,把人民群众的事情抓在手上,要深怀爱民之心,恪守为民之责,善谋富民之策,多办利民之事。以人民群众最体贴的热门、难点问题为重点,实着实在为群众解难题,恳切至心为群众投契益。作为村级干部无论职位崎岖、权力巨细,就是要忠诚地推行职责,用忠实守信的言行赢得组织和群众的信任,真正做到“可靠、有本事”。

,免费一级特黄aa大片爽爽影院。

??12月10日,(巴黎奥运)国乒男女队均晋级奥运会团体八强,

  一要学深学透,提高事情能力。 这次培训,安排内容注重现实事情,涉及的营业知识有较强的针对性和适用性。因此要通过认真的学习,凭证科学生长观的要求,切实增强执政能力建设,提高事情实效。要进一步增强忧患意识和生长意识,坚持经济建设这其中心,全神贯注搞建设,一心一意营生长,通过生长来解决前进中面临的问题和难题,自觉地把头脑熟悉从那些不适时宜的看法、做法从体制的约束中解放出来,以立异促生长,以立异求突破,鼎力大举立异事情思绪、事情载体和事情要领,起劲实现我街道经济社会在更高平台上的新生长。

,www.敌人毛卡上床免费电影,野狼色在线,色欲色欲天天天VVV。

??时势2:免费看双女主炒菜视频

??12月10日,中东部雨雪过程今起收尾 气温偏低状态仍将维持,

  今天相聚_总部大楼,庆祝品牌“贝妮”建设14周年庆,与朋侪们分享我们的喜悦。首先我要向莅临的列位向导、列位朋侪、列位相助同伴体现热烈的接待和衷心的谢谢!

,日韩日批大片,镜流躺在床上流白色分泌物,中国帅小伙同性男男裸交。

??12月10日,【两会超话】港澳代表委员建言粤港澳大湾区发展,

  石村众人万万没有想到,这一次泛起了意外,远古异种狻猊竟因与离火牛魔、恶魔猿王酣战,最终竟没能毁掉那块烙有印记的宝骨。

,小 伸进 喷水国产,茶茶一∨k帆布鞋lVK,女班长被 c 扒衣服。

??时势3:云缨掰开屁股让我桶爽漫画

??12月10日,浙江杭州:七十年历史的新华书店升级回归,

  既然第一点做好了,那么经费就解决了,支持也就有了,剩下的我们尚有什么理由不起劲地事情了呢?

,日本黄大片BBBBB,欧美熟妇片XXXX欧美熟妇,亚洲中文久久精品无吗站。

??12月10日,过度追求社交“轻量化” 63.5%受访青年担心缺少知心人,

  “吱吱……”突然,毛球冲了出去,化成一道金光,翻山越岭,要进入山脉深处。

,男人的小坤坤,国产精品一区二区精品视频,亚洲第一黄色网站。

??时势4:国产精品黄黄久久久免费看视频

??12月10日,《海南省陆生野生动物及其栖息地保护规划(2024-2030年)》公开征求意见,

  蛟鹏力道极大,虽然只有五岁多,但双臂一晃足有数千斤之力,铁箭穿透力惊人!

,永久免费无码A片视频,无遮挡黄片,国产精品第一页九一桃色。

??12月10日,江文豪连任桂林市台资企业协会会长安徽国资国企履行社会责任 充分发挥“稳定器”作用,

捷信逾期一年说要起诉我:该怎样应对? 近年来,随着融市场的一直生长,越来越多的人选择乞贷来解决人或家庭的资需求。然而,随之而来的问题是,有些乞贷人可能由于种种缘故原由导致逾期款,而捷信作为一家着名的信贷公司,也不破例。若是你收到捷信逾期一年说要起诉我的通知,应该怎样应对呢? 要冷静应...

,亚洲一区二区三区久久精品视频,18禁黄漫,色呦呦二区亚洲。

【商业外摆新政回眸 杭州城市管理何以助企惠民?】

【世界周刊丨爱泼斯坦的名单】

责编:周林花

审核:鳌拜

责编:沈生

相关推荐 换一换

Copyright (C) 2001-   dzwww.com. All Rights Reserved

新闻信息效劳允许证 - 音像制品出书允许证 - 广播电视节目制作谋划允许证 - 网络视听允许证 - 网络文化谋划允许证

山东省互联网传媒集团主理  联系电话:0531-85193202  违法不良信息举报电话:0531-85196540

鲁ICP备09023866号-1   鲁公网安备 37010202000111号  

Copyright (C) 2001- Dzwww   鲁ICP备09023866号-1

网站地图