猫眼影戏
猫眼影戏
张士军
手机审查
猫眼影戏记者 陈德清 报道Q8X2R7L1T4J5M9B6W3
梦晨 发自 凹非寺量子位 | 公众号 QbitAI
GPU编程变天了。
英伟达宣布最新版CUDA 13.1,官方直接定性:这是自2006年降生以来最大的前进。
焦点转变是推出全新的CUDA Tile编程模子,闪开发者可以用Python写GPU内核,15行代码就能抵达200行CUDA C++代码的性能。
新闻一出,芯片界传奇人物Jim Keller连忙发问:
英伟达是不是亲手终结了CUDA的“护城河”?若是英伟达也转向Tile模子,AI内核将更容易移植到其他硬件上。
Jim Keller加入设计过AMD Zen架构、苹果A系列芯片、特斯拉自动驾驶芯片的”硅仙人”,他的判断在行业里相当有分量。
那么问题来了:CUDA这次究竟改了什么?为什么会被以为是”自毁长城”?
GPU编程范式从“线程”到“瓦片”
要明确这次更新的意义,得先回首一下古板CUDA编程有多折磨人。
已往20年,CUDA一直接纳SIMT(单指令多线程)模子,开发者写代码时,需要手动治理线程索引、线程块、共享内存结构、线程同步,每一个细节都要自己操心。
想要充分使用GPU性能,特殊是用上Tensor Core这类专用?,更是需要深挚的履历积累。
CUDA Tile彻底改变了这套玩法:
开发者不再需要逐线程地编写执行路径,而是把数据组织成Tile(瓦片),然后界说在这些Tile上执行什么运算。至于怎么把这些运算映射到GPU的线程、Warp和Tensor Core上,编译器和运行时会自动搞定。
就似乎NumPy之于Python。
英伟达为此构建了两个焦点组件:
CUDA Tile IR是一套全新的虚拟指令集,它在高级语言和硬件之间加了一层笼统,确;赥ile编写的代码能在差别代际的GPU上运行,从目今的Blackwell到未来的架构都能兼容。
cuTile Python则是面向开发者的接口,直接用Python写GPU内核,门槛一下子从“HPC专家“降到了”会写Python的数据科学家都可以干。
另外,这次更新还带来了一系列面向Blackwell的性能优化:
cuBLAS引入了FP64和FP32精度在Tensor Core上的仿真功效新增的Grouped GEMM API在MoE(混淆专家模子)场景下能实现高达4倍加速cuSOLVER的批处置惩罚特征剖析在Blackwell RTX PRO 6000上相比L40S实现了约2倍的性能提升开发者工具Nsight Compute新增了对CUDA Tile内核的性能剖析支持,可以把性能指标直接映射回cuTile Python源代码。
现在CUDA Tile仅支持Blackwell架构(盘算能力10.x和12.x),开发重点集中在AI算法上。英伟达体现未来会扩展到更多架构,并推出C++实现。
硅仙人的质疑:降低门槛是一把双刃剑
那么Jim Keller为什么说英伟达可能”终结了自己的护城河”?
要害就在于Tile编程模子不是英伟达独吞的。AMD、Intel以及其他AI芯片厂商的硬件,在底层架构上同样可以支持基于Tile的编程笼统。
已往CUDA难以移植,很洪流平上是由于SIMT模子与英伟达硬件深度绑定,开发者要针对详细的GPU架构手写优化代码。这些代码换到别家硬件上,要么跑不了,要么性能大打折扣。
但Tile模子自然具有更高的笼统条理。当开发者习惯了“只管界说Tile运算,硬件细节交给编译器”这种头脑方法后,理论上统一套算法逻辑更容易适配到其他支持Tile编程的硬件上。
正如Jim Keller所说:”AI内核将更容易移植。”
不过英伟达也思量了后手,CUDA Tile IR提供了跨代兼容性,但这种兼容性是建设在CUDA平台之上的。
开发者写的代码确实更容易移植了,但移植的目的是英伟达自家的差别代GPU,而非竞争敌手的硬件。
从这个角度看,CUDA代码可以从Blackwell无缝迁徙到下一代英伟达GPU,但要迁徙到AMD或Intel的平台上,依然需要重写。
不管护城河是加深照旧削弱,有一点是确定的:GPU编程的门槛确着实大幅降低。
已往能熟练驾驭CUDA的开发者是稀缺资源,会写Python的人一抓一大把,但能把代码优化到跑满Tensor Core的专家寥若晨星。
CUDA Tile和cuTile Python买通了这个瓶颈。英伟达在开发者博客中提到,一个15行的Python内核性能可以媲美200行手动优化的CUDA C++代码。
大宗数据科学家和AI研究者以后可以直接上手写高性能GPU代码,不必再等HPC专家来资助优化。
参考链接:[1]https://developer.nvidia.com/blog/focus-on-your-algorithm-nvidia-cuda-tile-handles-the-hardware[2]https://x.com/jimkxa/status/1997732089480024498
??时势1:黄片一区二区视频
??12月09日,中粮集团大悦城控股集团股份有限公司党委书记、总经理曹荣根接受纪律审查和监察调查,
不需细说,这块骨绝对有惊人的泉源,一看就不是凡物,像是纪录了骨文一道的的无上真义。
,一本道AV在线观看。??12月09日,“消失”50多年的峰斑林蛙重现四川峨眉山,
太阳下山,斜阳染红天涯,一群狩猎的人回来了,猎物不是许多,并且有人被抬了回来。
,亚洲欧美日韩综合在线观看网站,narutojizzxxxx,动漫美女被男朋友在床上结吻视频。??时势2:www.xxffqz.com
??12月09日,(新春走基层)乡土专家和他的一把果树剪刀,
新一届学生会要传承上届学生会的优良作风和精神,以一心一意为宽大同砚效劳为宗旨,充分验展学生会的作用,为建设优异的校风、学风作出自己的一份孝顺!
,男生困困进女生困困,日本爆乳在线播放,91视频黄色在看。??12月09日,江西省十四届人大二次会议在南昌开幕,
x曾指出:“中国人民解放军是人民民主专政的顽强柱石,是捍卫社会主义祖国的钢铁长城,是建设有中国特色社会主义的主要实力”。平时,我们大部分同砚与人武部官兵接触少,现在,有时机加入军训生涯,一定要珍惜这难堪而短暂的时机,虚心学习他们的好头脑、好作风和庆幸革命古板,学习他们高尚的忠于党、忠于祖国、忠于人民的爱国主义精神、无私贡献的精神和艰辛斗争的精神,并以此为动力,把所学到的优良品行和作风贯串到以后的学习、生涯和事情中去,受苦学习知识,更好地报效祖国、效劳人民。
,久久丝袜福利视频,久久久久久免费免费精品精品,亚洲高清三级免费视。??时势3:俱乐部换娇妻大杂交黑人
??12月09日,歌剧《马可·波罗》重现广州大剧院舞台,
亲爱的小朋侪,今日你们仍然是欢呼雀跃的,十分兴奋!我代表所有的先生们祝福你们未来一片优美!你们从一个哭哭啼啼的小宝宝生长为才艺傍身、知书识礼的孩子,看着你们的生长,我们和你们的爸爸妈妈都无限喜悦和欣慰。希望你们在未来的学习和生涯当中,仍然保保存幼儿园养成的爱阅读的好习惯,腹有诗书气自华,我相信你们大宗的阅读一定会让学习优异,生涯充满情趣。仍然坚持你们一颗纯净的心,用好奇的眼睛去视察和相识天下。学会用感恩的方法去看待周围的人,爱自己爸爸妈妈,爱你的家人,爱你的朋侪。
,手机毛片网址,开心黄色网,欧美视频高清在线观看视频。??12月09日,学习进行时丨领悟习近平文化思想系列之四:着力提升新闻舆论传播力引导力影响力公信力,
12日上午10时,在第五个全民国家清静教育日到来之际,省教育厅、共青团湖北省委、湖北广播电视台配合在华中师范大学举行《同上一堂国家清静教育课》,营造国家清静人人有责、人人可为的浓重气氛。
,亚洲午夜网站,禁止18岁网站视频免费,手机在线看视频你懂得。??时势4:巨胸爆乳 下载
??12月09日,黄河壶口瀑布迎来2024年首场降雪,
进一步增强保密事情。某近年来虽然没有爆发过大的失泄密案件,但通过有关部分的一再专项检查,照旧袒露出许多薄弱环节,有些单位和部分甚至保存失泄密的重大隐患,这些问题若是任其生长,效果不堪设想。对此,我们要有苏醒的熟悉,接纳步伐,强化治理,牢靠修建保密清静防地。一是要切实抓好规范定密事情,从源头抓起,尽快建设和完善有关定密事情的规章制度,严酷执行定密程序,坚决战胜定密事情的随意性;二是高度重视电子政务建设和应用中的保密治理,重点抓好政务内网建设和应用中的保密治理,严禁涉及神秘的信息上网。三是增强保密催促检查和对失泄密案件的督查力度,填补误差,镌汰隐患,杜绝泄密事务爆发;四是抓好保密手艺事情,增强保密手艺提防能力,逐步改善保密设施和办文条件,起劲提高地某地保密手艺的整体提防能力。
,黄页免费观看免费,www .激情小说.com,在线观看黄色三级片动态图片。??12月09日,近40名亚洲旅行商长沙采风 助力文旅产业可持续性增长,
“定心,老家伙死不了,只是给你们一个教训罢了。”脱手的人大笑,道:“我们也不是不讲原理,也不想随便开杀劫,只要你们知足我们的要求,保你们无恙。”
,曰批全过程免费视频观看30分钟,欧美日韩伦理,华人91国内在线视频。【美国白宫回应韩国戒严:正密切关注】
责编:迈克尔·阿卡迪亚
审核:程一方
责编:亚当·桑德勒
Copyright (C) 2001- dzwww.com. All Rights Reserved
新闻信息效劳允许证 - 音像制品出书允许证 - 广播电视节目制作谋划允许证 - 网络视听允许证 - 网络文化谋划允许证
山东省互联网传媒集团主理 联系电话:0531-85193202 违法不良信息举报电话:0531-85196540
Copyright (C) 2001- Dzwww 鲁ICP备09023866号-1