猫眼影戏
 |
|
猫眼影戏
齐宝香
手机审查
猫眼影戏记者 王小敏 报道Q8X2R7L1T4J5M9B6W3
梦晨 发自 凹非寺量子位 | 公众号 QbitAI
GPU编程变天了。
英伟达宣布最新版CUDA 13.1 ，官方直接定性：这是自2006年降生以来最大的前进。
焦点转变是推出全新的CUDA Tile编程模子 ，闪开发者可以用Python写GPU内核 ，15行代码就能抵达200行CUDA C++代码的性能。
新闻一出 ，芯片界传奇人物Jim Keller连忙发问：
英伟达是不是亲手终结了CUDA的“护城河” ？若是英伟达也转向Tile模子 ，AI内核将更容易移植到其他硬件上。
Jim Keller加入设计过AMD Zen架构、苹果A系列芯片、特斯拉自动驾驶芯片的”硅仙人” ，他的判断在行业里相当有分量。
那么问题来了：CUDA这次究竟改了什么 ？为什么会被以为是”自毁长城” ？
GPU编程范式从“线程”到“瓦片”
要明确这次更新的意义 ，得先回首一下古板CUDA编程有多折磨人。
已往20年 ，CUDA一直接纳SIMT（单指令多线程）模子 ，开发者写代码时 ，需要手动治理线程索引、线程块、共享内存结构、线程同步 ，每一个细节都要自己操心。
想要充分使用GPU性能 ，特殊是用上Tensor Core这类专用 ？ ，更是需要深挚的履历积累。
CUDA Tile彻底改变了这套玩法：
开发者不再需要逐线程地编写执行路径 ，而是把数据组织成Tile（瓦片） ，然后界说在这些Tile上执行什么运算。至于怎么把这些运算映射到GPU的线程、Warp和Tensor Core上 ，编译器和运行时会自动搞定。
就似乎NumPy之于Python。
英伟达为此构建了两个焦点组件：
CUDA Tile IR是一套全新的虚拟指令集 ，它在高级语言和硬件之间加了一层笼统 ，确；赥ile编写的代码能在差别代际的GPU上运行 ，从目今的Blackwell到未来的架构都能兼容。
cuTile Python则是面向开发者的接口 ，直接用Python写GPU内核 ，门槛一下子从“HPC专家“降到了”会写Python的数据科学家都可以干。
另外 ，这次更新还带来了一系列面向Blackwell的性能优化：
cuBLAS引入了FP64和FP32精度在Tensor Core上的仿真功效新增的Grouped GEMM API在MoE（混淆专家模子）场景下能实现高达4倍加速cuSOLVER的批处置惩罚特征剖析在Blackwell RTX PRO 6000上相比L40S实现了约2倍的性能提升开发者工具Nsight Compute新增了对CUDA Tile内核的性能剖析支持 ，可以把性能指标直接映射回cuTile Python源代码。
现在CUDA Tile仅支持Blackwell架构（盘算能力10.x和12.x） ，开发重点集中在AI算法上。英伟达体现未来会扩展到更多架构 ，并推出C++实现。
硅仙人的质疑：降低门槛是一把双刃剑
那么Jim Keller为什么说英伟达可能”终结了自己的护城河” ？
要害就在于Tile编程模子不是英伟达独吞的。AMD、Intel以及其他AI芯片厂商的硬件 ，在底层架构上同样可以支持基于Tile的编程笼统。
已往CUDA难以移植 ，很洪流平上是由于SIMT模子与英伟达硬件深度绑定 ，开发者要针对详细的GPU架构手写优化代码。这些代码换到别家硬件上 ，要么跑不了 ，要么性能大打折扣。
但Tile模子自然具有更高的笼统条理。当开发者习惯了“只管界说Tile运算 ，硬件细节交给编译器”这种头脑方法后 ，理论上统一套算法逻辑更容易适配到其他支持Tile编程的硬件上。
正如Jim Keller所说：”AI内核将更容易移植。”
不过英伟达也思量了后手 ，CUDA Tile IR提供了跨代兼容性 ，但这种兼容性是建设在CUDA平台之上的。
开发者写的代码确实更容易移植了 ，但移植的目的是英伟达自家的差别代GPU ，而非竞争敌手的硬件。
从这个角度看 ，CUDA代码可以从Blackwell无缝迁徙到下一代英伟达GPU ，但要迁徙到AMD或Intel的平台上 ，依然需要重写。
不管护城河是加深照旧削弱 ，有一点是确定的：GPU编程的门槛确着实大幅降低。
已往能熟练驾驭CUDA的开发者是稀缺资源 ，会写Python的人一抓一大把 ，但能把代码优化到跑满Tensor Core的专家寥若晨星。
CUDA Tile和cuTile Python买通了这个瓶颈。英伟达在开发者博客中提到 ，一个15行的Python内核性能可以媲美200行手动优化的CUDA C++代码。
大宗数据科学家和AI研究者以后可以直接上手写高性能GPU代码 ，不必再等HPC专家来资助优化。
参考链接：[1]https://developer.nvidia.com/blog/focus-on-your-algorithm-nvidia-cuda-tile-handles-the-hardware[2]https://x.com/jimkxa/status/1997732089480024498
??时势1：日本一区色色网
??12月09日,国家统计局：2023年全国固定资产投资增长3.0%, 据中国福利会官方微信新闻 ，6月11日下昼 ，全体与会代表在北京宋庆龄故宅举行庄重的敬献花篮仪式 ，李斌向宋庆龄汉白玉雕像敬献花篮 ，向导全场职员肃立并向宋庆龄雕像三鞠躬。,星野被后入。
??12月09日,山西忻州求新谋变 城乡融合绘高质量发展新画卷,
“对呀 ，以后我们石村将会有飞空的战禽了 ，这可是远古魔禽后裔的三枚卵。
,免费观看国产一级黄色网站,国产精品毛片在线更新,小黄片视频在线看。??时势2：A片区
??12月09日,南光集团举办庆祝成立75周年酒会,
“我们是幸运的 ，也是不幸的。”族长石云峰的眼中有悲也有沧桑 ，昔时的好兄弟都死了 ，只有他一小我私家活下来 ，他心中有着无尽的痛。
,徐州镀锌钢绞线厂家用小马营销导航,姐姐主动解开内衣让我吃,白人女孩光屁股洗澡。??12月09日,《跟着音乐大师去旅行》带读者体验一趟发现音乐的沉浸之旅,
精璧大爷的笑容马上凝固了 ，等你研究透了 ，那得几十年啊 ，我还能看到那一天吗 ？尚有 ，你个小兔崽子 ，我不叫精璧！
,进去里 片欧美,色拍拍555,第五人格女角色本子库。??时势3：免费观看一区二区三区毛片
??12月09日,意大利总统：送中国流失文物“回家” 我深感自豪！,
1、列位先生要树立身牌意识 ，每小我私家都要从学校要生长、要生涯的高度 ，高标准 ，严要求 ，各人要坚持四个“始终”——始终有一个在事业上追求的目的;始终有一个终身学习 ，一直完善自我的意识;始终有一个负重奋进、争创一流的恒心;始终有一个勇于受苦、忍让容人的胸怀。起劲追求内在修养与外在形象的统一 ，敬重学校声誉 ，打造良勤学校形象 ，为中学一连生长涤讪。
,最爽爱爱高潮免费视频,色情小红书APP,日韩狼友视频。??12月09日,最高检：坚决维护国家安全 去年前11个月起诉各类犯罪150.2万人,
在“东跨、南进、西补、北延”政府妄想蓝图中 ，将以南部奥体中心为焦点 ，打造对话天下新都会国界 ，即南部国际CSD ，升级南部商圈。“古板的老城商贸中心”将由“城北新区行政、商贸、文化中心”改写。南部“三星拱月”的生长名堂、历史性的新貌由城北西区落下了浓墨重彩的一笔 ，新区已经蒸蒸日上的生长远景 ，注定这是一块财产洼地。 2 、县政府 ，都会新中心
,激情小說圖區,伊人色一区二区,强行挺进白丝老师翘臀漫画。??时势4：黑人AAAAAAAA片免费
??12月09日,【中国味道】什锦砂锅：小火慢炖 烹出年味,
那么怎样才华提高自我；さ囊馐赌?
,欧美1819sex性处BBW,人人操人人超,一本色道久久久888。??12月09日,日本震区半个月有感地震达1400多次,
“人类你可知在对语言 ？！”它话语铿锵 ，如刀剑齐鸣 ，有一种威严。
,欧美日韩色欲免费网站,99re国产视频,五月综合色色网。责编：张文达
审核：苏坂
责编：张晋顼
Copyright (C) 2001- dzwww.com. All Rights Reserved
新闻信息效劳允许证 - 音像制品出书允许证 - 广播电视节目制作谋划允许证 - 网络视听允许证 - 网络文化谋划允许证
山东省互联网传媒集团主理 联系电话：0531-85193202 违法不良信息举报电话：0531-85196540
Copyright (C) 2001- Dzwww 鲁ICP备09023866号-1
