猫眼影戏
 |
|
猫眼影戏
张敬轩
手机审查
猫眼影戏记者 金玫 报道Q8X2R7L1T4J5M9B6W3
梦晨 发自 凹非寺量子位 | 公众号 QbitAI
GPU编程变天了。
英伟达宣布最新版CUDA 13.1 ，官方直接定性：这是自2006年降生以来最大的前进。
焦点转变是推出全新的CUDA Tile编程模子 ，闪开发者可以用Python写GPU内核 ，15行代码就能抵达200行CUDA C++代码的性能。
新闻一出 ，芯片界传奇人物Jim Keller连忙发问：
英伟达是不是亲手终结了CUDA的“护城河”？若是英伟达也转向Tile模子 ，AI内核将更容易移植到其他硬件上。
Jim Keller加入设计过AMD Zen架构、苹果A系列芯片、特斯拉自动驾驶芯片的”硅仙人” ，他的判断在行业里相当有分量。
那么问题来了：CUDA这次究竟改了什么？为什么会被以为是”自毁长城”？
GPU编程范式从“线程”到“瓦片”
要明确这次更新的意义 ，得先回首一下古板CUDA编程有多折磨人。
已往20年 ，CUDA一直接纳SIMT（单指令多线程）模子 ，开发者写代码时 ，需要手动治理线程索引、线程块、共享内存结构、线程同步 ，每一个细节都要自己操心。
想要充分使用GPU性能 ，特殊是用上Tensor Core这类专用？ ，更是需要深挚的履历积累。
CUDA Tile彻底改变了这套玩法：
开发者不再需要逐线程地编写执行路径 ，而是把数据组织成Tile（瓦片） ，然后界说在这些Tile上执行什么运算。至于怎么把这些运算映射到GPU的线程、Warp和Tensor Core上 ，编译器和运行时会自动搞定。
就似乎NumPy之于Python。
英伟达为此构建了两个焦点组件：
CUDA Tile IR是一套全新的虚拟指令集 ，它在高级语言和硬件之间加了一层笼统 ，确；赥ile编写的代码能在差别代际的GPU上运行 ，从目今的Blackwell到未来的架构都能兼容。
cuTile Python则是面向开发者的接口 ，直接用Python写GPU内核 ，门槛一下子从“HPC专家“降到了”会写Python的数据科学家都可以干。
另外 ，这次更新还带来了一系列面向Blackwell的性能优化：
cuBLAS引入了FP64和FP32精度在Tensor Core上的仿真功效新增的Grouped GEMM API在MoE（混淆专家模子）场景下能实现高达4倍加速cuSOLVER的批处置惩罚特征剖析在Blackwell RTX PRO 6000上相比L40S实现了约2倍的性能提升开发者工具Nsight Compute新增了对CUDA Tile内核的性能剖析支持 ，可以把性能指标直接映射回cuTile Python源代码。
现在CUDA Tile仅支持Blackwell架构（盘算能力10.x和12.x） ，开发重点集中在AI算法上。英伟达体现未来会扩展到更多架构 ，并推出C++实现。
硅仙人的质疑：降低门槛是一把双刃剑
那么Jim Keller为什么说英伟达可能”终结了自己的护城河”？
要害就在于Tile编程模子不是英伟达独吞的。AMD、Intel以及其他AI芯片厂商的硬件 ，在底层架构上同样可以支持基于Tile的编程笼统。
已往CUDA难以移植 ，很洪流平上是由于SIMT模子与英伟达硬件深度绑定 ，开发者要针对详细的GPU架构手写优化代码。这些代码换到别家硬件上 ，要么跑不了 ，要么性能大打折扣。
但Tile模子自然具有更高的笼统条理。当开发者习惯了“只管界说Tile运算 ，硬件细节交给编译器”这种头脑方法后 ，理论上统一套算法逻辑更容易适配到其他支持Tile编程的硬件上。
正如Jim Keller所说：”AI内核将更容易移植。”
不过英伟达也思量了后手 ，CUDA Tile IR提供了跨代兼容性 ，但这种兼容性是建设在CUDA平台之上的。
开发者写的代码确实更容易移植了 ，但移植的目的是英伟达自家的差别代GPU ，而非竞争敌手的硬件。
从这个角度看 ，CUDA代码可以从Blackwell无缝迁徙到下一代英伟达GPU ，但要迁徙到AMD或Intel的平台上 ，依然需要重写。
不管护城河是加深照旧削弱 ，有一点是确定的：GPU编程的门槛确着实大幅降低。
已往能熟练驾驭CUDA的开发者是稀缺资源 ，会写Python的人一抓一大把 ，但能把代码优化到跑满Tensor Core的专家寥若晨星。
CUDA Tile和cuTile Python买通了这个瓶颈。英伟达在开发者博客中提到 ，一个15行的Python内核性能可以媲美200行手动优化的CUDA C++代码。
大宗数据科学家和AI研究者以后可以直接上手写高性能GPU代码 ，不必再等HPC专家来资助优化。
参考链接：[1]https://developer.nvidia.com/blog/focus-on-your-algorithm-nvidia-cuda-tile-handles-the-hardware[2]https://x.com/jimkxa/status/1997732089480024498
??时势1：少妇一区二区三区97
??12月10日,体育赋能乡村振兴 河北武安打造农民家门口的运动场,
至强的恶魔猿一下子跌落了下来 ，张开血盆大口 ，露出雪白獠牙 ，它以独臂攻击 ，全身符文闪灼 ，要祭强盛的宝术。
,国产老年人免费黄色录像。??12月10日,前三季度规上轻工企业实现利润超万亿元,
若是通俗人走在这里 ，肯定坚持不了多长时间就要昏厥 ，这片沙漠温度高的有些吓人 ，宛若一个大火炉般。
,一二级黄片免费看,免费看操片,成色18k1.8811.7v18K1.8811.7V(成色18K1.8811.7V珠宝鉴赏与选购...。??时势2：欧美高清在线视频看片在线观看日韩
??12月10日,民政部：将进一步增强居家社区养老服务供给能力,
“嗯 ，爷爷带我泉源练 ，他说这是一场严肃的磨砺之旅 ，一切都要靠我自己 ，没有生命危险 ，他不会管我。”小不点“很坦率” ，像是藏不住话。
,人澡人人澡人人爽欧美,国产互换人妻XXXXXX6,精品丝袜国产自在线拍AⅤ。??12月10日,为家乡代言！李宇春受聘四川文化旅游宣传推广大使,
一群人目瞪口呆 ，卓云长老好恐怖 ，大嘴一张 ，狂啸不止 ，震的天地都在轰鸣 ，这跟不久前文质彬彬、一副淡定从容的样子完全差别了。
,欧美人禽杂交黑人一级A片,日本色片中文字幕,狙仙的宝库全部免费观看。??时势3：白白发布在线永久网站
??12月10日,2023年中国外贸有五个“超预期”,
看到他这个样子 ，族长石云峰脸上的皱纹一颤 ，就是石林虎与石飞蛟几人也都神色变了 ，不再盯着独角兽看。
,男女日逼的黄色网站黄色网站黄色网站网站,美女A黄片,大精鱼网页版最新版本功能。??12月10日,从“乡村T台”走向世界时装周,
先生们、同砚们 ，我们已经踏着坚实的程序走进了20xx年的秋季。让我们携手并肩 ，同心同德 ，智慧事情 ，配合誊写xx中学越发壮丽多彩的章!
,两个人的免费黄色视频,国产真实在线观看视频,亚洲黄色视频一区二区不卡。??时势4：av动态
??12月10日,江苏省侨办恭贺2024新春,
绣有金色狼头的大帐中 ，走出一个高峻的老人 ，眸子开阖间 ，金光一缕缕 ，慑人心魄 ，他一把抓起了断臂中年人 ，掌心泛起一枚金色的符文 ，霞光飞射 ，没入其体内。
,搡女人真爽免费视频app,大黄少妇,欧美一本在线线视频一区。??12月10日,【两会30秒】高松：更多地参与高水平研究是培养创造力的重要途径之一,
新的学期又最先了 ，在我们每小我私家的眼前都摊开了一张新白纸 ，那么我们将怎样在这张白纸上画出人生的又一幅精彩的画卷呢?同砚们 ，选择了勤勉和斗争 ，也就选择了希望与收获;选择了纪律与约束 ，也就选择了理智与自由;选择了痛苦与艰难 ，也就选择了练达与成熟;选择了拼搏与逾越 ，也就选择了乐成与绚烂!那么就请用我们的勤劳和汗水 ，用我们的智慧和热情 ，捉住这名贵的今天 ，师生团结一心 ，起劲在现在 ，去创立优美的明天吧。
,欧美α视频,大雷打狙在线观看免费播放第3季,538精品一区视频在线。【辽宁省铁岭市铁岭县境内王河发生溃口 宽度18米】
责编：程维高
审核：陈金标
责编：李凤荷
Copyright (C) 2001- dzwww.com. All Rights Reserved
新闻信息效劳允许证 - 音像制品出书允许证 - 广播电视节目制作谋划允许证 - 网络视听允许证 - 网络文化谋划允许证
山东省互联网传媒集团主理 联系电话：0531-85193202 违法不良信息举报电话：0531-85196540
鲁ICP备09023866号-1 鲁公网安备 37010202000111号
Copyright (C) 2001- Dzwww 鲁ICP备09023866号-1
