v5.182.6088 安卓免費版
v1.896.3738.150905 最新版
v1.150.2072 最新版
v1.940.1939 安卓最新版
v3.658 最新版
v6.153.1782.995322 最新版
v9.244.1284.692997 安卓免費版
v9.57.6248 IOS版
v8.207.7696 安卓免費版
v8.554.8680.30913 IOS版
v5.700 IOS版
v3.345 安卓免費版
v4.316 安卓漢化版
v3.518.5996.322800 安卓版
v9.220.8724.169968 安卓免費版
v1.995.8211.378075 PC版
v9.810 安卓漢化版
v6.87.1938 安卓漢化版
v1.127 安卓漢化版
v8.653.3919 安卓免費版
v8.416.9392.992539 安卓漢化版
v7.504.2593.531474 PC版
v8.112 安卓版
v8.531.731.47761 安卓免費版
v9.686.4866.427434 安卓免費版
v1.870.4019 PC版
v5.457 安卓最新版
v6.553.6256 安卓最新版
v7.67.2405.522697 安卓漢化版
v2.772.8615.27916 PC版
v8.988.3964.769772 安卓漢化版
v1.249.8199 安卓最新版
v1.295.1003.929977 安卓版
v3.920.8881.589917 安卓版
v9.836.4298.201005 PC版
v9.643.1099.693034 安卓漢化版
v9.891.9473.149392 安卓免費版
v5.280.6276.234356 最新版
v2.440.6988.828191 安卓最新版
v5.543 安卓最新版
v1.529.1181.310880 最新版
v5.402.6114 安卓漢化版
v9.165 IOS版
v4.287.7216 最新版
v1.44.7073.292357 安卓漢化版
v7.493.6885 安卓免費版
v7.751.6569.220739 IOS版
v1.910.746 PC版
v8.205.6495.125611 安卓免費版
v8.666.8863.565488 安卓免費版
v4.808.8765.725230 安卓最新版
v5.529.4856.149988 安卓版
v4.368 安卓免費版
v4.402.9959.482432 安卓漢化版
v2.857.8384.479119 安卓免費版
v3.529.4945.812628 最新版
v2.529.1093.344926 安卓漢化版
v6.514.9904.302484 最新版
v2.891.8214.248442 安卓版
v3.988 安卓版
v1.76.1289.953489 PC版
v7.324.3603 安卓版
v9.570.4548.199696 最新版
v7.493.3736 安卓免費版
v8.486 IOS版
v7.650 安卓版
v1.839.8312 IOS版
v3.307.6805.45806 最新版
v2.51.1017.938047 安卓漢化版
v3.970.2183 PC版
v2.479.2101.307709 安卓免費版
v7.635.1463 安卓免費版
v7.612.6281.589023 安卓漢化版
v2.794 安卓免費版
v7.114 安卓最新版
v3.678.981 PC版
v4.338 PC版
v3.339.4302.356817 最新版
v7.570 安卓免費版
v8.855.4807.860225 安卓漢化版
国产高清精品免费精2021
梦晨 发自 凹非寺量子位 | 公众号 QbitAI
GPU编程变天了。
英伟达宣布最新版CUDA 13.1,官方直接定性:这是自2006年降生以来最大的前进。
焦点转变是推出全新的CUDA Tile编程模子,闪开发者可以用Python写GPU内核,15行代码就能抵达200行CUDA C++代码的性能。
新闻一出,芯片界传奇人物Jim Keller连忙发问:
英伟达是不是亲手终结了CUDA的“护城河”?若是英伟达也转向Tile模子,AI内核将更容易移植到其他硬件上。
Jim Keller加入设计过AMD Zen架构、苹果A系列芯片、特斯拉自动驾驶芯片的”硅仙人”,他的判断在行业里相当有分量。
那么问题来了:CUDA这次究竟改了什么?为什么会被以为是”自毁长城”?
GPU编程范式从“线程”到“瓦片”
要明确这次更新的意义,得先回首一下古板CUDA编程有多折磨人。
已往20年,CUDA一直接纳SIMT(单指令多线程)模子,开发者写代码时,需要手动治理线程索引、线程块、共享内存结构、线程同步,每一个细节都要自己操心。
想要充分使用GPU性能,特殊是用上Tensor Core这类专用?,更是需要深挚的履历积累。
CUDA Tile彻底改变了这套玩法:
开发者不再需要逐线程地编写执行路径,而是把数据组织成Tile(瓦片),然后界说在这些Tile上执行什么运算。至于怎么把这些运算映射到GPU的线程、Warp和Tensor Core上,编译器和运行时会自动搞定。
就似乎NumPy之于Python。
英伟达为此构建了两个焦点组件:
CUDA Tile IR是一套全新的虚拟指令集,它在高级语言和硬件之间加了一层笼统,确;赥ile编写的代码能在差别代际的GPU上运行,从目今的Blackwell到未来的架构都能兼容。
cuTile Python则是面向开发者的接口,直接用Python写GPU内核,门槛一下子从“HPC专家“降到了”会写Python的数据科学家都可以干。
另外,这次更新还带来了一系列面向Blackwell的性能优化:
cuBLAS引入了FP64和FP32精度在Tensor Core上的仿真功效新增的Grouped GEMM API在MoE(混淆专家模子)场景下能实现高达4倍加速cuSOLVER的批处置惩罚特征剖析在Blackwell RTX PRO 6000上相比L40S实现了约2倍的性能提升开发者工具Nsight Compute新增了对CUDA Tile内核的性能剖析支持,可以把性能指标直接映射回cuTile Python源代码。
现在CUDA Tile仅支持Blackwell架构(盘算能力10.x和12.x),开发重点集中在AI算法上。英伟达体现未来会扩展到更多架构,并推出C++实现。
硅仙人的质疑:降低门槛是一把双刃剑
那么Jim Keller为什么说英伟达可能”终结了自己的护城河”?
要害就在于Tile编程模子不是英伟达独吞的。AMD、Intel以及其他AI芯片厂商的硬件,在底层架构上同样可以支持基于Tile的编程笼统。
已往CUDA难以移植,很洪流平上是由于SIMT模子与英伟达硬件深度绑定,开发者要针对详细的GPU架构手写优化代码。这些代码换到别家硬件上,要么跑不了,要么性能大打折扣。
但Tile模子自然具有更高的笼统条理。当开发者习惯了“只管界说Tile运算,硬件细节交给编译器”这种头脑方法后,理论上统一套算法逻辑更容易适配到其他支持Tile编程的硬件上。
正如Jim Keller所说:”AI内核将更容易移植。”
不过英伟达也思量了后手,CUDA Tile IR提供了跨代兼容性,但这种兼容性是建设在CUDA平台之上的。
开发者写的代码确实更容易移植了,但移植的目的是英伟达自家的差别代GPU,而非竞争敌手的硬件。
从这个角度看,CUDA代码可以从Blackwell无缝迁徙到下一代英伟达GPU,但要迁徙到AMD或Intel的平台上,依然需要重写。
不管护城河是加深照旧削弱,有一点是确定的:GPU编程的门槛确着实大幅降低。
已往能熟练驾驭CUDA的开发者是稀缺资源,会写Python的人一抓一大把,但能把代码优化到跑满Tensor Core的专家寥若晨星。
CUDA Tile和cuTile Python买通了这个瓶颈。英伟达在开发者博客中提到,一个15行的Python内核性能可以媲美200行手动优化的CUDA C++代码。
大宗数据科学家和AI研究者以后可以直接上手写高性能GPU代码,不必再等HPC专家来资助优化。
参考链接:[1]https://developer.nvidia.com/blog/focus-on-your-algorithm-nvidia-cuda-tile-handles-the-hardware[2]https://x.com/jimkxa/status/1997732089480024498
相关版本
多平台下载
审查所有0条谈论>网友谈论
亚洲最大中文字幕无码网站
亚洲无码啪啪啪
日本免费的网的
久久精品毛片女人国产
羞羞漫画sss
射雕浽女传-
日本在线观看黄色视频
国产小视频精品一区二区三区
嫂子的逼视频
97国产精品视频
精品三级片网站
免费一级a毛片在线视频
国产激情福利久久精品久久
美女被ⅹ网站免费
http.//www.hsdnz.com
国产性爱网址
欧美美女中文字幕一区二区
亚州人人操人人干
黄色软件下载。
欧美在线观看26uuuu
色一色av网站
a级黄色的网站
3级a片黄色视频大全
打扑克剧烈摇床盖被子秘
国产黄在线播放免费观看
日夲人真人爱三级片无码毛片
免费网站日本
陌生人w w w w w w ww
色色色色色网站