告别GPU资源浪费：CUDA 13.5为Vera Rubin提供灵活计算分区的生产级支持

11月5日消息，NVIDIA于11月4日正式发布CUDA Toolkit 13.5，为下一代AI计算平台Vera Rubin提供生产级通用可用支持。这标志着Vera Rubin从早期预览阶段正式进入企业生产部署阶段。

本次更新针对Rubin架构的低精度矩阵运算优化了底层内核。NVIDIA称无需针对每种计算形状逐一调校即可提升吞吐量。值得注意的是，从Rubin架构起，CUDA不再支持TCC模式，仅提供WDDM和MCDM两种Windows驱动模型。

GPU调度方面，多实例服务架构v3引入加权时间切片，允许为重负载服务器设置更长的基础计算时间片，并独立调节GPU在任务间的切换频率。多租户场景下的GPU共享控制更加精细，有效减少了资源抢占。

局部域也获得增强。系统现在支持两种流式多处理器分区策略：一是各局部域使用统一数量保证可预测性；二是将域外补充流式处理器纳入分区以用满全部资源。计算分区支持资源的动态借调与回收，但无论资源如何流转，应用所获得的基础资源配额始终保持稳定。

计算内核层级迎来多GPU通信能力。内核可通过高速互连网络直接访问其他GPU的内存，并支持跨显卡的数据归约，将通信与计算融合在同一个内核中完成，大幅降低多卡协同的通信开销。

此外，性能分析工具以公开预览形式亮相，为长时间运行的训练与推理提供常开式监控，帮助排查难以复现的间歇性问题。从硬件生产就绪到调度优化，CUDA 13.5为下一代算力集群补齐了底层工具链。

此次更新同步搭配NVIDIA 620.70.06 Linux驱动发布。