首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

“硅仙人”吐槽英伟达 CUDA:是树沼,而非护城河

IT之家 2 月 20 日消息,有“硅仙人”称号的吉姆・凯勒近日发布推文,表示“CUDA 是树沼,而非护城河,X86 也是树沼”。

凯勒在后续推文中表示:

CUDA 毫无美感,只是粗暴地堆砌而成。

基本上没有人会写 CUDA,即便是写了相关代码,其执行速度也不快。

这也是为何 Triton、Tensor RT、Neon、Mojo 孕育而出的原因。

IT之家注:CUDA 工具包是 NVIDIA 为开发人员提供的一个软件套件,它让开发人员使用 NVIDIA 的图形处理单元(GPU)来运行通用计算任务,特别是那些需要大量并行处理能力的任务。

凯勒认为 CUDA 像 X86 一样,英伟达为了确保软件和硬件的向后兼容性,逐步增加功能的过程中拖慢了性能,增加了程序开发的难度。与此同时,许多开源软件开发框架可以比 CUDA 更高效地使用。

就连 Nvidia 本身也有不完全依赖 CUDA 的工具。

例如,Triton Inference Server 是 Nvidia 的一款开源工具,可简化人工智能模型的大规模部署,支持 TensorFlow、PyTorch 和 ONNX 等框架。

Triton 还提供模型版本化、多模型服务和并发模型执行等功能,以优化 GPU 和 CPU 资源的利用率。

  • 发表于:
  • 原文链接https://page.om.qq.com/page/OoiEHswWGhbtCjNINlFYhiWg0
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券