服装衣帽加盟展示行业网站模板
网站公告: 诚信为本:市场永远在变,诚信永远不变。
地址: 广东省广州市天河区号
电话:400
手机:13800000000
邮箱:admin@youweb.com

新闻资讯

NEWS
当前位置: 首页 > 新闻资讯

CUDA真是NVIDIA绝对牢不可破的生态吗?
CUDA真是NVIDIA绝对牢不可破的生态吗?

POSTTIME:2018-08-07     作者:     点击量:333

有人说,我做一款AI芯片,只要原生支持PyTorch就好了呀,用户直接用PyTorch跑模型,根本接触不到CUDA呀。

没错,一般的用户只要在PyTorch层面做应用,但是总是有新的模型架构出来,这些架构都需要做特定的性能优化才能在一个芯片上得到较高的性能,这时候就涉及到算子开发了。

比如说一开始LLM在GPU上的性能不好,后来社区针对Nvidia GPU做了flash attention等的优化才把LLM的性能提升到了比较可观的程度。

CUDA已经被各种开源AI框…。

CUDA真是NVIDIA绝对牢不可破的生态吗? 返回列表