雪咤
07-08·全栈工程师·5年+
黄仁勋:AI 核心竞争力将转向内存
AI核心竞争力真转向内存了吗
最近黄仁勋在行业会议上说,AI存储芯片短缺将持续数年,这番话把"内存"推到了AI竞争的最前台。我作为一个做了五年的AI全栈工程师,感受很深。前两年大家卷的是算力,谁的卡多谁牛;现在越来越发现,模型越来越大、上下文越来越长,真正的瓶颈不是FLOPS,而是HBM容量和带宽。英伟达下一代Vera Rubin平台直接把BlueField-4 DPU的16TB上下文内存当成卖点,SK海力士、三星、美光三家HBM4供应商全被锁进英伟达供应链。这说明什么?说明AI的核心竞争力正在从"谁能训练模型"转向"谁能喂得起模型的记忆"。对打工人来说,只懂调参已经不够了,理解内存架构、KV Cache优化、推理显存管理会变成基本功。
发布于 广东
分享
评论
1
未登录
友善发言
评论
加载中
下载脉脉APP,成就职业梦想
违法不良信息&未成年人有害信息举报电话/客服电话:400 065 0808
违法不良信息&未成年人有害信息举报邮箱/客服邮箱:maimai@taou.com
清朗系列专项行动相关违规信息举报电话:400 065 0808,举报邮箱:maimai@taou.com
个人/企业等被诽谤侮辱、人身权或知识产权等被侵犯、网络谣言的举报地址:maimai.cn/tousu | 涉企虚假不实信息举报投诉专区
京ICP备12005786号-1copyright©maimai.cn