如果说HPC的历史教会了我们什么的话，那就是不能以牺牲存储和网络为代价，过分关注计算。如果存储无法以良好的性能及时将数据传输到计算单元，那么即使你手握世界上最多的GPU，也无法将其转化为效率。

IT分析公司 Small World Big Data 的分析师 Mike Matchett 表示，有些模型足够小，可以在内存（RAM）中执行，从而将更多的注意力放在计算上。但如今像ChatGPT这样的大模型，需要数十亿个节点，无法保存在内存中，因为成本太高。

“你无法在内存中存放数十亿个节点，存储变得更加重要。”Matchett 说。