（原标题：英伟达GPU，好日子到头了？）

要是您但愿不错平常碰面，迎接标星保藏哦~

起原：内容来自eetimes.jp，谢谢。

异日NVIDIA GPU需求加多的“GPU节”会发生什么？在本文中，咱们通过分析 AI（东说念主工智能）做事器出货量数据来预测 NVIDIA“GPU 节”的异日。

NVIDIA的“GPU节”会杀青吗？

自2022年11月30日好意思国Open AI发布ChatGPT以来，生成式AI（东说念主工智能）成为一大高涨，NVIDIA的GPU行动AI半导体初始流行。然而，在GPU的坐褥中，存在两个瓶颈：台积电的中制程和高带宽内存（HBM）与DRAM堆叠，导致GPU在民众范围内枯竭“瓶颈是HBM和台积电之间的中间制程吗？”

在这些GPU中，“H100”的需求量尤其大，其价钱飙升至4万好意思元，激发了所谓的NVIDIA“GPU节”。

在这种情况下，台积电将中制程中介层产能翻倍，SK海力士等DRAM制造商加多了HBM产量，导致“H100”的交货技巧从52周镌汰至20周。

那么，NVIDIA的“GPU节”会杀青吗？

因此，在这篇著述中，咱们将商榷NVIDIA的“GPU节”是否行将杀青。先说论断，预计即使到2024年，ChatGPT级AI树立和运营所需的高端AI做事器（界说将在背面领悟）也唯有3.9%的出货量。因此，谷歌、亚马逊、微软等云做事提供商（CSP）的需求似乎根底无法得到雀跃。总之，到面前为止，NVIDIA 的“GPU 节”还仅仅一个初始，全面的生成式 AI 高涨行将到来。

底下，咱们先简便回归一下NVIDIA GPU的两大瓶颈。

两个NVIDIA GPU瓶颈

在NVIDIA GPU的坐褥中，代工场台积电阐扬所有前、中、后工序。这里，中间工序是指分别坐褥GPU、CPU、HBM等芯片，并将其搁置在从12英寸硅片切下的方形基板上的工序。这种基板称为硅中介层（图 1）。

图1 2.5D到3D中出现的中级工艺，举例NVIDIA GPU（贵寓起原：Tadashi Kamewada）

另外，台积电树立的NVIDIA GPU封装称为CoWoS（Chip on Wafer on Substrate），但两个瓶颈是硅中介层容量和HBM（图2）。情况如下。

图2 CoWoS结构和NVIDIA GPU上的两个瓶颈（起原：WikiChip）

CoWoS 于 2011 年树立，但尔后，跟着 GPU 性能的提升，GPU 芯片的尺寸不断增大，GPU 中装置的 HBM 数目也随之加多（图 3）。后果，硅中介层逐年变大，而从单个晶圆上可获取的中介层数目却与之成反比减少。

图3 Interposer面积和HBM数目跟着每一代的加多而加多（贵寓起原：KC Yee(TSMC)）

此外，GPU中装置的HBM数目加多，HBM里面堆叠的DRAM芯片数目也加多。此外，DRAM每两年就会微型化一次，HBM圭臬每两年更新一次以提升性能。因此，顶端HBM供不应求。

在这种情况下，台积电将其硅中介层产能从2023年夏日前后的每月15000片翻倍至本年夏日前后的每月进步30000片。此外，三星电子和好意思光科技已获取NVIDIA认证，并初始供应顶端HBM，此前由SK海力士主导。

受上述影响，需求量最高的NVIDIA H100的交货技巧从52周大幅镌汰至20周。那么，AI做事器的出货量因此加多了若干呢？

两类AI做事器的界说

左证DIGITIMES Research发布的《民众年度做事器出货量，2023-2024》（Servers Report Database， 2024）表现，AI做事器有两种类型：

配备两个或多个AI加快器但未配备HBM的系统称为“通用AI做事器”。

配备至少四个搭载HBM的AI加快器的系统被称为“高端AI做事器”。

这里的AI加快器是指为加快AI诈欺，特等是神经网罗和机器学习而想象的特殊硬件，典型的例子即是NVIDIA的GPU。此外，ChatGPT级别的生成式AI的树立和运行需要大齐高端AI做事器，而不是通用AI做事器。

那么，通用AI做事器和高端AI做事器的出货量分别是若干？

通用AI做事器和高端AI做事器出货量

图4表现了2022年至2023年通用AI做事器和高端AI做事器的出货量。预计2022年通用AI做事器出货量为34.4万台，2023年出货量为47万台，2024年出货量为72.5万台。

图4 通用AI做事器和高端AI做事器出货量（2022-2024）（贵寓起原：DIGITIMES Research）

同期，ChatGPT级生成式AI树立和运营所需的高端AI做事器预计2022年出货3.4万台，2023年出货20万台，2024年出货56.4万台。

那么，高端AI做事器的出货量能否雀跃好意思国CSP的需求呢？

图5表现了做事器、通用AI做事器和高端AI做事器的出货数目。当我画出这张图并看着它时，我惊呆了，思知说念“这是有若干高端AI做事器正在出货吗？ ”这是因为，从做事器举座来看，无论是通用东说念主工智能做事器如故高端东说念主工智能做事器，出货量齐异常少。

图5 做事器、通用AI做事器、高端AI做事器出货量

贵寓起原：作家左证MIC和DIGITIMES

当我商酌树立和运行 ChatGPT 级别的生成式 AI 需要若干高端 AI 做事器时，我愈加失望。

ChatGPT级别生成AI所需的高端AI做事器

据报说念，ChatGPT 的树立和运营需要 30，000 台 NVIDIA DGX H100 高端 AI 做事器（图 6）。当我看到这个三万台的数字时，我感到头晕。

图6 运行ChatGPT需要若干高端AI做事器？（起原：HPC网站）

趁机说一句，“NVIDIA DGX H100”配备了八颗“H100”芯片，恒运优配每颗芯片的价钱已飙升至4万好意思元，使得系统总价达到46万好意思元。换句话说，生成 ChatGPT 级别的 AI 需要投资 30，000 单元 x 460，000 好意思元 = 138 亿好意思元（按 1 好意思元 = 145 日元缱绻，约 2 万亿日元！）。

我以为天下上充斥着生成式东说念主工智能系统，但骨子上依然（或将要）构建了若干 ChatGPT 类生成式东说念主工智能？（图7）

图7 做事器出货量、高端AI做事器出货量、ChatGPT级生成AI系统数目（起原：MIC和DIGITIMES）

由于2022年高端AI做事器出货量为3.4万台，因此只可构建一套ChatGPT级AI系统（这恰是ChatGPT）。次年，即2023年，高端AI做事器出货量达到20万台，因此不错构建6到7个ChatGPT级AI系统。由于预计2024年将出货56.4万台高端AI做事器，因此将有可能构建18至19个ChatGPT级AI系统。

不外，上述估算假定ChatGPT级AI不错用3万台高端AI做事器“NVIDIA DGX H100”构建。然而，由于一代 AI 可能变得愈加复杂，在这种情况下可能需要进步 30，000 个 NVIDIA DGX H100。总而言之，好意思国通讯做事提供商不太可能对面前高端东说念主工智能做事器的出货量感到惬意。

面前，咱们来望望每个最终用户（举例好意思国的 CSP）领有若干台高端 AI 做事器。

最终用户的高端东说念主工智能做事器数目

图 8表现了最终用户的高端 AI 做事器数目。2023年，领有OpenAI的微软领有最多的高端AI做事器数目，为6.3万台，但到2024年，谷歌将越过微软，领有最多的高端AI做事器。

图8 按最终用户远离的高端东说念主工智能做事器（2023-2024）（起原：DIGITIMES Research）

2024 年名次前五的分别是谷歌，以 162，000 台（5 个系统）名依次一，微软以 90，000 台（3 个系统）名依次二，超微以 68，000 台（2 个系统）名依次三，亚马逊（67，000 台）名依次四。2个系统），其次是Meta，以46，000个单元（1个系统）名依次五（括号中的数字是ChatGPT类生成AI不错构建的系统数目）。由此可见，好意思国前五名光热发电企业把持了约80%的份额。

接下来咱们望望AI加快器的高端AI做事器出货量（图9），正如预期，NVIDIA的GPU是AI加快器使用最多的，2024年将达到33.6万台。然而，令东说念主诧异的是，第二受迎接的公司不是AMD，而是谷歌。

图9 按东说念主工智能加快器远离的高端东说念主工智能做事器（2023-2024）（贵寓起原：DIGITIMES Research）

谷歌树立了我方的张量处置单元（TPU）行动东说念主工智能加快器。到2024年，搭载该TPU的高端AI做事器数目将达到13.8万台。这里，从图8咱们知说念，谷歌到2024年将领有16.2万台高端AI做事器。因此，预计有 138，000 台配备了 Google 自家的 TPU，其余 24，000 台配备了 NVIDIA 的 GPU。换句话说，关于英伟达来说，谷歌既是客户，亦然可怕的敌东说念主。

另外，要是咱们再看一下2024年的出货量，名依次三的AMD有4.5万台，名依次四的亚马逊则以4万台紧随后来。亚马逊还在树立 AWS Trainium 行动东说念主工智能加快器。要是再等等，AMD可能会被亚马逊越过。

总而言之，面前，NVIDIA 的 AI 加快器出货量最多，但谷歌和亚马逊正在成为其强有劲的竞争敌手。NVIDIA的竞争敌手不是处置器制造商AMD（虽然不是靠近危险的英特尔），而是好意思国的CSP谷歌和亚马逊。

全面的生成式东说念主工智能高涨行将到来

让咱们总结一下到面前为止的一切。左证 DIGITIMES Research 的一份敷陈，预计到 2024 年，大要树立和运行 ChatGPT 级生成式 AI 的高端 AI 做事器出货量仅占所有做事器的 3.9%。东说念主们以为这个出货量根底无法雀跃CSP的需求。

也即是说，NVIDIA 2023年至2024年的“GPU节”仅仅一个初始。因此，全面的生成式东说念主工智能高涨很可能到来。让咱们不才面展示其基础。

图10表现了半导体行业协会 (SIA) 发布的按诈欺远离的半导体商场偏持异日预测。据SIA预测，2030年民众半导体商场范畴将进步1万亿好意思元。

图10 按诈欺远离的半导体出货量预测（起原：SIA博客）

为止 2030 年，最大的商场将是缱绻和数据存储。其中包括PC和做事器（虽然还有高端AI做事器），但由于PC出货量不太可能大幅加多，因此做事器可能会占大多数。

有线通讯是指用于数据中心的半导体。这意味着到2030年，缱绻和数据存储（3300亿好意思元）+有线通讯（600亿好意思元）=测度3900亿好意思元将成为数据中心（包括PC）的半导体，成为民众最大的商场。

另一件值得关怀的事情是数据中心商场偏持出路，如图11所示。2022年ChatGPT发布后，数据中心商场预计将稳步增长。数据中心由三个身分构成：网罗基础措施、做事器和存储，预计从 2023 年到 2029 年，做事器和存储将分别加多一倍阁下。

图11 数据中心商场瞻望（全面的生成式AI高涨尚未到来）（贵寓起原：作家左证Statista Market Insights数据制作）

这么，做事器具半导体（包括高端AI做事器）将占据民众商场最大份额，数据中心商场也将扩大。

叠加临了一次。到面前为止，NVIDIA 的“GPU 节”还仅仅节前行径。全面的生成式东说念主工智能高涨行将到来。

https://eetimes.itmedia.co.jp/ee/articles/2410/02/news064.html

半导体杰作公众号保举

专注半导体边界更多原创内容

关怀民众半导体产业动向与趋势

*免责声明：本文由作家原创。著述内容系作家个东说念主不雅点，半导体行业不雅察转载仅为了传达一种不同的不雅点，不代表半导体行业不雅察对该不雅点赞同或赞成，要是有任何异议，迎接量度半导体行业不雅察。

今天是《半导体行业不雅察》为您共享的第3904内容，迎接关怀。

『半导体第一垂直媒体』

及时 专科 原创 深度

公众号ID：icbank

可爱咱们的内容就点“在看”共享给小伙伴哦

• GPU
• 英伟
• 好日子
• 到头