AI服务器正处于风口浪尖! 算力关键赛道,布局领跑强 恒强

小夏 科技 更新 2024-02-01

当前,全球AI布局加速,大量AI模型不断涌现,模型的推出和迭代极大地带动了上游对算力的需求。 随着国内数字基础设施对数据负载的需求不断增长,中国AI服务器市场正在加速增长。

从整体发展趋势来看,各国密集出台大模型相关政策,数据、算力、算法更新迭代步伐加快,共同带动AI大模型性能提升。

以AI服务器为载体的算力是人工智能的终端表现之一。 与算力挂钩的储运能力也将相应提升,这将带动硬件算力芯片(GPU、FPGA、AISIIC等)、存储芯片、光模块、PCB、电源管理、散热等的增长。 从历史上看,整个行业将看到人工智能服务器渗透率的提高带来的增长。

据TrendForce集邦咨询预测,预计2024年AI服务器(含GPU、FPGA、ASIC等)出货量近120万台,同比增长38台4%,占整体服务器出货量的近9%。 人工智能

计算能力的提高直接带动了对服务器的需求。 AI服务器作为解决算力的核心支撑,可用于支持本地应用和网页,也可以为云端和本地服务器提供复杂的AI模型和服务。

AI服务器采用异构架构,GPU数量远高于普通服务器。

从服务器上游成本来看,芯片、内存、硬盘占服务器生产成本的近百分之七十。 推理服务器的GPU占成本的25%,训练服务器的GPU占总成本的73%左右。

AI服务器与普通服务器的主要区别在于架构不同,AI服务器采用CPU+GPU FPGA ASIC等异构架构,而普通服务器一般采用CPU架构; GPU 数量差异很大,单个 AI 服务器使用的 GPU 数量通常在 4 个以上。

GPU架构是主流的加速架构,是服务器的核心成本组成部分。 GPU采用并行计算,适用于图形渲染、机器学习等处理密集型计算,AI算力需求的增加进一步提高了GPU卡的计算速度和使用要求。

与一般服务器相比,AI服务器的增加主要是由于AI芯片和内存带宽的大幅增加,相应的数值和其他配套组件也进行了不同程度的升级。

据半导体行业观察,以NVIDIA DGX H100为例,GPU板组(含HBM)价值占比最高,达到73%,其次是存储约占5%,其中DRAM占比3%,NAND占比约2%。 GPU 和存储加起来占总数的 90%。

此外,随着算力的提升,对散热的需求也相应增加,液冷技术的引入有望为散热环节带来新的机遇。

与一般服务器相比,AI服务器增加了GPGPU的使用,因此HBM使用量约为320 640GB,NVIDIA A10080GB配置为4或8帧。

未来,AI模型的逐渐复杂化将刺激更多的内存使用,同时推动对serverdRAM、SSD和HBM的需求增长。

AI服务器GPU成本占比较大:

据统计,2024年北美四大云厂商Microsoft、谷歌、Meta、AWS占AI服务器采购总量的66%左右,海外云巨头对AI服务器的需求更大,但随着国内AI大模型的开发和应用带动更多的AI服务器需求,中国AI服务器市场空间有望进一步增加。

近年来,国内AI建设浪潮持续升温,字节跳动年度采购量占62%,其次是腾讯、阿里巴巴。 5% 对比 15%。

据IDC数据显示,在市场份额方面,浪潮信息、新华社.

3、超融合位列2024年中国AI服务器市场份额前三,市场份额占比如下。 00%。

2024年,浪潮AI服务器在全球权威AI性能测评大赛MLPERF中斩获49项冠军,以全面领先的AI训练和推理性能为AI研发和应用提供强劲动力,其AI服务器产品已应用于AI+科学领域的全球领先互联网巨头和领先科技公司, AI+Graphics、AIGC等,成为全球最大的AI服务器提供商。

浪潮信息盈芯服务器NF5688M6和配置:

中科曙光是中国领先的高端服务器制造商。 公司高端服务器产品为全栈自研,具有规模化部署实践; 持续发展算力服务业务,通过国家综合算力服务平台,加速海量复杂行业应用的创新落地,为国内多个大模型提供算力支撑。

AI服务器布局厂商还包括中国长城、拓威信息、同方股份等。 上下游环节参展厂商众多,部分代表厂商包括中兴通讯、科大讯飞、海康威视、360、澜起科技、龙芯中科、神州数码、海天瑞声、东华软件等。

目前,AIGC和云计算等先进技术给各行各业带来了巨大的变化和机遇。 在此背景下,作为支撑大规模数据处理和高性能计算的重要基石,超级计算的需求和应用场景也呈现出持续增长的趋势。

超级计算与云计算的结合,为服务器市场带来了新的增长点。 云计算的弹性和可扩展性使超级计算资源更高效地服务于科学研究、工业设计、仿真和大数据分析等多个领域。 这种组合不仅提高了计算效率,还降低了使用成本,让更多的机构和企业可以享受到超级计算带来的便利。

与此同时,超算所需的AI高端服务器也成为服务器市场的新星。 AI服务器具有更高的性能、更强的稳定性和更好的扩展性,可以满足超算在计算速度和数据处理能力方面的严格要求。 随着超级计算应用的不断普及和深化,对此类高端服务器的需求将持续上升,有望带动整个服务器市场实现进一步增长。

关注乐清智库,洞察产业格局!

相似文章

    PCB迎来高速爆裂!算力服务器关键材料全面梳理

    近日,人工智能领域的两个新型多模态应用引起了广泛关注。Pika和谷歌的原生多模态大模型Gemini持续高涨,成为全球关注的焦点。随着人工智能进入参数巨大的大模型时代,对算力的需求也在增加。这一趋势为AI芯片和服务器市场带来了巨大的商机。由于对算力和服务器的高需求,PCB 印刷电路板 行业也迎来了前所...

    PCB迎高速突破!算力服务器关键材料全面梳理

    近年来,人工智能的快速发展带动了多模态应用的兴起,其中PIKA和谷歌的Gemini成为全球关注的焦点。随着人工智能进入大模型时代,对算力和服务器的需求也在不断增加,给AI芯片和服务器市场带来了巨大的商机。在这种趋势下,PCB行业迎来了前所未有的机遇。中国大陆现已成为全球PCB产值的一半以上,对服务器...

    液冷服务器需求激增,AI算力关键赛道全面梳理

    随着人工智能技术的快速发展,对算力的需求也在增加,这导致了对液冷服务器的需求激增。由于AI芯片功耗大幅增加,过热对服务器性能产生严重影响,因此散热和温度控制问题迫在眉睫。液冷技术具有显著优势,可有效降低数据中心能耗,提高散热效率,使服务器运行温度更加稳定。随着设备热密度的增加,液冷技术将成为替代传统...

    算力投入巨大 高端AI服务器市场需求激增

    过去,一台 AI 服务器可以容纳四块显卡,但现在客户想要能够容纳八块甚至十块显卡的高端设备。月日,在人工智能技术日暨首届人工智能生态发展峰会上,服务器厂商将展示全新升级的AI大模型服务器。中国第一报记者在现场了解到,AI大模型的迭代速度越来越快,厂商在智能算力方面的投入大幅增加,支持存储和训练的高端...

    由于对计算能力的投资,对高端AI服务器的需求呈爆炸式增长

    随着人工智能技术的不断发展,对高端AI服务器的需求也在不断增加。这种需求的增加主要是由于对计算能力的巨大需求。首先,我们需要了解什么是计算能力。计算能力是计算机执行计算的能力,通常以 FLOPS 每秒浮点运算 或 TOPS 每秒张量运算 等指标来衡量。在人工智能领域,算力是实现各种算法和模型的关键。...