推动数据中心基础设施的下一步演进 - 闲芯交易网
推动数据中心基础设施的下一步演进

Marvell公司最近在加利福尼亚州圣克拉拉的总部举行了分析师节,其中,Marvell的高级管理人员明确表示,对于他们来说,“AI”不仅仅代表人工智能,还代表着加速基础设施。

在传统的人工智能和生成人工智能的分类中,现有的数据中心基础设施已被证明至少可以满足前者当前的需求。然而,后者正在推动数据中心基础设施设计的根本性转变,以应对计算、存储和功耗需求的爆炸式增长。Marvell公司的高管们阐述了最近生成AI在其策略上的影响-也就是没有影响。Marvell的首席运营官Chris Koopmans重申了公司的立场,即Marvell之前明确表示的将研发“用于移动、存储、处理和保护数据的半导体”。他们的策略已经在为数据处理的爆炸做准备,而生成的AI恰好是目前驱动需求的最数据密集的应用,这是Koopmans的观点。

接下来是加速基础设施。

什么是加速基础设施?Marvell公司的产品与技术总裁Raghib Hussain将加速基础设施描述为高速、低延迟连接的高度复杂计算资源的组合。但是,它并不仅仅关于组件的能力,而是用于架构数据中心的拓扑结构。

传统的数据中心被设计为通常处理由结构良好、已知和限定大小的数据组成的多个工作负载。而加速基础设施数据中心(主要设计为处理AI工作负载),需要适应的数据量巨大,且可能是结构化或非结构化的,通常它们不符合一个服务器的规格大小。因此,加速基础设施需求强健的南北通信和更多的“东西”通信或同一数据中心中的服务器-服务器通信。

这对服务器-服务器带宽和延迟要求影响很大,最终推动了交换和互连能力。这也推动了数据中心的拓扑结构,加速基础设施需要更平坦,每个交换机上的服务器更少,服务器之间的网络带宽更高,服务器和数据中心互连(DCI)之间的交换机层次更少。

回想起计算是关键,但......忽视交换机和互连设施的惩罚是沉重的。对于生成AI的讨论主要集中在模型的训练和推断,以及支持这些工作负载的核心组件。例如,处理资源如中央处理单元(CPU)、图形处理单元(GPU)和神经处理单元(NPU),以及内存资源和所有资源消耗的功率等。虽然这些组件在加速基础设施中非常关键,但设计互连设施和交换设施的过程也同样重要。

在这个背景下,Marvell的高管们概述了两种他们认为在部署针对AI工作负载的加速基础设施时至关重要的技术:光网络和以太网交换。

哪种网络连通性解决方案最适合特定部署是由距离、速度、可靠性和上市时间因素驱动的。铜独具低成本优势,但最适合短途和低速。带宽和规模是加速基础设施中至关重要的,Marvell认为光缆是最终能满足数据中心AI工作负载需求的唯一解决方案。

同样,Marvell建议以其高带宽和低延迟能力的以太网交换作为加速基础设施的基础。它不仅与现有的云基础设施互补,而且是一个被广泛采用的开放标准,可以在一整套多样化的硬件中操作。然而,以太网确实需要不断改进以提供更高的带宽和减少延迟,并提高拥塞适应性。

在前进进入人工智能时代的过程中,Marvell的加速基础设施策略并不例外。更重要的是,Marvell正在照亮生态系统的一个领域,该领域常常被处理技术的更为抢眼的进步所掩盖,但使得生成AI的下一个阶段成为可能。

芯片品牌:英特尔,型号:Xeon,适用领域:服务器
芯片品牌:英伟达,型号:A100,适用领域:深度学习
芯片品牌:AMD,型号:EPYC,适用领域:高性能计算
芯片品牌:华为海思,型号:Kunpeng 920,适用领域:数据中心
芯片品牌:Arm,型号:Neoverse N1,适用领域:集群运算
芯片品牌:飞腾,型号:FT-2000,适用领域:国产替代领域。
热门标签
热门文章
24亿美元砸下,长鑫存储打造上海先进封装工厂
2024-06-29
闲芯小叨:拜登给韩国芯片巨头开绿灯:在华工厂可暂时摆脱出口管制
2023-05-05
闲芯小叨:台积电欧洲拓展新战略:联手汽车电子巨头抢占市场
2023-05-05
供过于求的困境即将结束?半导体市场的明天大反弹
2023-04-27
闲芯:芯片纳米越小的好处有哪些
2022-02-16
独立自主!长江存储计划采用国产设备取代进口设备
2023-04-25
电子代工大厂纬创泰州厂将停产,百名员工受影响!
2023-04-24
AMD:从低谷重生,新产品引领翻盘之战?
2023-05-04
逆势而上:电子厂采购人员必读——联电公司近况一揽子解析
2023-04-27
"2024年内存价格显现反弹趋势"
2024-01-05
半导体行业2025年展望:重要趋势与预测
2025-01-04
半导体行业的产能预测:企业装傻扮猪吃老虎?反市场情绪或是转折信号!
2023-04-24
Netlist在官司中胜诉,三星要赔约4000亿韩元
2023-04-25
Arm惊人野心:要打造自己的芯片,但是否会损及公司信誉令人担忧
2023-04-24
闲芯:最先进的中国芯片是多少纳米
2022-02-16
德州仪器2023年第一季度财报:营收下滑11%,盈利同比减少25%
2023-04-26
Google竭力追赶英伟达在AI竞争中的领先地位,但命运多舛
2023-04-24
闲芯分享8399芯片的知识
2022-02-19
英特尔面临挑战:2023年第一季度个人计算业务收入预计大幅下滑
2023-04-26
三星LSI事业部行动处理器出货量增长15%超过联发科
2023-04-21
美光被中國禁售,美国竟然要求韩国不要替补市场缺口!
2023-04-24
闲芯小叨:NXP S32K系列需求回升,价格小涨
2023-11-07
马斯克的脑机接口植入人体,将科幻变为现实
2024-01-30
标题:武汉敏声打造高端射频滤波器生产线,投资30亿推动产能提升
2024-01-09
闲芯平台:芯片有哪些作用
2022-02-14
"欧洲芯片法案引领创新与供应链弹性:SEMI ISS Europe 2024探索洞见"
2024-01-17
闲芯:IC芯片的常见种类及主要用途
2022-02-22
闲芯小叨:美国再次对4家中国企业实行SDN制裁,限制财产权益和贷款
2023-04-20
探索电源管理芯片核心技术:BCD工艺的魅力之旅
2024-07-04
闲芯:2022年还会缺芯片吗
2022-02-19