迈络思与英伟达携手,InfiniBand 组网赋能 GPU 池化管理与算力调度新高度

创建时间:2025-06-09 09:32
在数字化浪潮奔涌向前的当下,数据量呈指数级增长,人工智能、大数据分析、高性能计算等领域对算力的需求如饥似渴。在此背景下,高效的网络架构、先进的硬件设备以及智能化的资源管理与调度技术成为释放算力潜能的关键要素。其中,InfiniBand 组网(IB 组网)凭借其卓越的性能崭露头角,与英伟达的强大硬件实力以及迈络思在网络技术方面的深厚积淀相结合,为 GPU 池化管理与算力调度带来了全新的变革与突破。

在数字化浪潮奔涌向前的当下,数据量呈指数级增长,人工智能、大数据分析、高性能计算等领域对算力的需求如饥似渴。在此背景下,高效的网络架构、先进的硬件设备以及智能化的资源管理与调度技术成为释放算力潜能的关键要素。其中,InfiniBand 组网(IB 组网)凭借其卓越的性能崭露头角,与英伟达的强大硬件实力以及迈络思在网络技术方面的深厚积淀相结合,为 GPU 池化管理与算力调度带来了全新的变革与突破。

InfiniBand 组网:高性能计算的基石

InfiniBand(直译为 “无限带宽” 技术,缩写为 IB)诞生于 20 世纪 90 年代后期,是一种旨在解决服务器端连接难题的高速网络和输入 / 输出(I/O)技术,常应用于高性能计算(HPC)环境,堪称 PCI 和 SCSI 等先前互连技术的有力继任者。

 

InfiniBand 采用设备间点对点链路,基于通道进行数据传输,将数据分解为 “数据包” 在结构中传送,并支持并行处理,可同时发送多个数据包,大幅提升性能。其网络路由算法丰富,如最短路径算法、基于 Min Hop 的 UPDN 算法和基于 Fat Tree 组网的 FatTree 算法等,在一定程度上决定了网络拓扑结构。尤其在高性能计算、大型集群系统中,网络拓扑结构至关重要,上行和下行链路阻塞情况会影响整体网络性能。而树形拓扑结构因清晰、易构建和管理的优点,使胖树网络拓扑结构在发挥 InfiniBand 网络优势方面表现卓越,常应用于无阻塞或阻塞率很低的场景。在传统三层或二层组网架构中,为解决接入层节点数量庞大带来的汇聚层或核心层网络带宽和处理能力不匹配问题,常采用胖节点组网,胖树拓扑网络结构一般由叶子(Leaf)和主干(Spine)交换机组成,叶子交换机与服务器或存储等信道适配卡相连,既提供无阻塞数据传输,又增强了网络可靠性。

 

例如,在大型科研机构的计算集群中,采用 InfiniBand 组网实现了集群内各节点间数据的高速传输,大幅缩短了复杂科学计算任务的运行时间,使得科研人员能够更快地获取计算结果,加速科研项目的推进。随着技术的不断发展,InfiniBand 网络技术已从高性能计算基础领域不断扩张,在企业级数据中心等主流应用场景中也逐渐崭露头角,在高速交换架构技术领域占据关键地位。

英伟达:GPU 领域的霸主

英伟达在 GPU 领域无疑占据着霸主地位。其生产的 GPU 广泛应用于人工智能、图形渲染、科学计算等众多对算力要求极高的领域。在人工智能场景下,GPU 的并行计算能力能够极大加速深度学习模型的训练和推理过程。以训练 GPT - 3 175B 这样的大型模型为例,需要高达 3640 PF - days(即以 1PetaFLOP/s 的效率要跑 3640 天)的算力,而英伟达的 GPU 在其中发挥了不可或缺的作用。

 

英伟达的 GPU 产品从硬件架构上分为用户态、内核态、GPU 硬件三个层次。用户态层为应用程序运行环境,英伟达提供 CUDA(Compute Unified Device Architecture)等用户态运行库作为 GPU 并行计算编程接口,应用程序可通过 CUDA API 编写并行计算任务,并与 GPU 用户态驱动通信,进而通过特定接口与内核态驱动交互。内核态层运行 GPU 内核态驱动程序,与操作系统内核紧密集成,对 GPU 硬件进行底层控制,保障系统安全。这种层次化的设计,为 GPU 的高效运行和灵活编程提供了坚实基础。

 

在实际应用中,英伟达的 GPU 在各大互联网公司的 AI 训练平台、游戏开发中的实时渲染、金融领域的风险预测模型训练等场景中都表现出色,成为推动各行业数字化转型和创新发展的重要引擎。

GPU 池化管理:提升资源利用率的利器

随着人工智能的蓬勃发展,新的 AI 应用和使用场景不断涌现,对 GPU 资源的需求日益多样化和复杂化。然而,大多数企业在使用 GPU 时,存在利用率极低的问题,很多企业的 GPU 利用率仅在 10% - 30% 之间。其原因在于缺乏有效的 GPU 池化管理技术,用户往往只能以物理形式直接调用 GPU,导致资源浪费严重,弹性扩展能力受限,投入产出不成正比。

 

GPU 池化管理技术以 GPU 虚拟化为基础,融合了 GPU 共享、聚合和远程使用等多种能力,致力于打造全能型软件定义 GPU。通过对物理 GPU 进行软件定义,GPU 池化管理实现了 GPU 物理卡的切分,可按算力与显存两个维度,以 1% 算力颗粒度、1MB 显存颗粒度进行切分,满足不同规模需求;支持远程调用,使 CPU 服务器上的 AI 任务可通过网络远程调用 GPU 资源,无需本地配备 GPU 卡;能够实现资源聚合,将资源池里的多块 GPU 卡聚合给单个运算任务,提升任务处理能力;还具备随需应变能力,可根据算力需求动态扩展 GPU 资源,无需重启虚机或容器。

 

例如,在一些大型云服务提供商的数据中心,通过部署 GPU 池化管理系统,将大量分散的 GPU 资源整合为统一资源池,为不同租户提供灵活的 GPU 资源租赁服务。租户可根据自身业务负载动态调整所使用的 GPU 资源规模,有效提升了 GPU 资源的整体利用率,降低了运营成本。GPU 池化管理技术的发展经历了简单虚拟化、任意虚拟化、远程调用和资源池化四个阶段,逐步实现了从基本的 GPU 虚拟化到全面、智能的资源池化管理的跨越。

算力调度:保障资源高效分配

算力调度作为算力资源管理的核心环节,其重要性不言而喻。在拥有大量计算资源的环境中,如何将有限的算力合理、高效地分配给不同的任务,直接影响到整个系统的性能和效率。

 

算力调度系统需要实时监测系统中各个任务的资源需求、优先级以及各个计算节点(如配备 GPU 的服务器)的资源使用情况。根据这些信息,采用合理的调度算法,如基于任务优先级的调度算法、最短作业优先调度算法等,将算力资源分配给最需要的任务。在一个同时运行多个 AI 训练任务和数据处理任务的数据中心中,算力调度系统会根据任务的紧急程度和资源需求,优先将高性能的 GPU 资源分配给训练时间紧迫、计算量巨大的 AI 模型训练任务,确保这些关键任务能够及时完成,同时兼顾其他数据处理任务的运行,保障整个数据中心的高效运转。

 

有效的算力调度不仅能够提高资源利用率,还能缩短任务执行时间,提升用户体验,对于企业和科研机构充分发挥算力资源的价值具有重要意义。

迈络思:网络技术助力多方协同

迈络思(Mellanox)成立于 1999 年,总部设在美国加州和以色列,是服务器和存储端到端连接 InfiniBand 解决方案的领先供应商。2010 年底,迈络思完成对著名 Infiniband 交换机厂商 Voltaire 公司的收购,进一步增强了其在 HPC、云计算、数据中心、企业计算及存储市场的综合能力。

 

迈络思在 InfiniBand 组网方面拥有深厚的技术积累,其产品涵盖了 InfiniBand 适配器、交换机等关键网络设备。迈络思的适配器与基于 Open Fabrics 的 RDMA 协议和软件兼容,通过其提供的软件协议栈 OFED,为服务器和存储集群提供低延迟和高带宽的企业数据中心(EDC)、高性能计算(HPC)和嵌入式应用环境。OFED 包括驱动、中间件、用户接口以及一系列标准协议,支持 MPI、Lustre/NFS over RDMA 等协议,并提供 Verbs 编程接口,由开源 OpenFabrics 组织维护。同时,迈络思的 OpenSM 软件作为符合 InfiniBand 的子网管理器,运行在其 OFED 软件堆栈上进行 IB 网络管理,具备设备自动发现、设备管理、Fabric 可视化、智能分析、健康监测等完备的管理和监控能力,为 InfiniBand 网络的稳定运行提供了有力保障。

 

在实际应用场景中,迈络思的技术和产品与英伟达的 GPU 以及 GPU 池化管理、算力调度系统紧密协作。例如,在大型数据中心中,迈络思的 InfiniBand 交换机构建起高速、低延迟的网络连接,确保英伟达 GPU 之间以及 GPU 与其他计算节点之间能够快速传输数据。同时,其网络管理软件与算力调度系统相结合,能够实时监测网络流量和负载情况,为算力调度提供准确的网络状态信息,助力调度系统更合理地分配算力资源,保障整个数据中心的高效运行。在科研计算集群中,迈络思的适配器和网络设备与英伟达的 GPU 共同打造出高性能的计算环境,通过 GPU 池化管理系统实现资源的高效利用,满足科研人员对大规模数据处理和复杂模型计算的需求。

多方融合:开启算力新时代

迈络思的 InfiniBand 组网技术、英伟达的 GPU 硬件实力、GPU 池化管理技术以及算力调度系统相互融合,形成了一个高效、智能的算力生态系统。InfiniBand 组网为整个系统提供了高速、低延迟的数据传输通道,保障了 GPU 之间以及 GPU 与其他设备之间的数据交互效率,为大规模数据处理和并行计算奠定了坚实基础。英伟达的 GPU 作为核心计算单元,凭借强大的并行计算能力,承担起人工智能、科学计算等复杂任务的运算重任。GPU 池化管理技术则对分散的 GPU 资源进行整合和优化,提高资源利用率,使企业能够更灵活、高效地使用 GPU 资源。算力调度系统则如同整个生态系统的 “大脑”,根据任务需求和资源状态,智能地分配算力资源,确保系统整体性能的最大化。

 

这种融合在众多领域展现出了巨大的优势。在人工智能领域,加速了模型训练和推理速度,推动了自然语言处理、计算机视觉等技术的快速发展;在科学研究领域,助力科研人员更快地处理海量数据,加速科研成果的产出;在工业制造领域,通过优化生产流程模拟、质量检测等环节的计算效率,提升了生产效率和产品质量。

 

随着技术的不断发展,迈络思、英伟达等企业将继续在相关领域深入探索创新,进一步优化 InfiniBand 组网、GPU 性能、池化管理和算力调度技术,为各行业提供更强大、更高效的算力支持,推动数字化时代的快速发展。未来,我们有理由期待这一融合生态将持续进化,为人类社会的进步创造更多可能。

 

AI服务器采购需求请点击这里:https://www.kuanheng168.com/product

 

算力中心建设与运营,请点击查看详细方案:https://www.kuanheng168.com/solutions

 

算力租赁需求请点击这里:https://www.kuanheng168.com/slzl

넶浏览量:0

推荐文章

  • 专业算力再进化:宽恒科技携手 RTX PRO 5000 Blackwell 深耕行业市场

    当 AI 从云端走向桌面,专业显卡正迎来新一轮黄金周期。今年春季 GTC 大会上,NVIDIA 正式发布 RTX PRO 5000 Blackwell 专业显卡,凭借 Blackwell 架构与 48GB/72GB 超高速 GDDR7 显存,一经亮相便成为工作站市场的焦点;10 月 20 日,高盛再度上调全球 AI 服务器出货预测,AI 算力需求的旺盛可见一斑 —— 而在个体与团队层面,越来越多设计师、工程师与 AI 开发者,正在把 "专业算力" 作为生产力的核心投资。专业显卡市场,正从幕后走向台前。

    넶0 2026-10-20
  • 桌面上的 AI 超算:宽恒科技解析 NVIDIA DGX Spark 的应用之道

    AI 算力的形态,正在发生一场 "下沉" 革命。10 月 2 日,NVIDIA 发布 DGX Spark 64GB,为开发者提供更多方式构建和扩展本地 AI;而在年初的 CES 2026 上,NVIDIA DGX Spark 驱动机器人 Reachy Mini 在展台与观众实时互动,把 "桌面级 AI 超算" 的想象力具象化。就在同一时期,全球首部面向智能体安全的强制性国家标准正式立项,AI 智能体从实验室走向生产环境已成定局。当智能体成为新的软件形态,一个现实问题浮出水面:海量的本地推理与智能体运行,是否都要依赖云端?NVIDIA DGX Spark 给出的答案是 —— 把 AI 超算放进桌面。

    넶0 2026-10-20
  • PICO 4 Ultra 与 PICO OS 6 共舞,宽恒科技带您进入空间计算新时代

    空间计算的浪潮,正从概念走向现实。2026 年下半年,PICO 接连放出重磅消息:面向开发者先行提供下一代操作系统 PICO OS 6,并预告代号 "Project Swan" 的新一代旗舰 XR 硬件将在全球发布,其超高精显示屏达到约 4000PPI 的量级,引发行业广泛关注。与此同时,PICO 4 Ultra 作为当前在售的主力 MR 一体机,凭借成熟的硬件与不断进化的软件生态,依然是大众体验空间计算的最佳入口之一。从娱乐到办公,从教育到行业应用,以 PICO 4 Ultra 为代表的 MR 设备,正在重新定义人与数字世界的交互方式。

    넶0 2026-10-20
  • 英伟达 NPN 生态扩容,宽恒科技深耕英伟达代理与合作伙伴服务

    英伟达的生态版图正在加速扩张。8 月 31 日,英伟达宣布与 MediaTek 深化长期合作,共同构建从边缘到云端的 AI 计算平台,MediaTek 将采用全新的 NVLink Fusion 平台,帮助客户将定制 XPU 引入机架级 AI 工厂;10 月 14 日,英伟达又携手应用材料、Cadence、KLA、Lam Research、西门子、新思科技等半导体领军企业,推动 AI 在芯片设计与制造全流程落地。一连串动作背后,是英伟达从 "卖芯片" 向 "卖生态" 的战略深化 —— 而承载这一战略的市场通道,正是不断升级的 NVIDIA Partner Network(NPN,英伟达合作伙伴网络)。

    넶0 2026-10-20
  • 算力租赁驶入快车道,宽恒科技以 GPU 集群与 AI 服务器构筑算力新基建

    刚刚过去的十月,算力市场再迎重磅消息。10 月 20 日,高盛大幅上调全球 AI 服务器出货预测,预计 2026 至 2028 年八卡 AI 服务器出货量将分别达到 173 万台、265.5 万台与 330.5 万台,隐含的 AI 芯片需求逼近两千万颗量级。来自中国信通院的另一组数据更加直观:2026 年一季度,国内算力租赁市场规模已达 680 亿元,全年预计突破 2600 亿元;同期国内 AI 算力需求同比大增 417%,而供给增速仅有 128%。需求狂奔、供给承压,"算力焦虑" 正从科技圈蔓延至千行百业。与此同时,政府工作报告明确部署超大规模智算集群、算电协同等新基建工程,一场围绕算力资源的产业变革正加速上演。

    넶0 2026-10-20
  • 宽恒科技:英伟达显卡总代视角下的 RTX PRO 5000 Blackwell

    2026 年,AIGC 工作流已经深入设计、影视、工业与科研的每一个角落。Stable Diffusion 出图、本地大模型推理、数字孪生渲染…… 这些负载对显卡的显存容量与计算性能提出了前所未有的要求,专业显卡市场随之迎来一轮 “大显存、高算力” 的升级潮。在这一轮升级中,英伟达 Blackwell 架构的 RTX PRO 5000 专业显卡成为工作站用户关注的焦点,也让 “专业卡替代游戏卡跑生产负载” 成为行业讨论的常驻话题。

    넶2 2026-10-19