InfiniBand

IPoIB驱动中UD传输模式的实现原理与技术解析

1.IPoIB传输模式概述IPoverInfiniBand（IPoIB）是Linux内核中实现的一种网络协议，允许在InfiniBand（IB）网络上传输IP数据包。

109702008·2025-03-05 09:31

IPoIB 接收数据流程分析

1.引言IPoIB（InfiniBandoverIP）是一种将InfiniBand协议封装在IP网络中的技术，允许通过标准的以太网基础设施传输InfiniBand数据。

109702008·2025-02-19 23:34

InfiniBand包头与ibverbs接口实现（一）—— RDMA WRITE分析

InfiniBand是一种高性能网络技术，其数据包格式设计对实现高效可靠的网络传输至关重要。本文将详细介绍InfiniBand数据包的头部结构，分析它们在实际应用中的作用和实现机制。

·2025-02-19 15:08

ib网络状态探测

在InfiniBand网络中，HostChannelAdapter（HCA）是关键组件，了解其状态和配置对于网络管理和故障排查至关重要。以下是一些常用的命令，用于查询和管理HCA的状态和配置。

大隐隐于野·2025-02-19 00:29

算力机房选择RoCE还是InfiniBand（IB）

前言超高带宽、超低延迟、超高可靠，这是大模型训练对于网络的要求。多年来，TCP/IP协议一直是互联网通信的支柱，但对于AI网络来说，TCP/IP在某些方面存在着致命的缺点。TCP/IP协议的时延较高，通常在数十微秒左右，同时还会对CPU造成严重的负载。RDMA能直接通过网络接口访问内存数据，无需操作系统内核的介入。这允许高吞吐、低延迟的网络通信，尤其适合在大规模并行计算机集群中使用。RDMA技术有

helpme流水·2025-02-10 03:52

Mellanox ConnectX 系列网卡的双驱动架构：以太网与 InfiniBand 的协同设计

MellanoxConnectX系列网卡以其卓越的性能和多功能性而闻名，支持从传统的以太网到高性能的InfiniBand网络协议。

109702008·2025-01-22 10:21

Linux 内核中的 InfiniBand 核心模块：drivers/infiniband/core/device.c 分析

InfiniBand是一种高性能、低延迟的网络互连技术，广泛应用于高性能计算（HPC）、数据中心和云计算等领域。

109702008·2025-01-22 08:39

Infiniband网络架构的技术与性能分析

Infiniband格局寡头，性能占优这篇文章探讨了网络交换机的性能优势，以及如何通过扩大模型参数量来提高语言模型的生成和预测能力。

科技互联人生·2024-09-09 04:51

【高速组网】ROCE和IB组网

但它们在协议层面有一些区别IB组网是一种基于InfiniBand协议的专用网络，它使用特殊的硬件和路由器，可以在高速通道上实现点对点的传

沐风—云端行者·2024-02-05 08:15

深度解读RoCE v2网络技术

本文将深度解读RoCEv2的核心技术原理、配套网卡设备，并对比分析其与InfiniBand技术的差异。什么是RoCEv2技术

audrey-luo·2024-01-27 19:41

展望2024: 中国AI算力能否引爆高性能计算和大模型训练的新革命？

文本创建；图像生成；代码编写；大语言模型；多模态大模型；预训练；边缘计算；液冷；HPC；冷板式液冷；Bard；AlphaGo；深度学习；AI服务器；GPU服务器；H100；A100；B100；X100；InfiniBand

高性能服务器·2024-01-26 15:02

100GB Mellanox InfiniBand 网卡虚拟化技术调研

调研目的验证MellanoxInfiniBand100GB网卡和SR650Server能兼容ThinkSystemSR650PowerOn(BootingOSorinundetectedOS)MachineType/Model7X05CTO1WW验证SR-IOV虚拟话技术在BIOS/Firmware/Kernel/QEMU/Libvirt能被支持4.18.0-305.19.1.el8_4.x86_

redhat7890·2024-01-25 06:44

RDMA vs InfiniBand 网卡接口如何区分？

(该架构图来源于参考文献)高性能计算网络，RoCEvs.InfiniBand该怎么选？新RoCEv2标准可实现RDMA路由在第三层以太网网络中的传输。

redhat7890·2024-01-25 06:36

GFS 分布式文件系统

（1）Scale-Out架构允许通过简单地增加存储节点的方式来提高存储容量和性能（磁盘、计算和I/O资源都可以独立增加），支持10GbE和InfiniBand等高速网络互联。

偷个月亮吗733·2024-01-10 14:00

【SPDK】【NoF】使用SPDK部署NVMe over TCP

SPDKNVMeoverFabricsTarget是一个用户空间应用程序，通过以太网，Infiniband或光纤通道等结构呈现块设备,SPDK目前支持RDMA和TCP传输。

大隐隐于野·2024-01-10 08:38

【linux】更改infiniband卡在Debian系统的网络接口名

以下是更改InfiniBand卡接口名称的一般步骤：1.找到网络接口的属性，以编写匹配的udev规则可以使用`udevadm`命令查找设备属性：udevadminfo-a-p/sys/class/net

一尘之中·2024-01-06 02:39

【RDMA】mellanox RDMA网卡驱动安装和查看状态

目录1.基础知识一、诊断工具--翻译中2.驱动安装3.配置IP4.性能测试5.其他问题RDMA、InfiniBand、IB卡、IB驱动的关系问题记录2.驱动安装下载驱动，进入网站选择相应系统和软件版本，

bandaoyu·2024-01-02 06:00

【infiniband】opensmd

一、能够正常运行systemctlrestartopensm，但是在系统中没有发现opensm.service如果可以通过systemctl来管理opensm服务,但是系统中又没有找到对应服务文件opensm.service,那么有以下几种可能的原因:1.opensm服务使用的是系统默认的服务模板systemd有一些默认的服务模板,如syslog.service、[email protected]等。如

一尘之中·2023-12-31 20:23

融汇贯通 —— 2023年技术与心灵的双重成长旅程

印象深刻的实战经历——InfiniBand的应用探索在过去的一年里，我有幸接触到了Infiniband技术。Infiniband是一种高性能的通信协议，广泛应用于数据中心和超级计算机领域，以其低延

一尘之中·2023-12-29 12:03

Infiniband的网络通信API: IB verbs

二．Infiniband产生的原因随着CPU性能的

smartcat2010·2023-12-16 22:06

【infiniband】安装驱动

安装InfiniBand驱动包通常包括几个步骤，但是可能会有所不同，取决于使用的操作系统和具体的硬件。

一尘之中·2023-12-16 10:01

【infiniband】ibdump抓包

ibdump用于捕获和转储InfiniBand网络的流量。这种工具通常用于调试和分析InfiniBand网络问题，包括性能瓶颈和配置错误。

一尘之中·2023-12-16 10:00

19. RDMA之iWARP & Soft-iWARP

转自：https://zhuanlan.zhihu.com/p/449189540说到RDMA，自然绕不开现在流行的三大协议：Infiniband、RoCE以及iWARP。

尚先生的博客·2023-11-30 20:24

RoCE、IB和TCP等网络的基本知识及差异对比

目前有三种RDMA网络，分别是Infiniband、RoCE(RDMAoverConvergedEthernet)、iWARP。

愚昧之山绝望之谷开悟之坡·2023-11-22 01:53

InfiniBand 的前世今生

今年，以ChatGPT为代表的AI大模型强势崛起，而ChatGPT所使用的网络，正是InfiniBand，这也让InfiniBand大火了起来。那么，到底什么是InfiniBand呢？

又拍云 UPYUN·2023-11-05 04:36

数据库管理-第113期 Oracle Exadata 04-硬件选择（20231020）

1InfiniBand/RoCEInfiniBand交换机是ExadataX8及之前一直使用的内部交换机，以X8为例，单路带宽为40Gb。相较于以太网

胖头鱼的鱼缸（尹海文）·2023-10-29 19:44

RDMA Aware Programming user manual 翻译(一)

RDMA网络编程用户手册版本1.7www.mellanox.com注意事项：略目录修订历史....4术语表....51RDMA架构概览....91.1InfiniBand.91.2VirtualProtocolInterconnect

Bill_Xiang·2023-10-28 02:36

RDMA概览

有多种支持RDMA的网络协议，包括：Infiniband、RoCE和iWAPP。

张帅峰_·2023-10-28 02:06

oracle杨志洪 ace,Oracle Exadata专家手册

数据库一体机21.1.2Exadata会改变你的工作职责31.1.3Oracle企业管理器12c31.2Exadata硬件架构41.2.1服务器层—计算节点41.2.2共享存储—存储单元51.2.3网络结构—InfiniBand51.2.4

wo91rmb·2023-10-20 18:38

InfiniBand网络带宽从SDR、DDR、QDR、FDR、EDR、HDR到NDR发展

InfiniBand（直译为“无限带宽”技术，缩写为IB）是一个为大规模、易扩展机群而设计的网络通信技术。

smartvxworks·2023-10-17 10:35

Linux Kernel 4.13 RC6发布：正式版9月3日发布

RC6版本主要对网络、声音和InfiniBand驱动，以及一些架构进行了调整。LinusTorvalds在邮件列表中写道：“事情进展的

云计算运维工程师·2023-10-17 05:37

数据库管理-第四十三期水一期（20221113）

数据库管理2022-11-13第四十三期水一期1Infiniband&RoCE2Optane3384Gvs512GExadata的未来总结第四十三期水一期首先，传统意义上的本周最后一天，11点过开始写，

胖头鱼的鱼缸（尹海文）·2023-10-07 08:32

UEC（Ultra-Ethernet-consortium）新技术联盟，磨刀霍霍向着InfiniBand

Multi-Streams的功能支持，然后配合交换机的厂商各种验证测试（打鸡血.JPEG）又在协助客户测试网卡的案子，天天被RDMA各种QP逻辑给烧脑关注到新成立的一个高速互联技术联盟，粗略看起来就是要革InfiniBand

Xena_Networks·2023-09-25 18:15

RDMA编程杂记

目录编程杂记什么是P_Key建链基于SocketAPI的建链基于CMAPI的建链编程杂记什么是P_KeyP_Key（PartitionKey）用于提供InfiniBand网络的隔离机制，只有在一个分区内的节点可以互相通信

可姆可汗·2023-09-23 19:31

InfiniBand 和 RoCEv2 是什么

InfiniBand是什么InfiniBand是一种高性能计算和数据中心网络技术，旨在提供低延迟、高带宽和可扩展性的互连解决方案。

独壹@无贰·2023-09-21 12:10

InfiniBand vs 光纤通道，存储协议的选择

在众多存储协议中，InfiniBand和光纤通道备受关注。本文旨在深入探讨InfiniBand和光纤通道作为存储协议的区别，帮助读者在网络存储技术上做出明智决策，推动业务发展。

audrey-luo·2023-09-17 04:45

【infiniband】 MAD、 uMAD、Verbs、RDMACM

1.MAD（ManagementDatagram）：MAD是InfiniBand网络中用于管理和配置的数据报文。它包含了各种类型的管理操作，如查询端口状态、配置端口参数等。

一尘之中·2023-09-16 01:07

【infiniband】SDR、DDR、QDR、FDR、EDR、HDR、NDR

这些是InfiniBand网络接口的一种分类方式，按照数据传输速率的的不同进行区分。具体如下：SDR（SingleDataRate）：单倍数据率，即8Gb/s。

一尘之中·2023-09-16 01:06

【InfiniBand】IBV_WR_RDMA_WRITE_WITH_IMM / IBV_WC_RECV_RDMA_WITH_IMM

IB卡带立即数的写操作IBV_WR_RDMA_WRITE_WITH_IMM，对应的远端(remote)接收操作是IBV_WC_RECV_RDMA_WITH_IMM。例：本端(local)写发送：wr.opcode=IBV_WR_RDMA_WRITE_WITH_IMM;wr.send_flags=IBV_SEND_SIGNALED;wr.imm_data=htonl(len);...ibv_post

一尘之中·2023-09-16 01:36

【infiniband】关于contig的支持

contig的英文翻译是：n.重叠群；叠连群；片段重叠群。有个叫Contig的小工具，是一个单个文件碎片整理程序，其目的是使磁盘上的文件保持连续。在读perfest源码时，看到is_contig_supported。内核mm\page_alloc.c文件中有个__alloc_contig_pages函数，Linux内存管理：大页内存原理-知乎(zhihu.com)。perfest相关代码：ctx_

一尘之中·2023-09-16 01:36

【InfiniBand】打印ibping调试信息

1.从https://github.com/linux-rdma/rdma-core下载源码并编译gitclonehttps://github.com/linux-rdma/rdma-core.git--recursivetar-czvfrdma-core.tar.gzrdma-core/cdrdma-core/apt-getinstallbuild-essentialcmakegcclibude

一尘之中·2023-09-16 01:06

【InfiniBand】“Warning: couldn‘t open config directory ‘/etc/libibverbs.d/libibverbs.d‘.”

运行ibv_ud_pingpong出错：“Warning:couldn‘topenconfigdirectory‘/etc/libibverbs.d/libibverbs.d‘.”解决方法：参考：libibverbs-RDMAmojoRDMAmojolibibverbs:Warning:couldn'topenconfigdirectory'/etc/libibverbs.d'Rea

一尘之中·2023-09-16 01:05

【infiniband】infiniband和RDMA

InfiniBand（IB）是一种高性能计算和数据中心互连技术，它提供了低延迟、高带宽和高吞吐量的网络通信。

一尘之中·2023-09-16 01:33

【infiniband】用udaddy测试RDMA_CM API通过GID连接

2.udaddy用1.找到的GID[0]测试连接服务器:root@debian:~/infiniband/rdma-core-50mlnx1#build/bin/udaddy-fgid-bfe80:0000

一尘之中·2023-09-11 23:44

使用Soft-RoCE实践RDMA

RDMA本身指的是一种技术，具体协议层面，包含Infiniband（IB），

wq897387·2023-09-07 22:44

大规模AI计算集群的网络环境需求，Infiniband还是超低时延以太网？

01ChatGPT背后的基础设施：AI计算集群早在2019年向OpenAI投资10亿美元的时候起，微软就同意为这家AI初创企业构建一台大型超级计算机。近期，微软在官博上连发两文，亲自解密了这台超级昂贵的超级计算机以及Azure的重磅升级。负责云计算和AI业务的微软副总裁ScottGuthrie表示，微软在这个项目上花费了数亿美元，将数以万计的NvidiaA100GPU和Azure云计算平台串联在一

星融元asterfusion·2023-09-02 08:28

超低时延交换机，让Infiniband交换机不再是唯一的选择

近期与同事去某物理所技术交流，满机房的都是IB交换机，十分壮观。然而，客户这次叫我们来，目的却是想换掉他们，一台不留。客户无奈地说，IB交换机的时延方面，没得说，但是“想买到”太难了，由于IB交换机只支持IB通信协议，所以每当有扩容的需求时，也只能继续选择IB交换机，但IB交换机太难买到，尤其是去年全球供货市场都紧张的情况下，更是遥遥无期，今年市场供应好了很多，客户反应说，依旧要6个月起步，根本等