DPU&RDMA 第5页

SPDK vhost-user结合SPDK NVMe-oF RDMA性能调优

一.背景介绍这里我们主要介绍如何测试vhost-user使用本地bdev以及结合使用NVMe-oFRDMA使用远端bdev测试性能，并且对他们的性能进行比较。二.SPDK中vhost-user主要模块及RPC首先，我们介绍SPDK中几个和vhost-user相关的函数以及相应的rpc命令。vhost_create_blk_controller函数使用vhost_create_blk_control

lingshengxiyou·2022-12-21 10:44

【云计算】【总结】CMSC 5735 Cloud Computing

gRPCLab7:CRDTLab8:Flink3.期末考回忆1.知识点总结虚拟化和数据中心两种Hypervisor：直接在硬件上和在操作系统上两种Hypervisor实现方法：全虚拟化和半虚拟化软件定义网络两种RDMA

叼辣条闯天涯·2022-12-13 13:51

虹科方案|具有RDMA复制写入日志的高可用性HDD存储集群可提供出色的性能

一、引言Open-E、WesternDigital和ATTO数据存储专家和工程师联手推出了基于HDD的数据存储设备，该设备结合WesternDigitalUltrastar®Data60JBOD的海量容量和Ultrastar®系列HDD以及加速的性能，这得益于ATTOHBASAS控制器和100GbENIC，以及Open-EJovianDSS的数据缓存和复制功能。合作带来了在性价比方面完美平衡的解决

虹科电子科技·2022-12-11 00:39

基于LSM-Tree 的分布式组件化 KV 存储系统 | DB·洞见回顾

Nova-LSM，一个将基于LSM-Tree的分布式KV存储系统分解为使用RDMA进行通信的组件的工作。这些组件将存储与处理分开，使处理组件能够共享存储带宽和空间。

腾讯云数据库·2022-12-09 11:26

国际高性能计算和人工智能咨询委员会举办的第十届亚太区RDMA 编程赛结果出炉

今天，国际高性能计算和人工智能咨询委员会（HPC-AIAdvisoryCouncil）在2022中国超级算力大会宣布2022年第十届亚太区RDMA编程竞赛结果，来自中国古城西安的西北工业大学凭借其在竞赛过程中的优异表现获得了本次竞赛的冠军

AI科技大本营·2022-11-22 07:08

计算机专有名词解析

RDMA（RemoteDirectMemoryAccess）远程直接数据存取，就是为了解决网络传输中服务器端数据处理的延迟而产生的。

ME_Seraph·2022-11-19 22:32

roce和iwarp_Kubernetes与HPC：（1）RDMA网络

什么是RDMA在计算机运算领域，远程直接内存访问(英语：remotedirectmemoryaccess，RDMA)是一种直接存储器访问技术，它将数据直接从一台计算机的内存传输到另一台计算机，无需双方操作系统的介入

CharlesDDDD·2022-08-15 09:45

当RDMA遇到Rust

2022年8月5日-6日，一年一度的中国开源基础设施活动日（OpenInfraDaysChina）即将在线上举行。本次会议没有限定一个统一的主题，主要聚焦云计算基础设施、云原生技术与应用实践、开源治理、5G、算力网络与边缘计算五大主题方向。云计算基础设施分论坛主要聚焦云计算基础设施领域的前沿技术和优秀实践，围绕多硬件架构和多操作系统支持、人工智能技术应用、网络与存储，数据处理DPU及其他加速硬件、

·2022-08-08 15:47

Rust X Datenlord: 第二届中国Rust开发者大会回顾

今年以来陆续发声，将达坦科技开源项目async-rdma的技术实践和案例对外输出，坚定地做Rust语言的布道，也将达坦科技探索的新一代硬件敏捷开发的研究成果在各硬件技术大会上做分享（本周的次条为达坦科技的团队在南京参加中国计算机学会芯片大会的回顾

·2022-08-08 15:16

Datenlord |创业公司为什么要选 Rust 做 RDMA 库？

嘉宾：施继成编辑：李慧文RDMA（RemoteDirectMemoryAccess）是近年越来越热门的高速网络传输协议，被广泛应用于超算中心和高端存储领域，用于缩短网络延迟、提高网络带宽。

·2022-07-20 12:36

Datenlord |在 Rust 中管理 RDMA 内存

RDMA的全称为RemoteDirectMemoryAccess，即允许本地内存被远端机器直接访问，该访问不经过被访问机器的操作系统，直接由网卡代为完成。

·2022-07-19 18:16

Datenlord | Rust实现RDMA异步编程（一）：基于epoll实现RDMA 异步操作

RDMA是一套高性能网络协议栈，多用于高性能计算、高性能存储领域。RDMA的library是用C实现的，但是没有很好用的Rust的binding，不方便Rust开发者使用。

·2022-07-18 18:33

Datenlord | Rust实现RDMA异步编程（二）：async Rust 封装 UCX 通信库

UCX是一个高性能网络通信库，它作为MPI所依赖的通信模块之一在高性能计算领域得到广泛的使用。UCX使用C语言编写，为了在Rust项目中使用它，我们需要将它的C接口包装成Rust库。在这个过程中我们充分利用了Rust的杀手级特性——async-await协程来包装异步IO接口，从而极大降低了应用的编程复杂度。去年我们用Rust实现的高性能分布式文件系统MadFS，底层就使用了我们自己包装过的UCX

·2022-07-18 18:01

DatenLord｜如何用Rust实现RDMA

作者：王璞后期编辑：张汉东首发于《Rust中文精选》RDMA是常用于高性能计算(HPC)领域的高速网络，在存储网络等专用场景也有广泛的用途。

·2022-07-18 15:48

焱融全闪 X NVIDIA InfiniBand：打造 AI 时代 GPU 计算的高性能存储技术

原生支持RDMA技术，在保证高带宽输出的基础上，大大降低数据访问延迟，为高性能计算、人工智能、云计算、存储等众多数据密集型应用提供了强大的网络性能支撑。

·2022-07-13 16:13

51万奖池邀你参战！第二届阿里云ECS CloudBuild开发者大赛来袭

阿里云实现了SGX上云，发布了首个全球大规模的弹性RDMA加速能力，让加

·2022-06-23 18:56

腾讯云TDSQL-C重磅升级，性能全面领跑云原生数据库市场

涵盖了基于英特尔®傲腾™持久内存的二级缓存、全链路RDMA网络、7*24持续无锁备份等核心功能。

英特尔边缘计算社区·2022-06-21 21:03

性能提升 57% ，SMC-R 透明加速 TCP 实战解析 | 龙蜥技术

对于数据中心场景，通过弹性RDMA实现高性能网络协议SMC-R，透明替换应用TCP协议，实现应用网络透明加速。本文整理自龙蜥大讲堂第15期，视频精彩回放已上传至龙蜥官网，欢迎查看！

·2022-05-26 14:42

Infiniband与RDMA原理简介

Infiniband介绍参考：InfiniBandTradeAssociation一、基本概念1、与传统网络区别传统网络是以“网络”为中心的。操作系统是资源的拥有者并将资源抽象为服务，应用访问资源需要要向操作系统请求相应的服务（网络、存储等）；infiniband是以应用为中心的（applicationcentric），它从应用的视角去分析解决IO问题及如何设计网络。其基本思想是提供简单易用的消息

冬生0·2022-05-22 21:21

性能提升 57% ，SMC-R 透明加速 TCP 实战解析 | 龙蜥技术

对于数据中心场景，通过弹性RDMA实现高性能网络协议SMC-R，透明替换应用TCP协议，实现应用网络透明加速。本文整理自龙蜥大讲堂第15期，视频精彩回放已上传至龙蜥官网，欢迎查看！

·2022-05-19 16:57

6GB/s的性能体验！深信服EDS如何让HPDA应用又省又稳？

在高性能计算场景下，传统的存储方案往往选择采用支持RDMA协

·2022-05-13 15:24

基于LSM-Tree 的分布式组件化 KV 存储系统 | DB·洞见回顾

Nova-LSM，一个将基于LSM-Tree的分布式KV存储系统分解为使用RDMA进行通信的组件的工作。这些组件将存储与处理分开，使处理组件能够共享存储带宽和空间。

·2022-05-13 09:51

系列解读 SMC-R (二)：融合 TCP 与 RDMA 的 SMC-R 通信 | 龙蜥技术

文/龙蜥社区高性能网络SIG一、引言通过上一篇文章《系列解读SMC-R：透明无感提升云上TCP应用网络性能（一）》我们了解到，RDMA相对于TCP具有旁路软件协议栈、卸载网络工作到硬件的特点，能有效增加网络带宽

·2022-04-27 14:54

系列解读 SMC-R (二)：融合 TCP 与 RDMA 的 SMC-R 通信 | 龙蜥技术

文/龙蜥社区高性能网络SIG一、引言通过上一篇文章《系列解读SMC-R：透明无感提升云上TCP应用网络性能（一）》我们了解到，RDMA相对于TCP具有旁路软件协议栈、卸载网络工作到硬件的特点，能有效增加网络带宽

·2022-04-22 15:46

系列解读SMC-R：透明无感提升云上 TCP 应用网络性能（一）| 龙蜥技术

简介：已有的应用若想使用RDMA技术改造成本高，那么有没有一种技术是不做任何改造就可以享受RDMA带来的性能优势？

·2022-04-07 13:20

系列解读SMC-R：透明无感提升云上 TCP 应用网络性能（一）| 龙蜥技术

文/龙蜥社区高性能网络SIG引言SharedMemoryCommunicationoverRDMA(SMC-R)是一种基于RDMA技术、兼容socket接口的内核网络协议，由IBM提出并在2017年贡献至

·2022-03-31 17:40

阿里云发布第四代神龙架构，提供业界首个大规模弹性RDMA加速能力

简介：10月20日，2021年杭州云栖大会上，阿里云发布第四代神龙架构，升级至全新的eRMDA网络架构，是业界首个大规模弹性RDMA加速能力。

·2022-03-23 10:03

NetDAM- Network Directly Attached Memory

啥也不是他来了他来了他带着礼物过来了，只要跟网络沾边后还是要看C家，C家中国研发中心继RUTA协议后的又一力作NetDAM，它对比了主机内各种通信总线（PCIE/CXL）和主机之间通信的协议（以太网、RDMA

lmxc·2022-02-18 14:23

KubeDL HostNetwork：加速分布式训练通信效率

简介：ubeDL为分布式训练作业带来了HostNetwork网络模式，支持计算节点之间通过宿主机网络相互通信以提升网络性能，同时适应RDMA/SCC等新型高性能数据中心架构的网络环境，此外，KubeDL

·2022-02-16 14:18

翻译：AWS高性能网络技术SRD-用于弹性可扩展的HPC云优化传输协议

IEEE发的公有云一哥AWS高性能网络协议论文，SRD-ScalableReliableDatagram不鸟RDMA自己搞，原文地址https://ieeexplore.ieee.org/document

lmxc·2022-01-02 10:33

浅谈 RDMA 与无损网络

为什么需要RDMA当今是云计算、大数据的时代，企业业务持续增长需要存储系统的IO性能也持续增长。

·2021-11-16 17:46

存储大师班 | 浅谈 RDMA 与无损网络

为什么需要RDMA当今是云计算、大数据的时代，企业业务持续增长需要存储系统的IO性能也持续增长。

·2021-11-11 15:11

2021云栖大会丨阿里云发布第四代神龙架构，提供业界首个大规模弹性RDMA加速能力

简介：10月20日，2021年杭州栖大云会上，阿里云发布第四代神龙架构，升级至全新的eRMDA网络架构，是业界首个大规模弹性RDMA加速能力。

·2021-10-27 11:49

2021云栖大会丨阿里云发布第四代神龙架构，提供业界首个大规模弹性RDMA加速能力

简介：10月20日，2021年杭州栖大云会上，阿里云发布第四代神龙架构，升级至全新的eRMDA网络架构，是业界首个大规模弹性RDMA加速能力。

·2021-10-22 10:04

阿里云发布第四代神龙架构云计算首次进入5微秒时延时代

10月20日，2021云栖大会上，阿里云宣布推出第四代神龙架构，这是飞天云操作系统新一代虚拟化技术，首次搭载全球唯一的大规模弹性RDMA加速网络，网络延迟整体降低80%以上。

AI科技大本营·2021-10-20 15:07

k8s-glusterfs

glusterfsyuminstallcentos-release-glusteryuminstall-yglusterfsglusterfs-serverglusterfs-fuseglusterfs-rdma2

heliping_peter·2021-06-26 02:42

RDMA Vs DPDK

DPDKDPDK网络层：硬件中断->放弃中断流程；用户层通过设备映射取包->进入用户层协议栈->逻辑层->业务层；核心技术：1）将协议栈上移到用户态，利用UIO技术直接将设备数据映射拷贝到用户态2）利用大页技术，降低TLBcachemiss，提高TLB访问命中率3）通过CPU亲和性，绑定网卡和线程到固定的core，减少cpu任务切换4）通过无锁队列，减少资源的竞争优势：1）减少中断次数；2）减少内

异客z·2021-06-05 02:44

RDMA

RDMA是RemoteDirectMemoryAccess的缩写，意思是远程直接数据存取，就是为了解决网络传输中服务器端数据处理的延迟而产生的。

与离离·2021-05-02 14:01

突破开源Redis的内存限制，存算分离的GaussDB到底有多能“装”？

存储架构高斯Redis基于计算存储分离架构，计算层实现热数据缓存，存储层实现全量数据的落盘，中间通过RDMA高速网络互连，通过算

华为云·2021-01-21 14:13

【RDMA】RDMA编程和TCP编程的区别|bRPC

RDMARDMA和TCP编程差别SocketAPIVerbsAPI百度bRPCRDMA想从根本上解决CPU参与网络传输的低效问题，就要更多地借助专用芯片的能力，RDMA高性能网络势不可挡。

bandaoyu·2021-01-20 17:18

打破传统物理机限制，支持RSSD云盘、可分钟级交付的UCloud裸金属物理云来了！

其系统盘和数据盘均支持基于RDMA网络的RSSD云盘，取代了原有的

UCloud云计算·2020-12-24 10:40

打破传统物理机限制，支持RSSD云盘、可分钟级交付的UCloud裸金属物理云来了！

其系统盘和数据盘均支持基于RDMA网络的RSSD云盘，取代了原有的

UCloud云计算·2020-12-22 17:39

“黑科技”RDMA如何帮助深度学习模型优化通信网络？

很多人有疑问：为什么深度学习模型需要优化通信网络？事实上，越是高性能算力的平台，越离不开通信网络的优化。近日，OneFlow创始人袁进辉与熊先奎先生（中兴通讯股份有限公司无线首席架构师）、宋庆春先生（国际高性能计算和人工智能咨询委员会亚太区主席）在《中兴通讯技术》上联合发表署名论文，探讨关于深度学习中通信网络优化的相关课题。让我们先来一起速读这篇论文的“精华”吧。深度学习模型为何需要通信网络优化？

OneFlow深度学习框架·2020-12-02 11:50

火焰图在java程序启动时，就执行的方法

1、java-agentpath:/home/rdma/profiler/build/libasyncProfiler.so=start,svg,file=profile.svgClassName2、用

爱喝雪花啤酒·2020-09-16 03:30

KVM/QEMU2.3.0 虚拟机动态迁移分析（一）

Uri跳转函数Tcp:tcp_start_outgoing_migrationRdma:rdma_start_outgoing_migratione

北方南方·2020-09-15 23:21

大数据开源组件图谱------非常详细

GlusterFS通过RDMA和TCP/IP方式将分布到不同服务器上的存储空间汇集成一个大的网络化并行文件系统。

lcm_linux·2020-09-15 02:07

学习大数据开发，一定不可错过的大数据组件图谱——很齐全

GlusterFS通过RDMA和TCP/IP方式将分布到不同服务器上的存储空间汇集成一个大的网络化并行文件系统。Ceph

juan333·2020-09-15 01:56

企业通讯解决方案 Qpid

其中C++版本的服务器端具备高性能/低消耗以及RDMA支持，可运行于Windows/Linux和Solaris平台；而Java版本的服务器则支持JMS，以及各种平台。关于

weixin_30858241·2020-09-14 16:28

消息中间件 Apache Qpid 简介，第 2 部分

为了提高性能，Qpid可以建立BrokerFederation来进行负载均衡，C++版本的Broker还可以利用RDMA来提高信息传输的性能。Qp

maple_leaves_flying·2020-09-14 14:20

RDMA编程1 建立侦听

RDMA编程建立连接1.RDMA的学习环境搭建RDMA需要专门的RDMA网卡或者InfiniBand卡才能使用，学习RDMA而又没有这些硬件设备，可以使用一个软件RDMA模拟环境，softiwarp，-

winux·2020-09-14 05:25

推荐频道

DPU&RDMA

SPDK vhost-user结合SPDK NVMe-oF RDMA性能调优

【云计算】【总结】CMSC 5735 Cloud Computing

虹科方案|具有RDMA复制写入日志的高可用性HDD存储集群可提供出色的性能

基于LSM-Tree 的分布式组件化 KV 存储系统 | DB·洞见回顾

国际高性能计算和人工智能咨询委员会举办的第十届亚太区RDMA 编程赛结果出炉

计算机专有名词解析

roce和iwarp_Kubernetes与HPC：（1）RDMA网络

当RDMA遇到Rust

Rust X Datenlord: 第二届中国Rust开发者大会回顾

Datenlord |创业公司为什么要选 Rust 做 RDMA 库？

Datenlord |在 Rust 中管理 RDMA 内存

Datenlord | Rust实现RDMA异步编程（一）：基于epoll实现RDMA 异步操作

Datenlord | Rust实现RDMA异步编程（二）：async Rust 封装 UCX 通信库

DatenLord｜如何用Rust实现RDMA

焱融全闪 X NVIDIA InfiniBand：打造 AI 时代 GPU 计算的高性能存储技术

51万奖池邀你参战！第二届阿里云ECS CloudBuild开发者大赛来袭

腾讯云TDSQL-C重磅升级，性能全面领跑云原生数据库市场

性能提升 57% ，SMC-R 透明加速 TCP 实战解析 | 龙蜥技术

Infiniband与RDMA原理简介

性能提升 57% ，SMC-R 透明加速 TCP 实战解析 | 龙蜥技术

6GB/s的性能体验！深信服EDS如何让HPDA应用又省又稳？

基于LSM-Tree 的分布式组件化 KV 存储系统 | DB·洞见回顾

系列解读 SMC-R (二)：融合 TCP 与 RDMA 的 SMC-R 通信 | 龙蜥技术

系列解读 SMC-R (二)：融合 TCP 与 RDMA 的 SMC-R 通信 | 龙蜥技术

系列解读SMC-R：透明无感提升云上 TCP 应用网络性能（一）| 龙蜥技术

系列解读SMC-R：透明无感提升云上 TCP 应用网络性能（一）| 龙蜥技术

阿里云发布第四代神龙架构，提供业界首个大规模弹性RDMA加速能力

NetDAM- Network Directly Attached Memory

KubeDL HostNetwork：加速分布式训练通信效率

翻译：AWS高性能网络技术SRD-用于弹性可扩展的HPC云优化传输协议

浅谈 RDMA 与无损网络

存储大师班 | 浅谈 RDMA 与无损网络

2021云栖大会丨阿里云发布第四代神龙架构，提供业界首个大规模弹性RDMA加速能力

2021云栖大会丨阿里云发布第四代神龙架构，提供业界首个大规模弹性RDMA加速能力

阿里云发布第四代神龙架构云计算首次进入5微秒时延时代

k8s-glusterfs

RDMA Vs DPDK

RDMA

突破开源Redis的内存限制，存算分离的GaussDB到底有多能“装”？

【RDMA】RDMA编程和TCP编程的区别|bRPC

打破传统物理机限制，支持RSSD云盘、可分钟级交付的UCloud裸金属物理云来了！

打破传统物理机限制，支持RSSD云盘、可分钟级交付的UCloud裸金属物理云来了！

“黑科技”RDMA如何帮助深度学习模型优化通信网络？

火焰图在java程序启动时，就执行的方法

KVM/QEMU2.3.0 虚拟机动态迁移分析（一）

大数据开源组件图谱------非常详细

学习大数据开发，一定不可错过的大数据组件图谱——很齐全

企业通讯解决方案 Qpid

消息中间件 Apache Qpid 简介，第 2 部分

RDMA编程1 建立侦听