Mellanox infinoband RDMA SDP

最新推荐文章于 2024-09-13 15:01:56 发布
最新推荐文章于 2024-09-13 15:01:56 发布
阅读量178 收藏
点赞数
文章标签： 网络
本文详细介绍了InfiniBand技术及其在高性能计算中的应用，包括IPoIB和SDPoIB的工作原理，以及如何利用RDMA特性提高数据传输效率。还涉及了R-NIC、RoCE等相关概念。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

IPoIB

Internet Protocol over InfiniBand
就是指利用物理IB网络(IB卡,线缆,交换机,更甚者IB3层交换)通过ip协议进行连接,并进行数据传输!

SDP

Sockets Direct Protocol由InfiniBand行业协会trade Association软件工作组指定，主要是针对InfiniBand架构.
SDP利用IB卡的RDMA特性进行数据的高速传输,低延迟数据交换，推广到iWARP Internet Wide Area RDMA Protocol.

SDP使用RDMA网络特性能够高效的进行零拷贝的数据传输,SDP协议设计的目的是为了使得应用程序能够透明的使用IB卡的RDMA(Remote Direct Memory Access)通信机制来加速传统的TCP/IP网络通信.

在InfiniBand上的SDP协议实现即SDPoIB
solsris Unix均提供SDP支持,在Microsoft windows中则可以使用Winsock Direct 子系统来实现SDP

SDPoIB主要是针对流的套接字通信,使用SDPoIB进行通信的应用,可以绕过操作系统本身的TCP协议栈,之间利用IB卡硬件的RDMA能力进行通信,基于数据包的通信像UDP等则由IPoIB来进行支持,SDPoIB可以依赖IPoIB来进行地址解析等工作.

Roce(RDMA over Converged EtherNet)

http://en.wikipedia.org/wiki/RDMA_over_Converged_Ethernet

 

R-NIC

Rdma-aware Network Interface Controller

IE-TF

互联网工程任务组(Internet Engineering Task Force)

NVIDIA InfiniBand AI 高性能网络
烟云的计算
06-21 2002
InfiniBand 是一种网络通信协议，以极高的传输速度将服务器、存储设备和网络设备连接在一起，提供高带宽、低时延的可靠传输。InfiniBand 最初主要用在 HPC（高性能计算系统）中，近年来随着设备成本的下降，InfiniBand 也逐渐被用到企业数据中心。相比传统的 TCP/IP 以太网络，InfiniBand 具有更高的传输效率。原因在于 TCP 协议极其复杂、代码量巨大并且充满了各种特例，而且它比较难卸载。与之相比，IB 使用基于信任的、流控制的机制来确保连接的完整性，数据包极少丢失。使用 I
万字长文详解AI集群基础设施InfiniBand
强化学习曾小健
08-11 1517
GPUDirect Peer-to-Peer（P2P）技术主要用于单机GPU间的高速通信，它使得GPU可以通过PCI Express直接访问目标GPU的显存，避免了通过拷贝到CPU host memory作为中转，大大降低了数据交换的延迟。
【RDMA命令系列之】如何安装Mellanox固件管理工具MFT以及RPM包中的66条命令？（Mellanox Firmware Tools：mlxconfig、mlxreg、mst、mstdump）
技术札记
05-02 3928
提供给OEM进行操作的命令，包括cpld更新、格式转换等。相关命令作用、场景与用法后期再通过其他文档更新。可以看到很多常见的命令。
mellanox RDMA RoCE
weixin_34010949的博客
05-22 1960
一：首先根据系统发行版本下载对应的驱动，下载地址如下： http://www.mellanox.com/page/products_dyn?product_family=26&mtag=linux_sw_drivers 本次下载的驱动版本为：MLNX_OFED_LINUX-1.5.3-4.0.42-sles11-x86_64.tgz 二：添加针对当前内核的IB驱动 1.把下载...
【RDMA】mellanox RDMA网卡驱动安装和查看状态
我的笔记本
04-20 1万+
目录 1. 基础知识 2. 驱动安装 3. 性能测试 4. 其他问题 原文：https://www.cnblogs.com/sctb/p/13179542.html 最近多次安装、使用infiniband网卡，每次都要到处寻找相关资料，所以决定做此总结，方便查找。 1. 基础知识 首先，得了解什么是RDMA，贴几个资料： 深入浅出全面解析RDMA RDMA技术详解（一）：RDMA概述 RDMA技术详解（二）：RDMA Send Receive操作 然后得了解如何实现，这两个可以.
Mellanox驱动加载与RoCE & soft-RoCE(RDMA)
开源&&分享
08-12 4717
处理器(cpu) 内存 I/o设备(外设)三者之间的关系（1）没有DMA参与的访问方式：假设I/O设备为一个普通网卡，为了从内存拿到需要发送的数据，然后组装数据包发送到物理链路上，网卡需要通过总线告知CPU自己的数据请求。然后CPU将会把内存缓冲区中的数据复制到自己内部的寄存器中，再复制到I/O设备的存储空间中。如果数据量比较大，那么很长一段时间内CPU都会忙于搬移数据，而无法投入到其他工作中去。CPU的最主要工作是计算，而不是进行数据复制，这种工作属于白白浪费了它的计算能力。......
服务器性能测试之Melloanox卡RDMA测试
qq_41897488的博客
11-16 3755
接好外插mellanox网卡并配置IP 客户端： vim /etc/sysconfig/network-scripts/ifcfg-eth0 IPADDR=192.168.64.20 NETMASK=255.255.255.0 NETWORK=192.168.64.0 服务端： vim /etc/sysconfig/network-scripts/ifcfg-eth0 IPADDR=192.168.64.21 NETMASK=255.255.255.0 NETWORK=192.168.64.0 配置好IP后
Mellanox-OFED-Linux-User-Manual-v3.20.pdf
05-18
- Sockets Direct Protocol (SDP)：允许套接字应用程序直接利用RDMA功能，减少了CPU的介入。 - SCSI RDMA Protocol (SRP)：使用RDMA技术的SCSI协议，用于高性能存储访问。 - User Direct Access Programming ...
Mellanox OFED Linux用户手册v3.20：全面介绍与安装指南
Mellanox OFED是针对高性能计算（HPC）和数据中心环境开发的一套开源工具包，旨在优化RDMA（Remote Direct Memory Access）通信性能。 手册首先提供了对Mellanox OFED体系结构的全面概述，包括主要组件的介绍： 1....
RDMA简介相关内容
写代码的柯长的博客
10-11 4772
RDMA简介 DMA 简单的说一下DMA(Direct Memory Access)，直接内存访问。 即通过DMA Enigne 能够将主板上的设备数据不通过CPU直接将数据搬运到内存当中。 DMA的工作信息，可以通过一个简单的图来进行表示： 两个buffer不通过CPU的搬运。而是通过DMA Engine 将数据进行搬运，并且在数据搬运结束之后通知CPU RDMA RDMA(Remote Di...
Infiniband, RDMA, SDP ... a few facts
weixin_30432579的博客
02-21 156
In the article about RHEL support of Infiniband technology I used a few keywords which should be explained in more details.At first, what does RDMA means? The RDMA is simply an extension of DMA which ...
【硬件相关】Mellanox网络配置及参数优化
Luxf0的博客
03-04 6687
本文主要介绍Mellanox网络配置、部署管理及相关调优手段，用于后续部署实践参考使用
Nvidia_Mellanox_CX5和6DX系列网卡_RDMA_RoCE_无损和有损_DCQCN拥塞控制等技术简介-一文入门RDMA和RoCE有损无损 rdma rocev2 无损 有损
ssbandjl的博客
07-23 5700
随着互联网, 人工智能等兴起, 跨机通信对带宽和时延都提出了更高的要求, RDMA技术也不断迭代演进, 如: RoCE(RDMA融合以太网)协议, 从RoCEv1 -> RoCEv2, 以及IB协议, Mellanox的RDMA网卡cx4, cx5, cx6/cx6DX, cx7等, 本文主要基于CX5和CX6DX对RoCE技术进行简介, 一文入门RDMA和RoCE有损及无损关键技术RoCE: RDMA融合以太网, 继承RDMA所有的优势WQE: 工作队列元素, 可发音(wuki)CQE: 完成队列元素,
CentOS 7下CX5-RDMA网络测试
最新发布
一名运维开发工程师的日常记录
09-13 2546
RDMA(Remote Direct Memory Access) 全称远程直接数据存取，就是为了解决网络传输中服务器端数据处理的延迟而产生的。RDMA 通过网络把资料直接传入计算机的存储区，将数据从一个系统快速移动到远程系统存储器中，而不对操作系统造成任何影响，这样就不需要用到多少计算机的处理功能。它消除了外部存储器复制和上下文切换的开销，因而能解放内存带宽和 CPU 周期用于改进应用系统性能。RDMA需要智能网卡支持，这里使用的是Mellanox cx5。基于CentOS 7.8 x86_64。
机房交换机基础配置 -- Mellanox SN2700
唐门问心
06-25 6881
以下出现的章节名采用配置手册中的。 # 基础配置 hostname switch-sn2700-rack1 （2号机架） hostname switch-sn2700-rack2 （3号机架） 4.1 Management Interface 4.1.1 static IP 192.168.X.Y/24 （2号机架） static IP 192.168.M.N/24 （3
[RDMA] RDMA 初步使用操作
Master-TJ的个人博客
07-28 9762
本小节只适用于 InfiniBand 设备。因为 iWARP 和 RoCE/IBoE 设备是基于 IP 的设备，用户应在配置 IPoIB 且设备有 IP 地址后，按照执行 RDMA 测试操作一节的内容进行测试。 1. InfiniBand 设备信息 启用 rdma 服务和 opensm 服务（若需要），并为具体硬件安装适当的用户空间库后，就可以进行用户空间 rdma 操作。 service...
深入浅出全面解析RDMA
热门推荐
Master-TJ的个人博客
06-04 8万+
RDMA(RemoteDirect Memory Access)技术全称远程直接内存访问，就是为了解决网络传输中客户端与服务器端数据处理的延迟而产生的。它将数据直接从一台计算机的内存传输到另一台计算机，无需双方操作系统的介入。这允许高吞吐、低延迟的网络通信，尤其适合在大规模并行计算机集群中使用。RDMA通过网络把资料直接传入计算机的内存中，将数据从一个系统快速移动到远程系统内存中，而不对操...
SDP协议
linengeir的专栏
03-27 5053
1.SDP协议概述 SDP（Session Description Protocol）是一个用来描述多媒体会话的应用层控制协议，为会话通知、会话邀请和其它形式的多媒体会话初始化等目的提供了多媒体会话描述；它是一个基于文本的协议，这样就能保证协议的可扩展性比较强，这样就使其具有广泛的应用范围；SDP 完全是一种会话描述格式 ― 它不属于传输协议 ― 它只使用不同的适当的传输协议，包括会话通
Mellanox InfiniBand RDMA编程手册：Rev1.7技术详解
《RDMA-aware网络编程用户手册》是Mellanox Technologies提供的全面指南，专为理解和开发InfiniBand Remote Direct Memory Access (RDMA)技术而设计。该文档适用于那些希望在高性能计算(HPC)、数据中心和云计算环境...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值