Mellanox infinoband RDMA SDP

最新推荐文章于 2024-09-13 15:01:56 发布
转载 最新推荐文章于 2024-09-13 15:01:56 发布 · 177 阅读 · 0
文章标签：

#网络

本文详细介绍了InfiniBand技术及其在高性能计算中的应用，包括IPoIB和SDPoIB的工作原理，以及如何利用RDMA特性提高数据传输效率。还涉及了R-NIC、RoCE等相关概念。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

IPoIB

Internet Protocol over InfiniBand
就是指利用物理IB网络(IB卡,线缆,交换机,更甚者IB3层交换)通过ip协议进行连接,并进行数据传输!

SDP

Sockets Direct Protocol由InfiniBand行业协会trade Association软件工作组指定，主要是针对InfiniBand架构.
SDP利用IB卡的RDMA特性进行数据的高速传输,低延迟数据交换，推广到iWARP Internet Wide Area RDMA Protocol.

SDP使用RDMA网络特性能够高效的进行零拷贝的数据传输,SDP协议设计的目的是为了使得应用程序能够透明的使用IB卡的RDMA(Remote Direct Memory Access)通信机制来加速传统的TCP/IP网络通信.

在InfiniBand上的SDP协议实现即SDPoIB
solsris Unix均提供SDP支持,在Microsoft windows中则可以使用Winsock Direct 子系统来实现SDP

SDPoIB主要是针对流的套接字通信,使用SDPoIB进行通信的应用,可以绕过操作系统本身的TCP协议栈,之间利用IB卡硬件的RDMA能力进行通信,基于数据包的通信像UDP等则由IPoIB来进行支持,SDPoIB可以依赖IPoIB来进行地址解析等工作.

Roce(RDMA over Converged EtherNet)

http://en.wikipedia.org/wiki/RDMA_over_Converged_Ethernet

 

R-NIC

Rdma-aware Network Interface Controller

IE-TF

互联网工程任务组(Internet Engineering Task Force)

【RDMA命令系列之】如何安装Mellanox固件管理工具MFT以及RPM包中的66条命令？（Mellanox Firmware Tools：mlxconfig、mlxreg、mst、mstdump）
技术札记
05-02 3866
提供给OEM进行操作的命令，包括cpld更新、格式转换等。相关命令作用、场景与用法后期再通过其他文档更新。可以看到很多常见的命令。
【硬件相关】Mellanox网络配置及参数优化
Luxf0的博客
03-04 6596
本文主要介绍Mellanox网络配置、部署管理及相关调优手段，用于后续部署实践参考使用
mellanox RDMA RoCE
weixin_34010949的博客
05-22 1954
一：首先根据系统发行版本下载对应的驱动，下载地址如下： http://www.mellanox.com/page/products_dyn?product_family=26&mtag=linux_sw_drivers 本次下载的驱动版本为：MLNX_OFED_LINUX-1.5.3-4.0.42-sles11-x86_64.tgz 二：添加针对当前内核的IB驱动 1.把下载...
【RDMA】mellanox RDMA网卡驱动安装和查看状态
bandaoyu的note
04-20 1万+
目录 1. 基础知识 2. 驱动安装 3. 性能测试 4. 其他问题 原文：https://www.cnblogs.com/sctb/p/13179542.html 最近多次安装、使用infiniband网卡，每次都要到处寻找相关资料，所以决定做此总结，方便查找。 1. 基础知识 首先，得了解什么是RDMA，贴几个资料： 深入浅出全面解析RDMA RDMA技术详解（一）：RDMA概述 RDMA技术详解（二）：RDMA Send Receive操作 然后得了解如何实现，这两个可以.
Mellanox驱动加载与RoCE & soft-RoCE(RDMA)
开源&&分享
08-12 4652
处理器(cpu) 内存 I/o设备(外设)三者之间的关系（1）没有DMA参与的访问方式：假设I/O设备为一个普通网卡，为了从内存拿到需要发送的数据，然后组装数据包发送到物理链路上，网卡需要通过总线告知CPU自己的数据请求。然后CPU将会把内存缓冲区中的数据复制到自己内部的寄存器中，再复制到I/O设备的存储空间中。如果数据量比较大，那么很长一段时间内CPU都会忙于搬移数据，而无法投入到其他工作中去。CPU的最主要工作是计算，而不是进行数据复制，这种工作属于白白浪费了它的计算能力。......
服务器性能测试之Melloanox卡RDMA测试
qq_41897488的博客
11-16 3731
接好外插mellanox网卡并配置IP 客户端： vim /etc/sysconfig/network-scripts/ifcfg-eth0 IPADDR=192.168.64.20 NETMASK=255.255.255.0 NETWORK=192.168.64.0 服务端： vim /etc/sysconfig/network-scripts/ifcfg-eth0 IPADDR=192.168.64.21 NETMASK=255.255.255.0 NETWORK=192.168.64.0 配置好IP后
Infiniband, RDMA, SDP ... a few facts
weixin_30432579的博客
02-21 154
In the article about RHEL support of Infiniband technology I used a few keywords which should be explained in more details.At first, what does RDMA means? The RDMA is simply an extension of DMA which ...
Nvidia_Mellanox_CX5和6DX系列网卡_RDMA_RoCE_无损和有损_DCQCN拥塞控制等技术简介-一文入门RDMA和RoCE有损无损 rdma rocev2 无损 有损
ssbandjl的博客
07-23 5626
随着互联网, 人工智能等兴起, 跨机通信对带宽和时延都提出了更高的要求, RDMA技术也不断迭代演进, 如: RoCE(RDMA融合以太网)协议, 从RoCEv1 -> RoCEv2, 以及IB协议, Mellanox的RDMA网卡cx4, cx5, cx6/cx6DX, cx7等, 本文主要基于CX5和CX6DX对RoCE技术进行简介, 一文入门RDMA和RoCE有损及无损关键技术RoCE: RDMA融合以太网, 继承RDMA所有的优势WQE: 工作队列元素, 可发音(wuki)CQE: 完成队列元素,
CentOS 7下CX5-RDMA网络测试
最新发布
一名运维开发工程师的日常记录
09-13 2507
RDMA(Remote Direct Memory Access) 全称远程直接数据存取，就是为了解决网络传输中服务器端数据处理的延迟而产生的。RDMA 通过网络把资料直接传入计算机的存储区，将数据从一个系统快速移动到远程系统存储器中，而不对操作系统造成任何影响，这样就不需要用到多少计算机的处理功能。它消除了外部存储器复制和上下文切换的开销，因而能解放内存带宽和 CPU 周期用于改进应用系统性能。RDMA需要智能网卡支持，这里使用的是Mellanox cx5。基于CentOS 7.8 x86_64。
机房交换机基础配置 -- Mellanox SN2700
唐门问心
06-25 6826
以下出现的章节名采用配置手册中的。 # 基础配置 hostname switch-sn2700-rack1 （2号机架） hostname switch-sn2700-rack2 （3号机架） 4.1 Management Interface 4.1.1 static IP 192.168.X.Y/24 （2号机架） static IP 192.168.M.N/24 （3
RDMA简介相关内容
写代码的柯长的博客
10-11 4765
RDMA简介 DMA 简单的说一下DMA(Direct Memory Access)，直接内存访问。 即通过DMA Enigne 能够将主板上的设备数据不通过CPU直接将数据搬运到内存当中。 DMA的工作信息，可以通过一个简单的图来进行表示： 两个buffer不通过CPU的搬运。而是通过DMA Engine 将数据进行搬运，并且在数据搬运结束之后通知CPU RDMA RDMA(Remote Di...
[RDMA] RDMA 初步使用操作
Master-TJ的个人博客
07-28 9724
本小节只适用于 InfiniBand 设备。因为 iWARP 和 RoCE/IBoE 设备是基于 IP 的设备，用户应在配置 IPoIB 且设备有 IP 地址后，按照执行 RDMA 测试操作一节的内容进行测试。 1. InfiniBand 设备信息 启用 rdma 服务和 opensm 服务（若需要），并为具体硬件安装适当的用户空间库后，就可以进行用户空间 rdma 操作。 service...
深入浅出全面解析RDMA
热门推荐
Master-TJ的个人博客
06-04 8万+
RDMA(RemoteDirect Memory Access)技术全称远程直接内存访问，就是为了解决网络传输中客户端与服务器端数据处理的延迟而产生的。它将数据直接从一台计算机的内存传输到另一台计算机，无需双方操作系统的介入。这允许高吞吐、低延迟的网络通信，尤其适合在大规模并行计算机集群中使用。RDMA通过网络把资料直接传入计算机的内存中，将数据从一个系统快速移动到远程系统内存中，而不对操...
SDP协议
linengeir的专栏
03-27 5051
1.SDP协议概述 SDP（Session Description Protocol）是一个用来描述多媒体会话的应用层控制协议，为会话通知、会话邀请和其它形式的多媒体会话初始化等目的提供了多媒体会话描述；它是一个基于文本的协议，这样就能保证协议的可扩展性比较强，这样就使其具有广泛的应用范围；SDP 完全是一种会话描述格式 ― 它不属于传输协议 ― 它只使用不同的适当的传输协议，包括会话通
两种以太网 RDMA 协议： iWARP 和 RoCE
jianchaolv的专栏
03-08 1万+
http://weibo.com/p/1001603936363903889917?mod=zwenzhang 本文是讲演 How Ethernet RDMA Protocols iWARP and RoCE Support NVMe over Fabrics【1】的摘要。 如果 NVMe 存储系统与主机是分离的，显然需要某种 fabric 把它们连接，这样主机才能使用
RoCE与RDMA技术
海绵汽水的博客
10-09 4万+
1、RoCE RoCE（RDMA over Converged Ethernet）是一种允许通过以太网使用远程直接内存访问（RDMA）的网络协议。华为 CE8860 交换机插入 CX4归一化网卡（10GE/25GE） 后，立即支持RoCE 10GE/25GE通信。 由于具备明显性能和成本优势，在NAS存储集群中采用RoCE协议，将逐渐成为市场主流。 DMA控制器从CPU完全接
Mellanox RoCE卡调试笔记
winux的专栏
09-24 1万+
拿到3块mellanox 的XC3卡，装到3个服务器上，开始RDMA调试。代码都是我自己的，使用rdma_cm库进行开发。Mellanox的RDMA是基于ROCE协议的，因此需要物理层保证可靠传输，不能丢包。为此交换机需要支持DCB， PFC等流控技术。这样子系统一下子就复杂了，为了简化系统，决定不使用交换机，把服务器之间用光纤直连。好在我只有3台服务器，刚好可以连起来，1台对2台即可。ubuntu
Mellanox网卡不能分配VF解决方法
weixin_34148340的博客
10-28 1146
2019独角兽企业重金招聘Python工程师标准>>> ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值