ADOP科普:什么是InfiniBand,它和以太网的区别在于什么??

Infiniband互连网络概述 一、Infiniband是什么? InfiniBand(简称IB)是一种工业标准规范,它定义了一种输入/输出架构,用于计算节点、通信基础设施设备、存储和嵌入式系统的互连。操作系统可以是Linux、Windows或ESXI。 IB网络一共是五层,从第一天起,IB就被设计为提供一个端到端的解决方案,改善和加速从物理层到上层的所有协议层。 IB协议于2000年由IBTA(InfiniBand Trade Association)提出,其规定了一... 阅读详情

InfiniBand Architecture是为大规模数据中心设计的软件定义网络架构,它的设计旨在实现最高效的数据中心互连基础设施。InfiniBand原生地支持SDN、Overlay和虚拟化等网络技术,是一种开放标准的高带宽、低时延、高可靠的网络互连。
🔎🔍InfiniBand和以太网的区别在于:
📢📢📢以太网使用以网络设备为中心的方法建立路由,主要面向低速网络;
InfiniBand在设计之初就致力于解决传统网络的缺陷,用软件定义的方法建立大规模且流量纯净的二层网络,不存在ARP广播机制等带来的广播风暴问题和组网限制。

📢📢📢以太网使用软件控制数据的传输,需要使用高性能CPU做数据包的处理;
InfiniBand链路层提供有序数据包传递和基于信用的流量控制,CPU占用可忽略不计。

📢📢📢在传统以太网应用架构中,应用程序不可以直接访问网络;
InfiniBand绕过操作系统内核创建应用程序间通信的直接通道,为应用程序提供延迟极低的消息传输服务。

InfiniBand技术规范由InfiniBand行业协会(IBTA)定义并推动在数据中心的广泛应用。IBTA成立于1999年,定义、维护并持续完善InfiniBand规范,同时负责商业InfiniBand产品的合规性和互操作性测试。 
相较于其他互连解决方案,IBTA通过制定并执行其路线图,在高性能通信和计算卸载方面更积极地推动了相关产品的开发,确保为数据中心设计最先进的基础设施。 
关于InfiniBand的设计理念和更多故事,比如InfiniBand网卡为什么叫HCA,InfiniBand软件接口。

🔎🔍InfiniBand的发展历史:
InfiniBand(也称为“无限带宽”,缩写为 IB)是一个用于高性能计算的计算机网络通信标准,它具有极高的吞吐量和极低的延迟,用于计算机与计算机之间的数据互连。InfiniBand 也用作服务器与存储系统之间的直接或交换互连,以及存储系统之间的互连。随着人工智能的兴起,它也是 GPU 服务器的首选网络互连技术。
🔎🔍我们来看下 InfiniBand 的发展历程:
1999 年,一家名为 InfiniBand Trade Association(IBTA)的组织发布了 InfiniBand 架构,该架构的目的是为了取代 PCI 总线,旨在提供一种高性能、低延迟的计算和存储互连技术。
2000年,InfiniBand架构规范的 1.0 版本正式发布。紧接着在 20021 年,首批 InfiniBand 产品问世,多家厂商也开始推出支持 InfiniBand 的产品,包括服务器、存储系统和网络设备等。
2003 年,InfiniBand 转向一个新的应用领域——计算机集群互联,并在当时的 TOP500 超级计算机中得到了广泛应用。
在接下来的几年中,InfiniBand 多次引入新的特性和改进,支持双倍带宽的 DDR(Double Date Rate)、远程直接内存访问和更好的虚拟化支持,这些新特性为高性能计算和存储系统提供了更多的灵活性和性能优势。
到 2019 年的 TOP500 超级计算机中,已经有 181 个采用了 InfiniBand 技术,当时的 Ethernet(以太网)仍然是主流。而到了 2015 年,InfiniBand 技术在 TOP500 超级计算机中的占比首次超过了50%,达到 51.4%。这标志着 InfiniBand 技术首次实现了对以太网技术的逆袭,成为超级计算机中最受欢迎的内部连接技术。

🔎🔍InfiniBand的架构:
InfiniBand 是处理器和 I/O 设备之间数据流的通信链路,支持多达 64,000 个可寻址设备。InfiniBand 架构 (IBA) 是一种行业标准规范,定义了用于互连服务器、通信基础设施、存储设备和嵌入式系统的点对点交换输入/输出框架。
InfiniBand的网络架构。
InfiniBand 具有普遍性、低延迟、高带宽和低管理成本,非常适合在单个连接中连接多个数据流(集群、通信、存储、管理),具有数千个互连节点。最小的完整 IBA 单元是子网,多个子网通过路由器连接起来形成一个大的 IBA 网络。
InfiniBand 系统由通道适配器、交换机、路由器、电缆和连接器组成。CA 分为主机通道适配器(HCA)和目标通道适配器(TCA)。IBA 交换机在原理上与其他标准网络交换机类似,但必须满足 InfiniBand 的高性能和低成本要求。HCA 是 IB 端节点(例如服务器或存储设备)连接到 IB 网络的设备点。TCA 是一种特殊形式的通道适配器,主要用于存储设备等嵌入式环境。

🔎🔍InfiniBand的分层架构:

InfiniBand 架构分为多个层,每个层彼此独立运行。InfiniBand 分为以下几层:物理层、链路层、网络层、传输层和上层。

🔊物理层:物理层服务于链路层并提供这两层之间的逻辑接口。物理层由端口信号连接器、物理连接(电和光)、硬件管理、电源管理、编码线等模块组成,
🔊链路层:链路层负责处理分组中链路数据的发送和接收,提供寻址、缓冲、流量控制、错误检测和数据交换等服务。服务质量(QoS)主要由这一层体现。
🔊网络层:网络层负责在 IBA 子网之间路由数据包,包括单播和多播操作。网络层不指定多协议路由(例如,非 IBA 类型上的 IBA 路由),也不指定原始数据包如何在 IBA 子网之间路由。
🔊传输层:每个 IBA 数据都包含一个传输头。传输头包含端节点执行指定操作所需的信息。通过操纵 QP,传输层的 IBA 通道适配器通信客户端形成“发送”工作队列和“接收”工作队列。
上层:上层协议和应用层负责处理更高级别的通信功能和应用需求。上层协议可以包括诸如TCP/IP(传输控制协议/互联网协议)、UDP(用户数据报协议)、MPI(消息传递接口)等常见的网络协议。它们利用底层提供的基础通信能力,通过InfiniBand网络进行数据传输和通信,用于实现应用程序之间的通信和数据交换。此外,上层还包括运行在 InfiniBand 网络上的应用程序。

🔎🔍InfiniBand的特点及优势:
InfiniBand 最突出的一个优势,就是率先引入了 RDMA (Remote Direct Memory Access)协议。RDMA 是一种绕过远程主机而访问其内存中数据的技术,解决网络传输中数据处理延迟而产生的一种远端内存直接访问技术。
在传统的 TCP/IP 网络通信中,数据发送方需要将数据进行多次内存拷贝,并经过一系列的网络协议的数据包处理工作;数据接收方在应用程序中处理数据前,也需要经过多次内存拷贝和一系列的网络协议的数据包处理工作。
而 RDMA 允许应用与网卡之间的直接数据读写,允许接收端直接从发送端的内存读取数据,RDMA 可以显著降低传输延迟,加快数据交换速度,并可以减轻 CPU 负载,释放 CPU 的计算能力。

🔎🔍除了 InfiniBand 对 RDMA 协议的支持,还有以下优势:
🔊低延迟:InfiniBand 网络以其极低的延迟而著称。RDMA 零拷贝网络减少了操作系统开销,使得数据能够在网络中快速移动,InfiniBand 网络延迟可达到 0.7 微秒。
🔊高带宽:InfiniBand 网络提供高带宽的数据传输能力。它通常支持数十Gb/s甚至更高的带宽,取决于网络设备和配置。高带宽使得节点之间可以以高速进行数据交换,适用于大规模数据传输、并行计算和存储系统等应用。
🔊可扩展性:IB网络具有出色的可扩展性,适用于构建大规模计算集群和数据中心。它支持多级拓扑结构,如全局互连网络、树状结构和扁平结构,可以根据应用需求和规模进行灵活配置和扩展。此外,IB网络还支持多个子网的互连,使得不同子网之间的节点可以进行通信和数据交换。这种可扩展性使得IB网络能够应对不断增长的计算和存储需求。
🔊高吞吐量:由于低延迟和高带宽的特性,IB网络能够实现高吞吐量的数据传输。它支持大规模数据流的并行传输,同时减少了中间处理和拷贝操作,提高了系统的整体性能。高吞吐量对于需要大规模数据共享和并行计算的应用非常重要,如科学模拟、大数据分析和机器学习。

ADOP带你了解:网络互连技术:InfiniBand和以太网的异同 InfiniBand(IB)和以太网(Ethernet)是两种不同的网络技术,各自在不同层次上应用。让我们深入了解它们的区别和特点。InfiniBand(IB)和以太网(Ethernet)是两种不同的网络技术,各自在不同层次上应用。让我们深入了解它们的区别和特点。概述是一种高速网络和输入/输出(I/O)技术,旨在连接数据中心和高性能计算(HPC)环境中的服务器、存储系统和其他计算设备。它具有高带宽、低延迟、可靠和灵活的数据传输功能。 阅读详情

相关推荐

InfiniBand(直译为“无限带宽”技术,缩写为IB)

每个处理器包含一个主机通道适配器(HCA),每个外设具有一个目标通道适配器(TCA)。,用于计算机与计算机之间的数据互连。InfiniBand也用作服务器与存储系统之间的直接或交换互连,以及存储系统之间的互连。已经设计了自己的Infiniband交换机单元和服务器适配芯片,用于自己的产品线和第三方。最初,IBTA的IB愿景是取代PCI的I/O,以太网的。截至2014年,它是超级计算机最常用的互连技术。的爆发,业界对投资这样一个意义深远的技术跳跃表现为犹豫不决。的计算机网络通信标准,它具有极高的。

weixin_40191861的博客 1369

白皮书:InfiniBand简介

原文链接:Introduction to InfiniBand 摘要 InfiniBand是一种功能强大的新架构,旨在支持Internet基础设施的 I/O 连接。 所有主要OEM服务器供应商都支持InfiniBand作为扩展服务器以及在服务器中创建下一代 I/O 互连标准的手段。 大批量工业标准 I/O互连首次扩展了传统“盒中”总线的作用。 InfiniBand 独一无二的提供“盒中”背板解决方...

lo_ong的博客 8718

Infiniband简介

Infiniband介绍 参考:InfiniBand Trade Association 一、基本概念 1、与传统网络区别 传统网络是以“网络”为中心的。操作系统是资源的拥有者并将资源抽象为服务,应用访问资源需要要向操作系统请求相应的服务(网络、存储等);infiniband是以应用为中心的(applicationcentric),它从应用的视角去分析解决IO问题及如何设计网络。其基本思想是提供简单易用的消息服务:控制消息与数据消息。应用可以直接访问消息服务而不需要经过操作系统,这是由于IB....

未冬生 1821

InfiniBand (IB)和 以太网 的区别

InfiniBand(IB)是一种专为高性能计算(HPC)设计的网络技术,提供极高带宽、超低延迟和 RDMA(远程直接内存访问)功能。超算集群(如天河、神威)云计算高性能节点数据中心的存储网络InfiniBand 是一种“速度极致”的高性能网络,它在 Oracle RAC 中承担心跳和缓存同步等关键任务,但也极度依赖物理连接质量,任何微小抖动都可能导致整个节点被踢出集群。

欢迎来到我的学习笔记薄 3236

InfiniBand(IB)快速上手

InfiniBand(直译为“无限带宽”技术,缩写为IB)是一个用于的计算机网络通信标准,它具有极高的和极低的,用于计算机与计算机之间的数据互连。InfiniBand也用作服务器与存储系统之间的直接或交换互连,以及存储系统之间的互连。1、IB是一类特殊的网卡,硬件上包括网卡,连接线,交换机都是由nvidia收购的mellanox定制的2、IB从字面理解就知道是超高带宽的连接技术,属于一种RDMA技术中的一种3、IB常用在智算场景,用于GPU间夸节点交换数据,可以将数据直接发送到IB卡;

m0_48594855的博客 6441

一种高性能计算和数据中心网络架构:InfiniBand(IB),低延迟、高带宽、可扩展性!

InfiniBand架构以其卓越的性能和低延迟的特性成为高性能计算和数据中心网络的首选解决方案。通过深入探讨InfiniBand的各个层次,包括物理层、链路层、网络层、传输层和上层协议,我们了解了其独特的设计和优势。在物理层,InfiniBand采用多种传输介质和硬件规格,包括电缆、光纤和连接器,以支持高带宽、低延迟的数据传输。在链路层,本地标识符(LID)和转发表的使用为数据包的定位和传输提供了关键支持。网络层的子网划分和子网管理器的角色确保了网络的灵活性和高效性。

网络技术联盟站 2978

InfiniBand 的前世今生

今年,以 ChatGPT 为代表的 AI 大模型强势崛起,而 ChatGPT 所使用的网络,正是 InfiniBand,这也让 InfiniBand 大火了起来。那么,到底什么是 InfiniBand 呢?下面,我们就来带你深入了解 InfiniBand。

github_36774378的博客 868

InfiniBand互连技术详解与展望

InfiniBand是一种高速的计算机网络通信标准,主要用于服务器和存储设备之间的连接,以及高性能计算(HPC)和数据中心领域。它支持多种数据传输速率,且具有低延迟、高带宽和高可靠性的特点。InfiniBand的核心设计目标是提供一种灵活、可靠、高速的数据通信方式,以满足不断增长的数据中心和HPC应用需求。InfiniBand协议栈是一个分层的架构,与OSI模型类似,包含了一系列的层次,每层具有定义明确的功能,以支持可靠和高性能的数据传输。协议栈由物理层、链路层、网络层、传输层和子网管理层构成。

weixin_42511373的博客 1456

Infiniband vs 以太网Ethernet 对比

参考 Infiniband 和 以太网Ethernet 对比_legend050709的专栏-优快云博客_ib网络跟以太网区别 什么是InfiniBand,它和以太网的区别在于什么? - 知乎

4118

Infiniband和以太网rdma技术

主要介绍了在数据中心infiband和以太网等技术的分析以及应用

瑞萨 RL78 开发环境实战:从 CS+ for CC 到 e² studio 高效开发

本文详细介绍了瑞萨RL78单片机开发环境的选择与配置,对比分析了CS+ for CC和e² studio的特点及适用场景。内容涵盖环境安装、工程创建、调试技巧、外设驱动开发和低功耗设计等实战经验,为开发者提供全面的RL78入门指南,帮助快速上手并高效开发。

4k5l6j7h8的博客 249

InfiniBand(IB网络交换机)

NVIDIA Quantum-2 是业界出色的交换机平台,实现功耗和密度的平衡,支持 NDR 400Gb/s 的 InfiniBand 吞吐,能够为 AI 开发者和科研人员提供超高的网络性能,助其应对全球极具挑战性的问题。NVIDIA Quantum-2 是业界出色的交换机平台,实现功耗和密度的平衡,支持 NDR 400Gb/s 的 InfiniBand 吞吐,能够为 AI 开发者和科研人员提供超高的网络性能,助其应对全球极具挑战性的问题。集合通信描述了一组通信端点中的所有成员都参与的通信模式。

Pterosaur 8902

基因树构建全流程:从OrthoFinder到iTOL的保姆级教程(附兰科植物案例)

本文提供了一份从OrthoFinder到iTOL的基因树构建全流程保姆级教程。详细解析了利用OrthoFinder构建物种树、IQ-TREE构建无根基因树、Notung进行树调和生根,以及最终在iTOL中实现专业可视化的每一步操作与实战经验,并以兰科植物NB-ARC基因家族为例进行演示,帮助研究者系统掌握基因树分析方法。

tequila的博客 525

Infiniband/RDMA技术梳理

主要讲解infiniband高速网络的知识,讲解mellanox ib驱动安装以及驱动相关配置

LonelyLinguist的博客 4836

支付系统保证可靠性的秘诀 ----- 订单的补偿和补单

文章目录WHAT? 前言WHY? 为什么要用多级缓存?HOW 怎么做?方案 版本1:数据库存储专线配置通过优先级进行动态上下线方案 版本1 劣势:方案 版本2 :本地缓存替代数据库方案 版本2 劣势:方案 版本3:分布式缓存做自动补偿方案 版本3 总结:Where 分布式多级缓存还能用在哪些地方?总结 WHAT? 前言 刚入职场的时候觉得支付宝等第三方支付系统好强大,要保证这么多的交易不能错,也不能重复还要保证正确的扣钱,直到后面接触订单系统以及第三方支付公司的核心交易系统后才真正窥探到了支付系统的核心

boboaisisi的专栏 3535

手机摄影新宠:In-line Hardware EIS如何让你的4K视频稳如鸡头(附实测对比)

本文深入解析了手机摄影中的In-line Hardware EIS(硬件级行内电子图像稳定)技术。通过对比传统软件EIS,阐述了其通过硬件管道实时处理实现极低延迟、减少画面裁切和有效抑制果冻效应的核心优势,并结合4K视频的日夜间实测,展示了该技术如何让手持拍摄的视频“稳如鸡头”,显著提升创作体验与成片质量。

tree的博客 998

关于InfiniBand几个基本知识点解释

IP网络协议如TCP/IP,具有转发丢失数据包的特性,网络不良时要不断地确认与重发,基于这些协议的通信也会因此变慢,极大地影响了性能。与之相比,IB使用基于信任的、流控制...

架构师技术联盟 1万+

HFSS螺旋线圈的优化设计与高效仿真实践

本文详细介绍了HFSS螺旋线圈的优化设计与高效仿真实践,涵盖核心参数设置、参数化建模、仿真加速技巧及结果分析。通过HFSS软件实现螺旋线圈的高效仿真,特别适用于无线充电和RFID系统设计,提升设计效率与性能验证准确性。

weixin_30235225的博客 446

InfiniBand简介

一.什么是infiniband InfiniBand架构是一种支持多并发链接的“转换线缆”技术,它是新一代服务器硬件平台的I/O标准。由于它具有高带宽、低延时、 高可扩展性的特点,它非常适用于服务器与服务器(比如复制,分布式工作等),服务器和存储设备(比如SAN和直接存储附件)以及服务器和网络之间(比如LAN, WANs和the Internet)的通信 。 二.Infiniband产生的原因 随着CPU性能的飞速发展,I/O系统的性能成为制约服务器性能的瓶颈。于是人们开始重新审视使用了十几年的PCI

maopig的专栏 4474

《拉依达的嵌入式\驱动面试宝典》—计算机硬件篇(一)

《拉依达的嵌入式\驱动面试宝典》 整合了所有我认为可能遇到的技术面试问题。所有问题及其答案均是我个人学习后查阅资料总结,每个回答都做了仔细的分析,在嵌入式及其驱动面试相关问题解析做到全网独一无二。学习或者转行到嵌入式、驱动开发领域学习的不二之选

拉依达不拉跨的博客 769

RK3588开发笔记-mipi csi接口imx415摄像头调试记录

摘要:本文详细介绍了RK3588开发板适配SONY IMX415 MIPI CSI摄像头的调试过程。从硬件环境准备(包括RK3588核心板、IMX415模块连接及测试工具)、软件环境配置(Linux 5.10内核、驱动状态确认),到设备树关键配置(MIPI链路、GPIO引脚、电源域等)都进行了详细说明。调试过程中通过dmesg日志、media-ctl拓扑分析等工具验证了摄像头驱动加载和图像采集功能。最终实现了800万像素高清图像采集,总结了硬件连接验证、信号完整性优化等关键经验,为类似MIPI摄像头调试提供

flypig has a dream! 886

InfiniBand(无限带宽)详解

是一种高性能、低延迟的互连技术,专为数据中心、超级计算和存储网络设计,旨在替代传统以太网和光纤通道。超低延迟:端到端延迟可低至0.5微秒(RDMA支持)。高带宽:NDR(Next Data Rate)标准支持400 Gbps(单端口)传输速率。远程直接内存访问(RDMA):绕过操作系统内核,直接访问远程主机内存。可扩展性:支持数万个节点互联(基于交换机的Fat-Tree拓扑)。1. 物理接口类型接口类型传输介质速率(单端口)应用场景铜缆/光纤(多模/单模)

SDJ_success的博客 2715

微信支付接口「系统繁忙 SYSTEM_ERROR」/「文件不存在」报错分析与解决方案 接口开发实现SDK

微信支付的“平台证书模式”只有5年的有效期,过期后微信支付将不再签发新的平台证书,转而要求开发者使用“微信支付公钥”来处理敏感信息加密及回调签名验证。然而,由于以下几点原因,许多开发者在调用 获取平台证书。尽管微信支付在技术迭代上有其必要性,但报错设计过于不友好。诸如“系统繁忙”这样的提示很难直接关联到平台证书失效或公钥切换问题。这样的信息表达,开发者不仅看不懂,还需要花费大量时间分析排查,非常影响效率。

代码简单说 Vue、JAVA、PHP、Node.js 熟练运用,接口、架构、性能全搞定。 789

InfiniBand(IB)网络解决方案

全称是Remote Direct Memory Access,即远程直接内存访问,是一种用于高性能网络通信的技术。RDMA技术可以让计算机直接访问远程计算机的内存,而无需在本地和远程计算机之间进行数据复制。相比传统的网络通信方式,RDMA技术具有更低的延迟、更高的带宽和更低的CPU利用率等优点,可以显著提高网络通信的性能和效率。目前支持RDMA的网络协议主要有:InfiniBand(IB)、ROCE、iWARP。

老网工的岁月独白 1万+

温度PID控制PLC程序

温度PID稳定控制程序,适用于欧姆龙PLC,对其他PLC也具有很大参考价值

Probability and Statistics - 4th edition

Probability and Statistics - 4th edition

Infiniband 和 以太网Ethernet 对比

目录概述对比Ethernetinfiniband带宽时延可靠性组网方式类比infiniband 的缺点infiniband 的应用场景参考 概述 以前IB特有的技术比如RDMA,协议卸载等,现在已经也可以在以太网上用上了,此类差异并不本质,因此要比就要从二层及以下进行比较,就可以清楚看到这两种网络的差异。 对比 Ethernet 以太网设计初衷是,多个不同的系统,如何让他们之间流畅的进行信息交换?这是一种典型的network,它的设计中优先考虑的是兼容性与分布式。 infiniband InfiniBand

legend050709的专栏 1万+

老版QQ原生表情gif动态

这是老版的QQ表情,不过全是动态的的,Windows照片查看器是不会动的,可以右击用浏览器打开查看,再说一遍是老版的,只是分享给宁愿用老版也要动态的人。

InfiniBand高性能网络设计概述

InfiniBand是目前发展最快的高速互连网络技术之一,具有高带宽、低延迟和易扩展的特点。通过研究和实践,对InfiniBand技术的数据包、数据传输、层次结构、与以太网技术的对比、交换机制、发展愿景等进行了全面探索。1. 引言随着中央处理器(CPU)运算能力的极速增长,高速互连网络HSI (High Speed Interconnection)已成为高性能计算机研制的关键所在。HSI 是改善计...

关注微信公众号【开源Linux】,后台回复『10T』,领取10T学习资源大放送,涵盖Linux、虚拟化、容器、云计算、网络、Python、Go等书籍和视频 1587

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

上一篇: InfiniBand:高速数据传输的不二之选
下一篇: ADOP带您科普什么是单纤双向BiDi光模块?一根光纤,双向通信:单纤双向模块的革命性技术。
ADOP_BitRate
博客等级 码龄3年 418粉丝 26原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值