nio ByteBuffer和netty ByteBuf

Java NIO ByteBuffer与Netty ByteBuf对比分析
最新推荐文章于 2025-02-12 07:58:58 发布
原创 最新推荐文章于 2025-02-12 07:58:58 发布 · 317 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#netty

本文探讨了Java NIO ByteBuffer的固定大小限制及其手动管理指针带来的问题，强调了其在复用和扩展性上的不足。同时，介绍了Netty的ByteBuf，它使用双指针策略提高了读写效率，并支持动态管理已读和未读区域，通过discardReadBytes操作优化内存使用。

1、nio ByteBuffer的缺陷
ByteBuffer是Java NIO原生搞的，就是搞一个数据缓冲区，把数据弄到缓冲区里操作也是针对缓冲区来的，这块缓冲区内存是可以复用的，下次有数据来的时候，复用他就可以了，不要老是搞频繁回收的短期对象

ByteBuffer数据长度是固定的，一旦分配，就不能动态扩容和收缩，所以在复用的时候，如果要是超出这个范围了，就没法复用了，而且他只有一个标识位置的指针，每次读写，都要手工调整指针位置，非常的麻烦，一旦程序没写好，直接会导致数据错乱的问题，对于一些高级特性还得扩展实现才行

2、netty ByteBuf读写指针原理分析
两个指针，readerIndex和writerIndex，，刚开始都是0，capacity是可以写入的字节数量，写入数据以后，writerIndex增加n个字节，此时可读取的数据就是readerIndex到writerIndex，剩余可以写入的就是writerIndex到capacity

读取m个字节后，readerIndex会增加m个字节，这个时候0到readerIndex就被锁住了，没法读写，readerIndex是不能超过writerIndex的，有一个discardReadBytes的操作，释放掉0到readerIndex的空间，让readerIndex归零

java-nio-缓冲区ByteBuffer、Netty的ByteBuf和MappedByteBuffer的使用
2010yhh
03-18 1288
java-nio-缓冲区ByteBuffer、Netty的ByteBuf和MappedByteBuffer的使用 文章目录java-nio-缓冲区ByteBuffer、Netty的ByteBuf和MappedByteBuffer的使用1.ByteBuffer2.MappedByteBuffer3 Netty的ByteBuf4.测试 环境 idea2018，jdk1.8 记录一下缓冲区ByteB...
Netty ByteBuf 分配 | 池化复用 、直接内存
happycao123的博客
11-06 1133
在IO密集型业务场景下，可能涉及大量ByteBuf分配，这时我们需 要考虑会不会产生OOM 会不会出现频繁GC 会不会内存泄露
Netty ByteBuf与NIO ByteBuffer
duanduan_l的博客
03-20 3751
Netty中引入了ByteBuf，相较于NIO中的ByteBuffer有了一下改进，使得网络编程更加简便。 ByteBuffer的缺点 在NIO的Buffer中，我们已经知道Buffer有七种，最常用的是ByteBuffer，而ByteBuffer也有一些局限性： ByteBuffer的长度是固定的，一旦分配完成就不能进行扩容和收缩，当需要操作的对象大于Buffer的容量时...
Netty - Bytebuf（1）
iteye_20566的博客
04-18 229
Netty - ByteBuf 1.1 原生的ByteBuffer Java NIO的ByteBuffer被称为字节缓冲区。此类针对字节缓冲区定义了以下六类操作： 读写单个字节的绝对和相对 get 和 put 方法； 将此缓冲区的连续字节序列传输到数组中的相对批量 get 方法； 将 byte 数组或其他字节缓冲区中的连续字节序列传输到此缓冲区的相对批量 put 方法； 读写其他基本...
NIO之ByteBuffer
Android菜鸟的专栏
04-28 1365
前言 ByteBuffer，顾名思义，它表示字节缓冲区。一般我们在代码中使用字节的时候一般用字节数组，即byte[]，但是使byte[]的方式效率不高，而使用ByteBuffer的方式来操作数组效率是比较高的，具体描述可以查看jdk文档声明，可以查看ByteBuffer类，以及它的父类Buffer的文档声明，可以详细的了解它们的功能，它们是nio包下面的，nio就是native io，所以效率是比较高的。ByteBuffer除了效率高之外，也提供了一些比较好用的方法，比如writeInt、getInt、pu
NIO入门篇——ByteBuffer
weixin_52315708的博客
06-29 308
直接内存，读写效率高（少一次拷贝），不会受到GC的影响，分配的效率低。：分配的是是java堆内存，读写效率低，受到GC的影响。position移动到mark()标记的下标去；ByteBuffer分配内存，也可以使用*：压缩已有的空间，从写入到的位置继续写。ByteBuffer有以下重要属性。：从position 位置开始读；position 移动到0下标；：标记当前position 下标。可以使用 allocate。rewind()：把。
Netty的ByteBuf介绍
叶知秋
11-08 249
Netty的ByteBuf缓冲区实现地比Java本身的ByteBuffer更加灵活，方便。它的类结构也比较复杂，这里只说ByteBuf核心的几个要点。 1. 最重要的是要理解为什么要ByteBuf这个组件。主要还是因为基于select / poll / epoll这种IO多路复用技术的NIO是非阻塞同步IO的模型，由于是同步IO，需要用户线程自己来处理IO的读写，由于是非阻塞的，每次调用rea...
Netty 中的 ByteBuf 是什么，它和 Java NIO 的 ByteBuffer 有什么区别？
最新发布
smart_an的专栏
02-12 1297
作者简介：大家好，我是码炫码哥，前中兴通讯、美团架构师，现任某互联网公司CTO，兼职码炫课堂主讲源码系列专题代表作：《jdk源码&多线程&高并发》，《深入tomcat源码解析》，《深入netty源码解析》，《深入dubbo源码解析》，《深入springboot源码解析》，《深入spring源码解析》，《深入redis源码解析》等联系qq：184480602，加我进群，大家一起学习，一起进步，一起对抗互联网寒冬。
Netty ByteBuf 详解：高性能数据缓冲区的全面介绍
微笑听雨
06-24 3423
Netty的ByteBuf是Netty的高性能数据缓冲区，是用于在网络应用中高效地处理字节的基础类。它是Java标准的java.nio.ByteBuffer的一个增强版本，具有更高的灵活性和性能。下面详细介绍ByteBuf的主要功能和使用方法。
Netty学习——源码篇1 Netty之Bytebuf
geminigoth的博客
03-13 2305
弊端一：网络传输方式存在弊端。传统的RPC框架或者基于RMI等方式的远程服务调用都采用BIO，当客户端的并发压力或网络延时增大的时候，BIO会因频繁“wait”导致I/O线程经常出现阻塞的情况，由于线程本身无法高效的工作，I/O处理能力自然就会下降。下面通过BIO通信模型看一下BIO通信的弊端。
NIO——ByteBuffer的使用
weixin_42789698的博客
11-23 134
ByteBuffer的使用     在NIO中，buffer是数据的载体，是用来存放数据的，最常用的就是ByteBuffer package com.gykalc.buffer; import org.junit.Test; import java.io.UnsupportedEncodingException; import java.nio.ByteBuffer; /** * 知识点： * 1、缓冲区是NIO通信时，数据的载体 * 2、开发中，常用的缓
java nio缓冲区源码_Netty系列源码篇之ByteBuf缓冲区（一）
weixin_39624360的博客
03-04 179
我们在进行数据传输的时候经常用的缓冲区，学习ByteBuf前我们先看下java NIO自带的ByteBuffer。第一：ByteBuffer源码分析ByteBuffer内部字段byte[] buff 即内部用于缓存的数组。position 当前读取的位置。mark 为某一读过的位置做标记，便于某些时候回退到该位置。capacity 初始化时候的容量。limit 读写的上限，limit<=ca...
20190826_Netty ByteBuf与NIO ByteBuffer
c412745699的博客
08-26 361
Netty中使用了ByteBuf作为数据容器，它相对于NIO的ByteBuffer做了不少改进。下面我们分别对它们进行介绍。 ByteBuffer NIO为New IO, 区别于传统的Java IO。 Java Io 最核心的概念是流（stream)，是面向流的编程。 java的流要么是输入流，要么是输出流，不可能同时包含两个。而java nio 有3个核心的概念。 selector, chan...
java nio中的ByteBuffer扩展
cz1803472613的博客
04-16 883
在jdk1.4之前对于输入输出只能使用InPutStream和outPutSream这类传统io模型,在jdk1.4之后新增了nio，什么是nio？nio是new input/output 的简称，nio的效率要比传统io效率高，主要原因就是nio利用了系统底层的零拷贝技术和多路复用技术。
详解ByteBuf缓冲区
学而不思则忘
05-30 3716
1. ByteBuf优点 与Java NIO的Byte Buffer相比，ByteBuf的优势如下： Pooling池化，减少了内存复制和GC，提升了效率 复合缓冲区类型，支持零复制 不需要调用flip()方法去切换读/写模式 扩展性良好 可以自定义缓冲区类型 读取和写入索引分开 方法的链式调用 可以进行引用计数，方便重复使用 2. ByteBuf的逻辑部分 ByteBuf是一个字节容器，内部是一个字节数组。从逻辑上来分，字节容器内部可以分为四个部分。 第一个部分是已用字节，表示已经使用完的废弃的无
详解Netty ByteBuffer的实现机制和原理
林风自在
10-23 854
从源码走了一下Netty的ByteBuffer才知道有这么多有意思的设计的点
5、NIO-Bytebuffer内存结构
爱欧米
11-09 592
因为文件读写、网络通讯等数据都是以流的形式一点点到目的地的,所以需要一个缓冲区承接流.缓冲区(Buffer)就是在内存中预留指定大小的存储空间用来对输入/输出(I/O)的数据作临时存储，这部分预留的内存空间就叫做缓冲区.举个简单的例子，比如A地有1w块砖要搬到B地,由于没有工具（缓冲区）,我们一次只能搬一本，那么就要搬1w次（实际读写次数),如果A，B两地距离很远的话（IO性能消耗），那么性能消耗将会很大,但是要是此时我们有辆大卡车（缓冲区），一次可运5000本，那么2次就够了,相比之前，性能肯定是大大提高
Netty之ByteBuff
littleschemer的博客
04-15 1241
事实上，jdk自1.4版本，就已经提供了nio的ByteBuffer，用于在Java程序中操作原始数据。由于ByteBuffer自身存的局限性，Netty底层采用了类似功能的ByteBuf，并提供了众多方便的API。
Netty如何高效接收网络数据？一文聊透ByteBuffer动态自适应扩缩容机制
bin的技术小屋
02-23 1177
本文介绍了Netty如何高效接收网络连接全流程并深入剖析了ByteBuffer动态自适应扩缩容机制。阐述了为什么会使用堆外内存来为ByteBuffer分配内存，由此引出了Netty的内存池PooledByteBufAllocator
深入理解 Netty ByteBuf 的零拷贝机制
通过 Unpooled.wrappedBuffer() 方法，开发者可以将已有的 byte[] 数组、Java NIO 的 ByteBuffer 或其他 ByteBuf 实例包装成一个新的 ByteBuf 对象，这个过程不会复制原始数据，仅创建一个视图（view）指向原数据...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值