NIO学习笔记

最新推荐文章于 2022-04-20 18:03:39 发布
最新推荐文章于 2022-04-20 18:03:39 发布
阅读量168 收藏
点赞数
分类专栏： NIO
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/lu322313/article/details/104805072
版权

1 简介

Java NIO是从java 1.4版本开始引入的一个新的IO API

  • 目的—替代标准版的Java IO API

NIO与原来的IO有同样的作用和目的,但是使用方式完全不同

  • NIO支持面向缓冲区的,基于通道的操作
  • NIO以更高效的方式进行文件的读写操作

2 与IO的主要区别

IO

IONIO
面向流(Stream Oriented)面向缓冲区(Buffer Oriented)
阻塞IO(Blocking IO)非阻塞IO(Non Blocking IO)
无选择器(Selectors)

3 通道和缓冲区

NIO系统的核心在于:

  • 通道(Channel)—打开到IO设置(例如:文件, 套接字)连接
  • 缓冲区(Buffer)—一个用于特定基本数据类型的容器
    由java.nio包定义,所有缓冲区都是Buffer抽象类的子类

若需要使用NIO系统

  • 需要获取用于连接IO设备的通道以及用于容纳数据的缓冲区.
  • 然后操作缓冲区,对数据进行处理

简而言之, Channel负责传输,Buffer负责存储

3.1 缓冲区

缓冲区(Buffer):在Java NIO中负责数据的存取. 缓冲区就是数组,用于存储不同数据类型的数据

根据数据类型不同(Boolean除外),提供了相应的缓冲区

  • ByteBuffer
  • CharBuffer
  • ShortBuffer
  • IntBuffer
  • LongBuffer
  • FloatBuffer
  • DoubleBuffer

上述缓冲区的管理方式几乎一致,通过allocate获取缓冲区

缓冲区存取数据的两个核心方法

  • put()—存入数据到缓冲区中
  • get()—获取缓冲区中的数据

缓冲区中的四个核心属性

  • capacity—容量,标识缓冲区最大存储数据的容量,一旦声明就不能改变
  • limit—界限,表示缓冲区中可以操作数据的大小limit后面的数据不能读写
  • position—位置,表示缓冲区中正在操作数据的位置
    position <= limit <= capacity
  • mark—标记, 表示记录当前position的位置,可以通过reset()恢复到mark位置
    0 <= mark <= position <= capacity

3.2 直接缓冲区与非直接缓冲区

  • 非直接缓冲区—通过allocate()方法分配缓冲区,将缓冲区建立在JVM的内存中
  • 直接缓冲区—通过allocateDirect()方法分配直接缓冲区,将缓冲区建立在物理内存中,可以提高效率

字节缓冲区要么是直接的,要么是非直接的. 如果为直接字节缓冲区,则JVM会尽最大努力直接在此缓冲区上执行本机的I/O操作

也就是说,在每次调用基础操作系统的一个本机I/O操作之前(或之后),虚拟机都会尽量避免将缓冲区中的内容复制到中间缓冲区中(或从中间缓冲区中复制内容)

直接字节缓冲区可以通过调用此类的allocateDirect()方法来创建. 此方法返回的缓冲区进行分配和取消分配所需成本通常高于非直接缓冲区. 直接缓冲区的内容可以在主流在常规的垃圾回收器之外. 因此, 他们对应用程序的内容需求量造成的影响可能并不明显. 所以, 建议将直接缓冲区主要分配给哪些容易受基础系统的本机I/O操作影响的大型, 持久的缓冲区.

一般情况下,最好仅在直接缓冲区能在程序性能方面带来明显好处时分配它们

直接缓冲区还可以通过FileChannel的map()方法将文件区域直接映射到内存中来创建. 该方法返回MappedByteBuffer.

Java平台的实现有助于通过JNI从本机代码创建直接字节缓冲区.

如果以上这些缓冲区中某个缓冲区实例指的是不可用访问的内存区域,则试图访问该区域不会更改该缓冲区的内容.并且将会在访问期间或稍后的某个时间导致抛出不确定的异常

字节缓冲区是直接缓冲区还是非直接缓冲区可以通过其isDirect()方法来确定.提供此方法是为了能够在性能关键代码中执行显示缓冲区管理

如下图所示
非直接缓冲区

直接缓冲区

3.3 通道

通道(Channel)—由java.nio.channels包定义的
Channel表示IO源与目标打开的连接

用于源节点和目标节点的连接, 在Java NIO中负责缓冲区中的数据传输. Channel本身不存储数据,因此需要配合缓冲区进行传输

Channel类似于传统的"流", 只不过Channel本身不能直接访问数据,Channel只能与Buffer进行交互

CPU直接处理I/O请求
CPU直接处理I/O请求
通过DMA—直接存储器处理IO请求
通过DMA---直接存储器处理IO请求
通过通道处理IO请求
通过通道处理IO请求

3.3.1 主要实现类

java.nio.channels.Channel接口

  • FileChannel—文件传输
  • SocketChannel—网络传输(客户端)
  • ServerSocketChannel—网络传输(服务端)
    -DatagramChannel—网络传输, UDP

获取通道

  1. Java针对支持通道的类提供了getChannel()方法
  • 本地IO
    • FileInputStream/FileOutputStream
    • RandomAccessFile
  • 网络IO
    • Socket
    • ServerSocket
    • DatagramSocket
  1. 在JDK 1.7中的NIO针对各个通道提供了静态方法open()
  2. 在JDK 1.7中的Files工具类的newByteChannel()
  3. 通道之间的数据传输
    • transferFrom
    • transferTo
      两者也是通过直接缓冲区传递数据

3.4 分散(Scatter)和聚集(Gather)

  • 分散读取Scatter Reads是指从Channel中读取的数据分散到各个Buffer中

注意: 按照缓冲区的顺序,从Channel中读取的数据依次将Buffer填满

  • 聚集写入Gather Writes是指将多个Buffer中的数据"聚集"到Channel

注意: 按照缓冲区的顺序,写入position和limit之间的数据到Channel

3.5.字符集

Charset

  • 编码—字符串 —> 字节数组
  • 解码—字节数组 —>字符串

4 NIO非阻塞式

4.1 阻塞与非阻塞

传统的的IO流都是阻塞的. 也就是说,当一个线程调用read()或write()时,该线程被阻塞, 直到有一些数据被读取或写入, 该线程在此期间不能执行其他任务.

因此, 在完成网络通信进行IO操作时, 由于线程会阻塞, 所以服务器补习为每个客户端都提供一个独立的线程进行处理, 当服务端需要处理大量客户端时, 性能急剧下降

Java NIO是非阻塞式的. 当线程从某通道进行读写数据时, 若没有数据可用时, 该线程可以进行其他任务, 线程通常将非阻塞IO的空闲时间用于在其他通道上执行IO操作, 所以单独的线程可以管理多个输入和输出通道

因此, NIO可以让服务端使用一个或有限几个线程来同时处理连接到服务器端的所有客户端

4.2 NIO

使用NIO完成网络通信的三个核心

  • 通道(Channel)—负责连接
  • 缓冲区(Buffer)—负责数据的存储
  • 选择器(Selector)—是SelectableChannel的多路复用器
    用于监控SelectableChannel的IO状况

4.3 选择器

选择器(Selector)是SelectableChannel对象的多路复用器

Selector可以同时监控多个SelectableChannel的状态, 也就是说, 利用Selector可以使一个单独的线程管理多个Channel. Selector是非阻塞IO的核心

SelectableChannel的结构如下:

  • SelectableChannel
    • AbstractSelectableChannel
      • SocketChannel
      • ServerSocketChannel
      • DatagramChannel

4.3.1 SelectionKey

  • 当调用register(Selector sel, int pos) 将通道注册选择器时, 选择器对通道的监听事件,需要通过第二个参数ops指定

  • 可以监听的事件类型(可使用SelectionKey的四个常量表示)

    • 读—SelectionKey.OP_READ
    • 写—SelectionKey.OP_WRITE
    • 连接—SelectionKey.OP_CONNECT
    • 接收—SelectionKey.OP_ACCEPT

若注册时不止监听一个事件,则可以使用"位或"操作符连接

Java NIO学习笔记（全面详解）
qq_45774645的博客
03-07 1276
NIO 中的 N 可以理解为 Non-blocking，不单纯是 New，是解决高并发、I/O高性能的有效方式。 Java NIO是Java1.4之后推出来的一套IO接口，NIO提供了一种完全不同的操作方式， NIO支持面向缓冲区的、基于通道的IO操作。 新增了许多用于处理输入输出的类，这些类都被放在java.nio包及子包下，并且对原java.io包中的很多类进行改写，新增了满足NIO的功能。
NIO 学习笔记
不积跬步无以至千里
05-28 359
NIO 学习笔记1. 缓冲区-Buffer1.1 概述1.2 基本属性1.3 创建缓冲区1.4 复制缓冲区1.5 缓冲区的读取1.6 常见的方法1.7 字节缓冲区1.7.1 字节顺序1.7.2 直接缓冲区1.7.3 内存映射缓冲区1.8 总结2 通道-Channel2.1 打开通道2.2 使用通道2.3 关闭通道2.4 Scatter/Gather2.5 文件通道2.6 通道直接数据传输2.7 S...
java NIO学习笔记上(尚硅谷)
noob9527的博客
10-14 369
1、java NIO概述 Java NIO（New IO 或 Non Blocking IO）是从 Java 1.4 版本开始引入的一个新的 IO API，可以替代标准的 Java IO API。NIO 支持面向缓冲区的、基于通道的 IO 操 作。NIO 将以更加高效的方式进行文件的读写操作。 1.1阻塞IO 通常在进行同步 I/O 操作时，如果读取数据，代码会阻塞直至有可供读取的数据。同 样，写入调用将会阻塞直至数据能够写入。传统的 Server/Client 模式会基于 TPR （Thread per
Java NIO学习笔记
KongKong世界
02-21 306
印象中，我对于NIO的学习，最早是来源于一次面试，面试官问我：“可不可以讲一下Netty的线程模型？”。当然了，这个问题没答上来，于是回去后就开始搜Netty的资料，了解Netty是干什么的，用在哪些场景，Netty的原理和模型是什么… 当我查了大量的博客和文章之后，发现还是很模糊，就像是知道计算机是怎么用的，但是为什么可以这么用，是怎么做到的，还是没有很清晰形...
java NIO学习笔记
1853
04-20 332
java NIO学习笔记 全文件读取 FileInputStream in=new FileInputStream("path.jpg"); // 根据文件的字节长度，创建一个等长的数组 byte[] datas=new byte[in.available()]; // 把文件内容完整的读取到数组中 in.read(datas,0,datas.length); ...
nio学习笔记
开心就好
11-28 5957
maven依赖： <dependency> <groupId>io.netty</groupId> <artifactId>netty-all</artifactId> <version&g...
JAVA NIO学习笔记.docx
09-02
Java NIO（New Input/Output）是Java标准库在JDK 1.4引入的一组新的I/O API，它提供了一种不同于传统IO的高效、非阻塞的I/O操作方式。NIO的核心概念包括Channel、Buffer和Selector，它们共同构建了一个与操作系统...
javaNIO学习笔记
08-22
### Java NIO 学习笔记 #### 一、概述 Java NIO (Non-Blocking IO，也称为 Java New IO)，是 Java 对传统 IO 模型的一次重大改进，旨在提高程序处理大量并发连接的能力。NIO 的核心组件包括 Channels、Buffers 和 ...
javaNIO学习笔记（csdn）————程序.pdf
12-01
Java NIO，全称Non-Blocking Input/Output，是非阻塞式输入输出，它是Java从1.4版本开始引入的一种新的I/O模型，为Java程序员提供了处理I/O操作的新方式。NIO的主要特点是其能够使Java程序以更有效的方式处理I/O流，...
ASP技术访问WEB数据库.docx
05-02
ASP技术访问WEB数据库.docx
2010-2019年上市公司排污费数据.xlsx
最新发布
05-02
2010-2019年上市公司排污费数据 1、时间：2010-2019年 2、来源：上市公司披露BG 3、指标：代码、日期、名称、本期支出 4、范围：417家上市公司 5、相关研究：胡珺,宋献中,王红建.非正式制度、家乡认同与企业环境治理
六轴桌面机械臂上位机与下位机源码解析与实现
05-02
内容概要：本文详细介绍了六轴桌面机械臂的上位机（PC）和下位机（单片机）源码实现及其应用场景。上位机使用Python编写，通过pyserial库进行串口通信，实现了用户交互和指令发送功能；下位机则使用Arduino平台，通过C/C++语言编写代码，实现了机械臂的动作控制。文中不仅展示了基本的通信协议和控制逻辑，还深入探讨了逆运动学计算、PID控制、数据同步等问题，并提供了多个实用的代码片段和调试经验。 适合人群：对机器人技术和嵌入式开发感兴趣的开发者，尤其是有一定编程基础和技术背景的人群。 使用场景及目标：适用于六轴桌面机械臂的开发和调试，帮助读者理解上下位机的协同工作原理，掌握机械臂控制的关键技术，如串口通信、逆运动学、PID调节等。 其他说明：文章强调了实际开发中的注意事项和常见问题，如数据同步、指令校验、运动规划等，并提供了一些优化建议和解决方案。此外，还提到了系统的扩展性和安全性措施，如限位保护和扩展接口的设计。
青藏高原降水水汽来源模拟数据集（1998-2018）
05-02
青藏高原降水的水汽来源及输送机制一直是国际水文气候学界关注的热点问题。由于高原地面观测站数量有限，且分布极不均匀，从而导致降水溯源存在很大不确定性。作者通过引入卫星降水数据来弥补站点观测降水的不足，从而对高原整体降水的水汽来源进行模拟性评估。作者通过1998-2018年间水汽追踪数值模型模拟高原整体降水的水汽来源，模型使用ERA-Interim再分析资料、TRMM卫星降水和GLDAS OAFlux蒸发作为数据驱动，并设置对比实验进行验证，最终生成高原整体降水的水汽来源月尺度数据。数据集内容包括：（1）青藏高原范围；（2）高原1998-2018年逐月降水水汽贡献数据，空间分辨率为1°×1°，单位：mm/mon；（3）高原1998-2018年逐月降水量。数据集存储为.nc、.shp和.xlsx格式，由8个数据文件组成，数据量为55 MB（压缩为1个文件，40.9 MB）。基于该数据集的分析研究成果已发表在《Environmental Research Letters》2020年15卷。Zhang, C. Moisture source assessment and the varying characteristics for the Tibetan Plateau precipitation using TRMM [J]. Environmental Research Letters, 2020, 15(10): 104003.
Motorcad设计案例：内转子式永磁同步电机的高功率密度与强大过载能力，电磁场计算解析
05-02
内容概要：本文详细介绍了利用MotorCAD进行32极36槽内转子永磁同步电机的设计过程，涵盖电磁场计算、极槽配合选择、绕组设计、磁钢布局、冷却系统设计等方面。通过分数槽配置、双层短距绕组、V型磁钢布局以及高效的冷却系统，实现了70kW输出、525rpm转速、2.5倍过载能力和高达5kW/kg的功率密度。文中还讨论了具体的参数设置及其背后的物理意义，如极距、绕组因数、磁钢涡流损耗控制等。 适合人群：从事电机设计的专业工程师和技术人员，尤其是对高功率密度和高性能电机感兴趣的读者。 使用场景及目标：适用于电动工程机械等需要短时爆发力的应用场合，旨在提高电机的功率密度和过载能力，同时确保高效稳定运行。 其他说明：文章提供了详细的参数配置代码片段，便于读者理解和复现设计过程。此外，还分享了一些实用的设计经验和优化技巧，如磁钢分段设计、转子冲片造型等。
苏苏源码-python010-python-网络课程在线学习平台.zip
05-02
标题Python网络课程在线学习平台研究AI更换标题第1章引言介绍Python网络课程在线学习平台的研究背景、意义、国内外现状和研究方法。1.1研究背景与意义阐述Python在线学习平台的重要性和研究意义。1.2国内外研究现状概述国内外Python在线学习平台的发展现状。1.3研究方法与论文结构介绍本文的研究方法和整体论文结构。第2章相关理论总结在线学习平台及Python教育的相关理论。2.1在线学习平台概述介绍在线学习平台的基本概念、特点和发展趋势。2.2Python教育理论阐述Python语言教学的理论和方法。2.3技术支持理论讨论构建在线学习平台所需的技术支持理论。第3章Python网络课程在线学习平台设计详细介绍Python网络课程在线学习平台的设计方案。3.1平台功能设计阐述平台的核心功能，如课程管理、用户管理、学习跟踪等。3.2平台架构设计给出平台的整体架构，包括前后端设计、数据库设计等。3.3平台界面设计介绍平台的用户界面设计，强调用户体验和易用性。第4章平台实现与测试详细阐述Python网络课程在线学习平台的实现过程和测试方法。4.1平台实现介绍平台的开发环境、技术栈和实现细节。4.2平台测试对平台进行功能测试、性能测试和安全测试，确保平台稳定可靠。第5章平台应用与效果分析分析Python网络课程在线学习平台在实际应用中的效果。5.1平台应用案例介绍平台在实际教学或培训中的应用案例。5.2效果评估与分析通过数据分析和用户反馈，评估平台的应用效果。第6章结论与展望总结Python网络课程在线学习平台的研究成果，并展望未来发展方向。6.1研究结论概括本文关于Python在线学习平台的研究结论。6.2研究展望提出未来Python在线学习平台的研究方向和发展建议。
西门子S7-1200PLC自定义堆栈FB块实现：先进先出与后进后出功能的数据管理程序
05-02
内容概要：本文详细介绍了为西门子S7-1200 PLC开发的一个自定义堆栈程序。由于S7-1200未提供内置堆栈功能，作者使用SCL（Structured Control Language）编写了一个通用型堆栈功能块（FB），能够实现FIFO（先进先出）和LIFO（后进先出）的数据管理。该堆栈程序支持多种数据类型（如BOOL、REAL、DWORD等），并提供了入栈、出栈、清空等功能。文中还讨论了具体的实现细节，如边界检测、指针管理和环形缓冲区的设计，以及在实际工业环境中的应用效果。 适合人群：从事PLC编程、自动化控制系统开发的技术人员，尤其是熟悉西门子S7-1200系列PLC的工程师。 使用场景及目标：适用于需要临时存储和管理数据的应用场景，如生产线上的配方管理、设备故障回溯、日志记录等。通过自定义堆栈程序，可以提高数据处理效率，减少因缺乏内置堆栈功能而带来的不便。 其他说明：该堆栈程序已在实际生产环境中运行超过三个月，处理了大量数据，表现出良好的稳定性和性能。未来计划进一步优化，如改进为环形缓冲区以提升性能。
GIS在林业管理系统中的应用.pdf
05-02
GIS在林业管理系统中的应用.pdf
Java NIO学习笔记与Server.java源码分析
总结来说，标题“NIO just for my own reference”指向的是Java非阻塞输入/输出技术的个人学习和参考笔记。博文链接指向的内容虽然未详细描述，但很可能是关于NIO技术的讲解或教程。标签“源码 工具”暗示阅读源码和...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值