Netty 系列之 Java NIO(一)

小二上酒8
82 阅读6分钟

Java NIO 基本介绍

  • Java NIO 全称 java non-blocking IO，是指 JDK 提供的新 API。从 JDK1.4 开始，Java 提供了一系列改进的输入/输出的新特性，被统称为 NIO(即 New IO)，是同步非阻塞的

  • NIO 相关类都被放在 java.nio 包及子包下，并且对原 java.io 包中的很多类进行改写。

  • NIO 有三大核心部分：Channel(通道)，Buffer(缓冲区), Selector(选择器)

  • NIO 是 面向缓冲区 ，或者面向 块 编程的。数据读取到一个它稍后处理的缓冲区，需要时可在缓冲区中前后移动，这就增加了处理过程中的灵活性，使用它可以提供非阻塞式的高伸缩性网络

  • Java NIO 的非阻塞模式，使一个线程从某通道发送请求或者读取数据，但是它仅能得到目前可用的数据，如果目前没有数据可用时，就什么都不会获取，而不是保持线程阻塞，所以直至数据变的可以读取之前，该线程可以继续做其他的事情。 非阻塞写也是如此，一个线程请求写入一些数据到某通道，但不需要等待它完全写入，这个线程同时可以去做别的事情。

  • 通俗理解：NIO 是可以做到用一个线程来处理多个操作的。假设有 10000 个请求过来,根据实际情况，可以分配 50 或者 100 个线程来处理。不像之前的阻塞 IO 那样，非得分配 10000 个。

  • HTTP2.0 使用了多路复用的技术，做到同一个连接并发处理多个请求，而且并发请求的数量比 HTTP1.1 大了好几个数量级。

NIO 和 BIO 的比较

  1. BIO 以流的方式处理数据,而 NIO 以块的方式处理数据,块 I/O 的效率比流 I/O 高很多

  2. BIO 是阻塞的，NIO 则是非阻塞的

  3. BIO 基于字节流和字符流进行操作，而 NIO 基于 Channel(通道)和 Buffer(缓冲区)进行操作，数据总是从通道读取到缓冲区中，或者从缓冲区写入到通道中。Selector(选择器)用于监听多个通道的事件（比如：连接请求，数据到达等），因此使用单个线程就可以监听多个客户端通道

NIO 三大核心原理示意图

一张图描述 NIO 的 Selector 、 Channel 和 Buffer 的关系

image.png

  • 每个 channel 都会对应一个 Buffer

  • Selector 对应一个线程， 一个线程对应多个 channel(连接)

  • 该图反应了有三个 channel 注册到 该 selector //程序

  • 程序切换到哪个 channel 是有事件决定的, Event 就是一个重要的概念（EventLoop）

  • Selector 会根据不同的事件，在各个通道上切换

  • Buffer 就是一个内存块 ， 底层是有一个数组

  • 数据的读取写入是通过 Buffer, 这个和 BIO , BIO 中要么是输入流，或者是输出流, 不能双向，但是 NIO 的 Buffer 是可以读也可以写, 需要 flip 方法切换

  • channel 是双向的, 可以返回底层操作系统的情况, 比如 Linux ， 底层的操作系统通道就是双向的.

下面我们就开始一一来学习 NIO 的三大组件吧

缓冲区(Buffer)

基本介绍

缓冲区（Buffer）：缓冲区本质上是一个可以读写数据的内存块，可以理解成是一个容器对象(含数组)，该对象提供了一组方法，可以更轻松地使用内存块，，缓冲区对象内置了一些机制，能够跟踪和记录缓冲区的状态变化情况。Channel 提供从文件、网络读取数据的渠道，但是读取或写入的数据都必须经由 Buffer，如图: 【后面举例说明】

Buffer 类及其子类

  • 在 NIO 中，Buffer 是一个顶层父类，它是一个抽象类, 类的层级关系图:

image.png

  • Buffer 类定义了所有的缓冲区都具有的四个属性来提供关于其所包含的数据元素的信息:

image.png

  • Buffer 类相关方法一览 就是我们所说的常用的 api

image.png

其实这些都蛮简单的，只要我们记住几个常用的，其他的 用到了我们再来找就好了

  • 从前面可以看出对于 Java 中的基本数据类型(boolean 除外)，都有一个 Buffer 类型与之相对应，最常用的自然是 ByteBuffer 类（二进制数据），该类的主要方法如下：

image.png

通道(Channel)

基本介绍

  • NIO 的通道类似于流，但有些区别如下：

  • 通道可以同时进行读写，而流只能读或者只能写

  • 通道可以实现异步读写数据

  • 通道可以从缓冲读数据，也可以写数据到缓冲:

image.png

image.png

  • BIO 中的 stream 是单向的，例如 FileInputStream 对象只能进行读取数据的操作，而 NIO 中的通道(Channel)是双向的，可以读操作，也可以写操作。

  • Channel 在 NIO 中是一个接口 public interface Channel extends Closeable{}常用的 Channel 类有：FileChannel、DatagramChannel、ServerSocketChannel 和 SocketChannel。【ServerSocketChanne 类似 ServerSocket , SocketChannel 类似 Socket】

  • FileChannel 用于文件的数据读写，DatagramChannel 用于 UDP 的数据读写，ServerSocketChannel 和 SocketChannel 用于 TCP 的数据读写。

FileChannel 类

FileChannel 主要用来对本地文件进行 IO 操作，常见的方法有

  • public int read(ByteBuffer dst) ，从通道读取数据并放到缓冲区中

  • public int write(ByteBuffer src) ，把缓冲区的数据写到通道中

  • public long transferFrom(ReadableByteChannel src, long position, long count)，从目标通道中复制数据到当前通道

  • public long transferTo(long position, long count, WritableByteChannel target)，把数据从当前通道复制给目标通道

例子

用 FileChannel 来写文件

例子 用 FileChannel 来写文件

package com.itheima.mq.rocketmq.nio;

import java.io.FileOutputStream;
import java.nio.ByteBuffer;
import java.nio.channels.FileChannel;

/**
 * @author 小六六
 * @version 1.0
 * @date 2020/8/2 15:37
 */
public class NIOFileChannel01  {

    public static void main(String[] args) throws Exception {
        String name="hello,小六六";

        //生成一个输出流

        FileOutputStream fileOutputStream = new FileOutputStream("d:\\file01.txt");

        //通过 fileOutputStream 获取 对应的 FileChannel
        //这个 fileChannel 真实 类型是  FileChannelImpl

        FileChannel channel = fileOutputStream.getChannel();

        ByteBuffer byteBuffer = ByteBuffer.allocate(1024);

        //把数据放到缓存区中

        byteBuffer.put(name.getBytes());


        //转换
        byteBuffer.flip();

        channel.write(byteBuffer);

        fileOutputStream.close();
    }
}

image.png

总结一个和 BIO 的区别，其实很简单 ，就是把数据写到 buffer 里面 ，然后输入输出流从 buffer 里面拿数据

应用实例 2-本地文件读数据

package com.itheima.mq.rocketmq.nio;

import java.io.File;
import java.io.FileInputStream;
import java.nio.ByteBuffer;
import java.nio.channels.FileChannel;

/**
 * @author 小六六
 * @version 1.0
 * @date 2020/8/2 15:37
 */
public class NIOFileChannel02 {

    public static void main(String[] args) throws Exception {

        //创建文件流

        File file = new File("d:\\file01.txt");

        FileInputStream fileInputStream = new FileInputStream(file);
        FileChannel channel = fileInputStream.getChannel();

        ByteBuffer allocate = ByteBuffer.allocate((int) file.length());

        channel.read(allocate);

        System.out.println(new String(allocate.array()));

        fileInputStream.close();


    }

}

image.png

应用实例 3-使用一个 Buffer 完成文件读取

实例要求:

  • 使用 FileChannel(通道) 和 方法 read , write，完成文件的拷贝

  • 拷贝一个文本文件 1.txt , 放在项目下即可

代码演示

package com.itheima.mq.rocketmq.nio;

import java.io.FileInputStream;
import java.io.FileOutputStream;
import java.nio.ByteBuffer;
import java.nio.channels.FileChannel;

/**
 * @author 小六六
 * @version 1.0
 * @date 2020/8/2 15:37
 */
public class NIOFileChannel03 {

    public static void main(String[] args) throws Exception {

        FileInputStream fileInputStream = new FileInputStream("1.txt");
        FileChannel fileChannel01 = fileInputStream.getChannel();

        FileOutputStream fileOutputStream = new FileOutputStream("2.txt");
        FileChannel fileChannel02 = fileOutputStream.getChannel();

        ByteBuffer byteBuffer = ByteBuffer.allocate(512);


        //下面就是数据读写的流程了

        while (true){
            byteBuffer.clear(); //清空buffer
            int read = fileChannel01.read(byteBuffer);

            System.out.println("read =" + read);
            if(read == -1) { //表示读完
                break;
            }

            //将buffer 中的数据写入到 fileChannel02 -- 2.txt
            byteBuffer.flip();
            fileChannel02.write(byteBuffer);

            //将buffer 中的数据写入到 fileChannel02 -- 2.txt
            byteBuffer.flip();
            fileChannel02.write(byteBuffer);



        }

        //关闭相关的流
        fileInputStream.close();
        fileOutputStream.close();
    }

}

image.png

结尾

其实这节也很简单，就是大致的介绍了一下 NIO，然后讲了 NIO 三大组件的 2 个 一个 Buffer,一个 Channel, 下次再讲讲 selector。

avatar
文章
阅读
粉丝