Java的IO模型

一.预备知识

1.1 Linux网络IO模型

  • fd:文件描述符
  • socketfd:socket描述符
  • 描述符是一个数字,指向内核的一个结构体

1.2 Java的5种IO模型

  • 阻塞IO
  • 非阻塞IO
  • IO复用模型:把多个IO的阻塞复用到同一个select阻塞上,不必新开线程处理;select、poll顺序扫描fd是否就绪;epoll基于事件驱动;
  • 信号驱动模型:内核通知何时开始IO操作(内核缓存写入数据就通知)
  • 异步IO:内核通知IO操作何时完成(用户缓存写入数据才通知)

1.3 epoll优势

  • 单个进程可以打开的socketFD无限制(与内存相关)
  • 事件驱动而不是线性扫描,效率不会随FD数量增大而降低
  • 内核与用户空间消息传递使用mmap同一块内存

二.BIO

2.1 server

import java.net.ServerSocket;
import java.net.Socket;

        //连接
        ServerSocket serverSocket = new ServerSocket(8080);
        Socket socket = serverSocket.accept();
        //接收后进行回复
        BufferedReader in = new BufferedReader(new InputStreamReader(socket.getInputStream()));
        String body = in.readLine();
        
        PrintWriter out = new PrintWriter(socket.getOutputStream(), true);
        out.println("server response...");

2.2 client

        //连接
        Socket socket = new Socket("ip", 8080);
        //发送后等待回复
        PrintWriter out = new PrintWriter(socket.getOutputStream(), true);
        out.println("client request...");
        
        BufferedReader in = new BufferedReader(new InputStreamReader(socket.getInputStream()));
        String body = in.readLine();

三.NIO

3.1 基本概念

  • 缓冲区

BIO读取写入数据都是直接操作stream对象,效率低,NIO使用缓冲区解决。缓冲区本质是一个数组,提供对数据的结构化访问以及维护读写位置等。

  • 通道

Channel主要分为用于网络读写的SelectableChannel和用于文件操作的FileChannel,SelectableChannel主要包括SocketChannel和ServerSocketChannel

  • 多路复用器

Selector不断轮询注册在其上的Channel,若某个Channel上有新的TCP接入、读、写则说明这个通道以及就绪,将被Selector轮询选择到SelectionKey.

3.2 server

  • 创建父管道
  • 创建Reactor线程并启动,selector开始轮询
  • 将父管道注册到selector,监听ACCEPT事件
  • 有ACCEPT事件触发,建立新的客户端channel并注册到selector,监听读事件
  • 有READ事件触发,处理相应的客户端channel
        //1.服务端创建父管道,处理所有客户端连接
        ServerSocketChannel serverSocketChannel = ServerSocketChannel.open();
        serverSocketChannel.socket().bind(new InetSocketAddress("ip",8080));
        serverSocketChannel.configureBlocking(false);

        //2.创建Reactor线程
        Selector selector = Selector.open();
        //创建一个selector线程并启动,轮询就绪的事件
        Set<SelectionKey> selectionKeys = selector.selectedKeys();
        Iterator<SelectionKey> iterator = selectionKeys.iterator();
        while (iterator.hasNext()){
            SelectionKey key = iterator.next();
            if(key.isValid()){
                if(key.isAcceptable()){
                    ServerSocketChannel ssc = (ServerSocketChannel) key.channel();
                    //有新客户端请求接入时的情况,详见4
                }
                if(key.isReadable()){
                    SocketChannel sc = (SocketChannel) key.channel();
                    //有新客户端请求进来的情况,详见5
                }
            }
        }


        //3.将父管道注册到选择器,监听客户端的accept事件
        SelectionKey selectionKey = ServerSocketChannel.register(selector, SelectionKey.OP_ACCEPT);

        //4.选择器监听到ACCEPT事件后(即有新客户端请求进来),为每个请求生成一个channel(建立TCP连接)并注册read事件到选择器
        SocketChannel clientChannel = serverSocketChannel.accept();//serverSocketChannel即为2中的ssc
        clientChannel.configureBlocking(false);
        SelectionKey clientKey = clientChannel.register(selector, SelectionKey.OP_READ);

        //5.选择器监听到read事件后(即客户端请求进来了),异步读取请求信息到缓冲区、解码,最后放到工作线程池处理
        ByteBuffer dst = ByteBuffer.allocate(1024);
        clientChannel.read(dst);//clientChannel即为2中的sc
        dst.flip();
        byte[] bytes = new byte[dst.remaining()];
        dst.get(bytes);
        String clientInfo = new String(bytes, "utf-8");

        //6.服务端处理完毕后,把返回值写入到clientChannel返回给客户端
        ByteBuffer writeBuffer = ByteBuffer.allocate(1024);
        String serverResponse = "xxx";
        byte[] serverBytes = serverResponse.getBytes();
        writeBuffer.put(serverBytes);
        writeBuffer.flip();
        clientChannel.write(dst);

3.3 client

        //1.创建客户端通道
        SocketChannel clientChannel = SocketChannel.open();
        clientChannel.configureBlocking(false);

        //2.建立Reactor线程,首先判断连接是否建立详见3,再轮询激活事件详见4
        Selector selector = Selector.open();

        //3.判断客户端是否与服务端建立了连接,连接成功则注册read事件,否则注册connect事件
        if(clientChannel.connect(new InetSocketAddress("ip",8080))){
            clientChannel.register(selector, SelectionKey.OP_READ);
            //TODO 处理写操作,即发送请求到服务端
        }
        else {
            clientChannel.register(selector, SelectionKey.OP_CONNECT);
        }

        //4.轮询所有就绪事件
        Set<SelectionKey> selectionKeys = selector.selectedKeys();
        Iterator<SelectionKey> iterator = selectionKeys.iterator();
        while (iterator.hasNext()){
            SelectionKey key = iterator.next();
            if(key.isValid()){
                SocketChannel sc = (SocketChannel) key.channel();
                //客户端的连接请求,如果已建立连接则注册read事件准备接受服务端回复,并发送相应请求
                if(key.isConnectable()){
                    if(sc.finishConnect()){
                        sc.register(selector, SelectionKey.OP_READ);
                        //TODO 处理写操作,即发送请求到服务端
                    }
                    else {
                        System.exit(1);//服务端返回ACK但是连接失败,异常
                    }
                }
                //客户端接受到服务端回复后的处理
                if(key.isReadable()){
                    //TODO 处理读操作,即接受服务端的回复并相应处理
                }
            }
        }

四.AIO

真正的异步非阻塞IO,对应Unix网络编程的事件驱动IO,无需selector轮询即可实现异步读写。

server

  • AsynchronousServerSocketChannel创建父管道
  • 父管道通过accept方法,异步接受客户端连接
  • accept方法入参CompletionHandler<AsynchronousSocketChannel,? super A> handler用于回调
  • CompletionHandler接口包括completed和failed两个接口
  • completed方法里,首先继续调用accept方法,即一个客户端连接成功之后接着异步接受其它客户端,然后再异步调用read方法
  • 异步调用read方法回调成功后,再异步调用write方法

client

  • AsynchronousSocketChannel创建客户端管道
  • 异步调用管道的connect方法,建立连接
  • connect方法异步执行成功,回调方法执行write方法异步发送请求
  • write方法异步执行成功,回调方法执行异步read异步读取回包
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,743评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,296评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,285评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,485评论 1 283
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,581评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,821评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,960评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,719评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,186评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,516评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,650评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,329评论 4 330
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,936评论 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,757评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,991评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,370评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,527评论 2 349

推荐阅读更多精彩内容