Java IO 1 涉及到的底层概念

Java io的接口经过了多次迭代,现在主要分为三部分,即java IO (since JDK1.0),java NIO(since JDK1.4),java NIO2(since JDK1.7)。
那么java为什么要将IO的接口分成这三部分呢,这三部分的接口又有什么不同呢?
它们背后的底层原理是什么,要怎么样理解才比较好呢?常常听到的阻塞,非阻塞,同步,异步的概念,到底它们是什么,之间有什么区别?
本文将试着根据相关的文档,用自己的语言来解释这些问题,希望对你有所启发。

一 涉及的对象

1) 用户进程和操作系统内核

Java 中的IO可以理解为是在Java程序和操作系统内核两个对象之间进行的。
后面所说的阻塞和非阻塞,同步和异步都是这两个对象相互作用的结果。在本文中,用户进程指的就是Java程序。

2) 程序空间和内核空间

Waiting for the data to be ready(等待数据到达内核缓冲区)

Copying the data from the kernel to the process(从内核缓冲区拷贝数据到程序缓冲区)

在Linux中,对于一次读取IO的操作,数据并不会直接拷贝到程序的程序缓冲区。

它首先会被拷贝到操作系统内核的缓冲区中,然后才会从操作系统内核的缓冲区拷贝到应用程序的缓冲区。

程序空间:分配给用户程序的内存空间。

内核空间:内核拥有的内存空间。

3) 阻塞和非阻塞

阻塞:用户进程进行系统调用后,用户进程一直处于锁定的状态,不能进行其他操作

非阻塞:用户进程进行系统调用后,用户进程没有被锁定,可以进行其他操作

阻塞和非阻塞说的是用户进程的状态,即用户进程是否被锁定

4) 同步和异步

A synchronous I/O operation causes the requesting process to be blocked until that I/O operation completes.
An asynchronous I/O operation does not cause the requesting process to be blocked.

一个同步的io操作会导致发起请求的进程阻塞直到这个io操作完成。一个异步的io操作不会导致请求的线程被阻塞。

同步:用户线程和io线程做同一件事(用户线程被阻塞,等待内核返回处理结果)

异步:用户线程和io线程做不同的事情(用户线程不被阻塞,做其他的事情,内核处理完成发送结果给用户线程)

5) 文件描述符

在Linux下面一切皆文件。文件描述符(file descriptor)是内核为文件所创建的索引,所有I/O操作都通过调用文件描述符(索引)来执行,包括下面我们要提到的socket。Linux刚启动的时候会自动设置0是标准输入,1是标准输出,2是标准错误。

二 uninx五种IO模型

1) blocking IO(阻塞IO)

blocking-IO.png

调用过程:

  1. 用户进程调用一个recvfrom请求,内核收到这个请求之后没有立即返回,而是首先等待数据到达。

  2. 等数据到达之后,再进行数据拷贝,将数据从内核缓存区拷贝到用户进程缓存区,拷贝完成后返回给进程ok的消息。

上面整个过程都是阻塞的。

2) nonblocking IO(非阻塞IO)

noblocking-IO.png

调用过程:

  1. 用户进程调用一个recvfrom请求,内核收到这个请求之后立即返回数据没有到达的消息。

  2. 用户进程收到消息后继续发送recvfrom请求,如果数据仍没有到达,内核继续返回没有到达的消息。

  3. 如此循环,直到数据到达内核。然后内核将收到的数据从内核缓存区拷贝到用户进程缓存区,拷贝完成后返回给进程ok的消息。

上面整个过程都是阻塞的。

3) IO multiplexing(IO复用) (select/poll/epoll)

IO-multiplexing.png

调用过程:

  1. 用户进程通过调用select或poll或epoll去查询多个文件描述符的状态。

  2. 如果有一个文件描述符准备好了,内核就返回该文件描述符可读的消息。

  3. 用户进程调用一个recvfrom请求,内核收到请求后开始拷贝数据,将数据从内核缓存区拷贝到用户进程缓存区,拷贝完成后返回给进程ok的消息。

上面整个过程都是阻塞的。

  1. signal driven IO(信号驱动IO)
signal-driven-IO.png

调用过程:

  1. 设置socket为一个信号驱动IO,并且通过sigaction system call安装一个signal handler。

  2. 数据准备好以后,一个SIGIO信号传送给用户进程通知数据已经准备好。

  3. 然后用户进程调用一个recvfrom请求,内核收到请求后开始拷贝数据,将数据从内核缓存区拷贝到用户进程缓存区,拷贝完成后返回给进程ok的消息。

步骤1因为是瞬时完成的,可以认为是非阻塞的。步骤2,3是阻塞的。

  1. asynchronous IO(异步IO)
asynchronous-IO.png

调用过程:

  1. 用户进程发送一个aio_read的系统调用,内核立即返回响应。

  2. 用户进程收到响应,可以继续做自己的事(非阻塞)。

  3. 内核等待数据到达,完成数据拷贝后,发送消息给用户进程。

上面整个过程都是非阻塞的。

三 windowsIO模型

windwos IO模型感觉和linuxIO模型相似,感兴趣的同学可以看看这个

ps: 本文的图和英文引用部分来自参考文档3.中文引用部分来自文档1(参考文档写的比我好,建议大家多看看 :))

参考文档:

  1. Linux下的五种IO模型

  2. 从内核文件系统看文件读写过程

  3. Linux_Programming/UNIX Network Programming(Volume1,3rd).pdf

  4. 使用异步 I/O 大大提高应用程序的性能

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,332评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,508评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,812评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,607评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,728评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,919评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,071评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,802评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,256评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,576评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,712评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,389评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,032评论 3 316
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,798评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,026评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,473评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,606评论 2 350

推荐阅读更多精彩内容