Java网络编程从入门到精通(31):非阻塞I/O简介

简介:
在网络应用中,一般可以采用同步 I/O (阻塞 I/O )和非阻塞 I/O 两种方式进行数据通讯。这两种方式并非互相排斥和互相取代。我们可以在平时的应用中单独采用其中一种通讯方式,也可以混合使用这两种通讯方式。在本文中就什么是非阻塞 I/O 以及为什么要使用这种通讯方式进行了介绍,在下一篇文章中给出了一个简单的例子来演示在网络应用中如何使用非阻塞 I/O 进行通讯。
一、 什么是非阻塞 I/O
我们可以将同步I/O 称为阻塞I/O ,非阻塞I/O 称为异步I/O 。在本书中采用了比较常用的叫法:同步I/O 和非阻塞I/O 。虽然它们的叫法不同,但含义是一样的。读者在阅读其他书时应注意这一点。
在讲解什么是非阻塞I/O 之前,首先应了解什么是同步I/O ,这里的同步指的是什么。同步这个概念在程序设计中主要是指代码按顺序执行的过程。如在Java 程序中的main 方法,如果不使用多线程,这个方法中的代码一定是从前往后按顺序执行的。这就叫做同步。如果使用了多线程,从宏观角度来看会有不同的代码段同时执行,这就叫做异步。在同步I/O 中的同步概念也类似,也就是说,在I/O 通讯过程中,只要是某一步的通讯未结束,就无法进行其他的通讯。那么这里的同步指的是什么呢?要回答这个问题之前,首先让我们先回忆一下,在网络通讯中有哪些地方可能会被阻塞。如果读者看了前面的章节就会知道答案。对于客户端来说,有两个地方可能会被阻塞:连接服务器(调用connect 方法时)和读写数据。而在服务端也有两个地方可能会被阻塞:等待客户端请求(调用accept 方法时)和读写数据(在一般情况下,写数据不会被阻塞,但如果网络环境比较差的时候,客户端和服务端的写数据操作也可能发生阻塞现象)。也就是说,可以设置超时时间的地方就可能被阻塞。而同步I/O 中的同步就是指除了以下两种情况外程序会一直处于等待状态:
1. 连接服务器、读写数据或等待客户端请求正常地执行。
2. 在等待超时时间后,抛出了超时异常。
在上面我们了解了什么是同步I/O 。而非阻塞I/O 和同步I/O 最明显的不同就是同步I/O 所有可能被阻塞的地址在非阻塞I/O 中都不会被阻塞。如在读取数据时,如果数据暂时无法被读取。那么在非阻塞I/O 中会立刻返回,以便程序可以执行其他的代码,然后系统会不断侦测这个未完成的读取操作,直到可以继续读数据时再来完成这个操作。
Java JDK1.4 及以后版本中提供了一套API 来专门操作非阻塞I/O ,我们可以在java.nio 包及其子包中找到相关的类和接口。由于这套API JDK 新提供的I/O API ,因此,也叫New I/O ,这就是包名nio 的由来。这套API 由三个主要的部分组成:缓冲区(Buffers) 、通道(Channels) 和非阻塞I/O 的核心类组成。这三部分的详细内容将在本章的后面介绍。
二、 为什么要使用非阻塞 I/O
在使用同步I/O 的网络应用中,如果要同时处理多个客户端请求,或是在客户端要同时和多个服务器进行通讯,就必须使用多线程来处理。也就是说,将每一个客户端请求分配给一个线程来单独处理。这样做虽然可以达到我们的要求,但同时又会带来另外一个问题。由于每创建一个线程,就要为这个线程分配一定的内存空间(也叫工作存储器),而且操作系统本身也对线程的总数有一定的限制。如果客户端的请求过多,服务端程序可能会因为不堪重负而拒绝客户端的请求,甚至服务器可能会因此而瘫痪。
当然,可以使用线程池(将在第三部分讲解)来缓解服务器的压力,但这并不能解决客户端因访问过于密集而造成的服务器拒绝响应的问题。虽然在服务端还有请求缓冲区作为保障,但这个缓冲区的大小是有限的(一般为50 ),如果客户端的请求数远超过这个数,客户端还是会收到拒绝服务的信息。
在这种情况下,使用非阻塞I/O 就可以解决这个问题。由于使用非阻塞I/O 的程序一般是单线程的(有时可能将使用非阻塞I/O 的程序段放到一个单独的线程里,而主线程负责处理用户的输入),因此,服务端接收的客户端请求数并不随着工作线程数的增加而增加。所以使用非阻塞I/O 模式就不会受到操作系统对线程总数的限制,也不会占用大量的服务器资源。
非阻塞I/O 虽然可以到达在处理大量客户端请求的同时,又不占用大量的服务器资源的目的。但这种通讯方式并不能完全取代同步I/O 。如非阻塞I/O 并不适合象FTP 服务器那样需要保持连接状态的应用(原因将在以后的章节中说明)。非阻塞I/O 一般应用在服务端比较多一些,因为客户端一般并不需要处理大量的连接(但某些应用除外,如象百度、Google Web Spider ,需要同时下载多个网页,这时就需要在客户端建立大量的连接来满足需求),而服务端程序一般需要接收并处理大量的客户端请求,因此,就需要使用多线程(使用同步I/O )或非阻塞I/O 来达到这个目的。如果某个服务端应用处理的客户端请求没那么多时,使用多线程和同步I/O 可能会更好一点,因为这种方式要比非阻塞I/O 方式更灵活。
在前面一直将非阻塞I/O 和网络应用放到一起讲。其实非阻塞I/O 并不等于网络。我们也可以将非阻塞I/O 应用到非网络的应用中,如文件复制。由于同步I/O 是基于字节流的,而非阻塞I/O 是基于缓冲区和通道的。因此,从理论上,所操作的文件越大,非阻塞I/O 的优势越能体现出来。而对于比较小的文件操作,这两种方式的效率差不多。根据实验得知,复制一个4G 左右的文件,一般情况下,非阻塞I/O 方式比同步I/O 方式快大约15% 左右。






 本文转自 androidguy 51CTO博客,原文链接: http://blog.51cto.com/androidguy/214343 ,如需转载请自行联系原作者
相关文章
|
网络协议 测试技术 Linux
Golang 实现轻量、快速的基于 Reactor 模式的非阻塞 TCP 网络库
gev 是一个基于 epoll 和 kqueue 实现的高性能事件循环库,适用于 Linux 和 macOS(Windows 暂不支持)。它支持多核多线程、动态扩容的 Ring Buffer 读写缓冲区、异步读写和 SO_REUSEPORT 端口重用。gev 使用少量 goroutine,监听连接并处理读写事件。性能测试显示其在不同配置下表现优异。安装命令:`go get -u github.com/Allenxuxu/gev`。
413 0
|
Web App开发 网络协议 安全
网络编程懒人入门(十六):手把手教你使用网络编程抓包神器Wireshark
Wireshark是一款开源和跨平台的抓包工具。它通过调用操作系统底层的API,直接捕获网卡上的数据包,因此捕获的数据包详细、功能强大。但Wireshark本身稍显复杂,本文将以用抓包实例,手把手带你一步步用好Wireshark,并真正理解抓到的数据包的各项含义。
5730 2
|
域名解析 网络协议 应用服务中间件
网络编程入门如此简单(四):一文搞懂localhost和127.0.0.1
本文将以网络编程入门者视角,言简意赅地为你请清楚localhost和127.0.0.1的关系及区别等。
906 2
网络编程入门如此简单(四):一文搞懂localhost和127.0.0.1
|
消息中间件 编解码 网络协议
Netty从入门到精通:高性能网络编程的进阶之路
【11月更文挑战第17天】Netty是一个基于Java NIO(Non-blocking I/O)的高性能、异步事件驱动的网络应用框架。使用Netty,开发者可以快速、高效地开发可扩展的网络服务器和客户端程序。本文将带您从Netty的背景、业务场景、功能点、解决问题的关键、底层原理实现,到编写一个详细的Java示例,全面了解Netty,帮助您从入门到精通。
2982 0
|
编解码 网络协议 Oracle
java网络编程入门以及项目实战
这篇文章是Java网络编程的入门教程,涵盖了网络编程的基础知识、IP地址、端口、通讯协议(TCP和UDP)的概念与区别,并提供了基于TCP和UDP的网络编程实例,包括远程聊天和文件传输程序的代码实现。
java网络编程入门以及项目实战
|
网络协议 安全 Java
Java中的网络编程:Socket编程详解
Java中的网络编程:Socket编程详解
|
网络协议 网络架构
【网络编程入门】TCP与UDP通信实战:从零构建服务器与客户端对话(附简易源码,新手友好!)
在了解他们之前我们首先要知道网络模型,它分为两种,一种是OSI,一种是TCP/IP,当然他们的模型图是不同的,如下
709 1
|
网络协议 安全 Java
Java中的网络编程:Socket编程详解
Java中的网络编程:Socket编程详解
|
网络协议 Java 网络安全
Java中的网络编程:TCP详解
Java中的网络编程:TCP详解
|
Java API
Java网络编程实战指南与示例代码
Java网络编程实战指南与示例代码