小六六学Netty系列之Java NIO(二)

简介: 前言文本已收录至我的GitHub仓库,欢迎Star:github.com/bin39232820…种一棵树最好的时间是十年前,其次是现在

絮叨


NIO 上文把介绍,Buffer,Channel 等讲了,今天我们就来粗略的分析一个selector(本文争对Java层面,如果要分析到内核的select函数的话,小六六很懵逼) 下面是前面系列的链接


基本介绍


  • Java的NIO,用的非阻塞的IO方式。可以用一个客户端处理多个客户端的连接,其实这个就是我们前面讲的Uinx IO 模型中的I/O多路复用了,然后我们来讲讲我们最初的方式Selector选择器
  • Selector 能够检测多个注册的通道上是否有事件发生(注意:多个Channel以事件的方式可以注册到同一个Selector),如果有事件发生,便获取事件然后针对每个事件进行相应的处理。这样就可以只用一个单线程去管理多个通道,也就是管理多个连接和请求
  • 只有在 连接/通道 真正有读写事件发生时,才会进行读写,就大大地减少了系统开销,并且不必为每个连接都创建一个线程,不用去维护多个线程,避免了多线程之间的上下文切换导致的开销


Selector示意图和特点说明

网络异常,图片无法展示
|


  • Netty 的 IO 线程 NioEventLoop(小六六觉得这个蛮重要的) 聚合了 Selector(选择器,也叫多路复用器),可以同时并发处理成百上千个客户端连接。
  • 当线程从某客户端 Socket 通道进行读写数据时,若没有数据可用时,该线程可以进行其他任务。
  • 线程通常将非阻塞 IO 的空闲时间用于在其他通道上执行 IO 操作,所以单独的线程可以管理多个输入和输出通道。
  • 由于读写操作都是非阻塞的,这就可以充分提升 IO 线程的运行效率,避免由于频繁 I/O 阻塞导致的线程挂起。
  • 一个 I/O 线程可以并发处理 N 个客户端连接和读写操作,这从根本上解决了传统同步阻塞 I/O 一连接一线程模型,架构的性能、弹性伸缩能力和可靠性都得到了极大的提升。


Selector相关的方法

网络异常,图片无法展示
|
网络异常,图片无法展示
|
网络异常,图片无法展示
|


网络异常,图片无法展示
|

网络异常,图片无法展示
|

小六六也是截图的,大家如果看到这里了,应该去JDK里面找到这个类,先大致的过一下,具体的我们后面再看,有个大概映像。

说Netty 其实也就是两大类,第一大类是网络编程,第二类就是IO操作, IO操作的话再上面2节的Buffer和Channel 我们已经了解到了,那么现在我们来看看NIO的网络编程和我们前面的BIO的编程有啥区别呗,


NIO 非阻塞 网络编程原理分析图

网络异常,图片无法展示
|


对上面的解析

  • 当客户端连接时,会通过ServerSocketChannel 得到 SocketChannel(如果是BIO的话我们得到的是Socket,就是一个客户端连接)
  • Selector 进行监听  select 方法, 返回有事件发生的通道的个数.
  • 将socketChannel注册到Selector上, register(Selector sel, int ops), 一个selector上可以注册多个SocketChannel
  • 注册后返回一个 SelectionKey, 会和该Selector 关联(集合)
  • 进一步得到各个 SelectionKey (有事件发生)
  • 在通过 SelectionKey  反向获取 SocketChannel , 方法 channel()
  • 可以通过  得到的 channel  , 完成业务处理


NIO 网络编程案例


服务端代码

package com.liuliu.nio;
import java.net.InetSocketAddress;
import java.nio.ByteBuffer;
import java.nio.channels.*;
import java.util.Iterator;
import java.util.Set;
/**
 * @author 小六六
 * @version 1.0
 * @date 2020/8/8 11:55
 */
public class NIOServer {
    public static void main(String[] args) throws Exception {
        // 传统io    ServerSocket serverSocket = new ServerSocket(6666);
        //获取一个nio的网络socket
        ServerSocketChannel serverSocketChannel = ServerSocketChannel.open();
        // 获取一个selector
        Selector selector = Selector.open();
        //绑定一个端口6666, 在服务器端监听
        serverSocketChannel.socket().bind(new InetSocketAddress(6666));
        //设置为非阻塞
        serverSocketChannel.configureBlocking(false);
        //把 serverSocketChannel 注册到  selector 关心 事件为 OP_ACCEPT
        serverSocketChannel.register(selector, SelectionKey.OP_ACCEPT);
        System.out.println("注册后的selectionkey 数量=" + selector.keys().size());
        //循环等待客户端连接
        while (true) {
            if (selector.select(1000) == 0) {
                //说明这1秒内  没有事件发生,那么我们就自己让他跳出循环
                continue;
            }
            //如果返回的>0, 就获取到相关的 selectionKey集合
            //1.如果返回的>0, 表示已经获取到关注的事件
            //2. selector.selectedKeys() 返回关注事件的集合
            //   通过 selectionKeys 反向获取通道
            //说明有事件通知了
            Set<SelectionKey> selectionKeys = selector.selectedKeys();
            //使用迭代器遍历
            Iterator<SelectionKey> iterator = selectionKeys.iterator();
            while (iterator.hasNext()) {
                // 获取它的key
                SelectionKey key = iterator.next();
                //根据key 对应的通道发生的事件做相应处理
                if (key.isAcceptable()) {
                    //如果是 OP_ACCEPT, 有新的客户端连接]
                    //生成一个socket连接,对应BIO中的    Socket socket=ServerSocket.accept
                    SocketChannel socketChannel = serverSocketChannel.accept();
                    System.out.println("客户端连接成功 生成了一个 socketChannel " + socketChannel.hashCode());
                    //将  SocketChannel 设置为非阻塞
                    socketChannel.configureBlocking(false);
                    //将socketChannel 注册到selector, 关注事件为 OP_READ, 同时给socketChannel
                    //生成一个buffter
                    ByteBuffer buffer = ByteBuffer.allocate(1024);
                    //把channel 和buffer关联
                    socketChannel.register(selector, SelectionKey.OP_READ, buffer);
                    System.out.println("客户端连接后 ,注册的selectionkey 数量=" + selector.keys().size());
                }
                if (key.isReadable()) {
                    //发送的是读事件
                    //通过key 反向获取到对应channel
                    SocketChannel channel = (SocketChannel) key.channel();
                    //获取到该channel关联的buffer
                    ByteBuffer buffer = (ByteBuffer) key.attachment();
                    //把数据读到buffer中去
                    channel.read(buffer);
                    //打印从客户端发出来的数据
                    System.out.println("form 客户端 " + new String(buffer.array()));
                }
                // 手动从集合中移动当前的selectionKey, 防止重复操作
                iterator.remove();
            }
        }
    }
}
复制代码


客户端代码

import java.net.InetSocketAddress;
import java.nio.ByteBuffer;
import java.nio.channels.ServerSocketChannel;
import java.nio.channels.SocketChannel;
/**
 * @author 小六六
 * @version 1.0
 * @date 2020/8/8 14:49
 *
 * NIO 网络编程的客户端
 */
public class NIOClient {
    public static void main(String[] args) throws Exception {
        // 得到一个网络通道
        SocketChannel socketChannel = SocketChannel.open();
        //设置非阻塞的操作
        socketChannel.configureBlocking(false);
        //提供服务器端的ip 和 端口
        InetSocketAddress inetSocketAddress = new InetSocketAddress("127.0.0.1", 6666);
        // 去服务端去连接
        if (!socketChannel.connect(inetSocketAddress)) {
            // 因为我们是非阻塞的,所以我们可以做其他的事情
            while (!socketChannel.finishConnect()) {
                System.out.println("因为连接需要时间,客户端不会阻塞,可以做其它工作..");
            }
        }
        //准备发送数据给服务端
        String msg="跟小六六一起学Netty";
        ByteBuffer wrap = ByteBuffer.wrap(msg.getBytes());
        //把数据给channel
        socketChannel.write(wrap);
    }
}
package com.liuliu.nio;
import java.net.InetSocketAddress;
import java.nio.ByteBuffer;
import java.nio.channels.ServerSocketChannel;
import java.nio.channels.SocketChannel;
/**
 * @author 小六六
 * @version 1.0
 * @date 2020/8/8 14:49
 *
 * NIO 网络编程的客户端
 */
public class NIOClient {
    public static void main(String[] args) throws Exception {
        // 得到一个网络通道
        SocketChannel socketChannel = SocketChannel.open();
        //设置非阻塞的操作
        socketChannel.configureBlocking(false);
        //提供服务器端的ip 和 端口
        InetSocketAddress inetSocketAddress = new InetSocketAddress("127.0.0.1", 6666);
        // 去服务端去连接
        if (!socketChannel.connect(inetSocketAddress)) {
            // 因为我们是非阻塞的,所以我们可以做其他的事情
            while (!socketChannel.finishConnect()) {
                System.out.println("因为连接需要时间,客户端不会阻塞,可以做其它工作..");
            }
        }
        //准备发送数据给服务端
        String msg="跟小六六一起学Netty";
        ByteBuffer wrap = ByteBuffer.wrap(msg.getBytes());
        //把数据给channel
        socketChannel.write(wrap);
    }
}
复制代码


运行的结果

网络异常,图片无法展示
|


大家看后面是因为 客户端把连接关了报错了的。


聊聊SelectionKey


SelectionKey,表示 Selector 和网络通道的注册关系, 共四种:

  • int OP_ACCEPT:有新的网络连接可以 accept,值为 16
  • int OP_CONNECT:代表连接已经建立,值为 8
  • int OP_READ:代表读操作,值为 1
  • int OP_WRITE:代表写操作,值为 4

源码中:


  • public static final int OP_READ = 1 << 0;
  • public static final int OP_WRITE = 1 << 2;
  • public static final int OP_CONNECT = 1 << 3;
  • public static final int OP_ACCEPT = 1 << 4;

网络异常,图片无法展示
|


我们来看看主要的几个方法

public abstract class SelectionKey {
     public abstract Selector selector();//得到与之关联的 Selector 对象
 public abstract SelectableChannel channel();//得到与之关联的通道
 public final Object attachment();//得到与之关联的共享数据
 public abstract SelectionKey interestOps(int ops);//设置或改变监听事件
 public final boolean isAcceptable();//是否可以 accept
 public final boolean isReadable();//是否可以读
 public final boolean isWritable();//是否可以写
}
复制代码


结尾


好了,到这里NIO的三个组件的基本已经有了一点点认识了,大家可以试着去写一个基于NIO的多人聊天系统。试试 哈哈。

相关文章
|
2月前
|
设计模式
Lettuce的特性和内部实现问题之Netty NIO的性能优于BIO的问题如何解决
Lettuce的特性和内部实现问题之Netty NIO的性能优于BIO的问题如何解决
|
11天前
|
存储 网络协议 Java
Java NIO 开发
本文介绍了Java NIO(New IO)及其主要组件,包括Channel、Buffer和Selector,并对比了NIO与传统IO的优势。文章详细讲解了FileChannel、SocketChannel、ServerSocketChannel、DatagramChannel及Pipe.SinkChannel和Pipe.SourceChannel等Channel实现类,并提供了示例代码。通过这些示例,读者可以了解如何使用不同类型的通道进行数据读写操作。
Java NIO 开发
|
11天前
|
Java
Netty BIO/NIO/AIO介绍
Netty BIO/NIO/AIO介绍
|
2月前
|
Java
"揭秘Java IO三大模式:BIO、NIO、AIO背后的秘密!为何AIO成为高并发时代的宠儿,你的选择对了吗?"
【8月更文挑战第19天】在Java的IO编程中,BIO、NIO与AIO代表了三种不同的IO处理机制。BIO采用同步阻塞模型,每个连接需单独线程处理,适用于连接少且稳定的场景。NIO引入了非阻塞性质,利用Channel、Buffer与Selector实现多路复用,提升了效率与吞吐量。AIO则是真正的异步IO,在JDK 7中引入,通过回调或Future机制在IO操作完成后通知应用,适合高并发场景。选择合适的模型对构建高效网络应用至关重要。
41 2
|
2月前
|
微服务
成功解决:java.lang.NoSuchMethodError: reactor.netty.http.client.HttpClient.chunkedTransfer(Z)Lreactor/ne
这篇文章讲述了在微服务架构中整合gateway网关时遇到的`java.lang.NoSuchMethodError`错误的解决方法。问题主要是由于`spring-boot-starter-parent`的版本和`spring-cloud-starter-gateway`的版本不匹配所导致。文章提供了具体的版本不一致的错误配置,并给出了匹配的版本配置方案,以及成功测试的截图。
成功解决:java.lang.NoSuchMethodError: reactor.netty.http.client.HttpClient.chunkedTransfer(Z)Lreactor/ne
|
2月前
|
网络协议 C# 开发者
WPF与Socket编程的完美邂逅:打造流畅网络通信体验——从客户端到服务器端,手把手教你实现基于Socket的实时数据交换
【8月更文挑战第31天】网络通信在现代应用中至关重要,Socket编程作为其实现基础,即便在主要用于桌面应用的Windows Presentation Foundation(WPF)中也发挥着重要作用。本文通过最佳实践,详细介绍如何在WPF应用中利用Socket实现网络通信,包括创建WPF项目、设计用户界面、实现Socket通信逻辑及搭建简单服务器端的全过程。具体步骤涵盖从UI设计到前后端交互的各个环节,并附有详尽示例代码,助力WPF开发者掌握这一关键技术,拓展应用程序的功能与实用性。
70 0
|
2月前
|
Java 应用服务中间件 Linux
(九)Java网络编程无冕之王-这回把大名鼎鼎的Netty框架一网打尽!
现如今的开发环境中,分布式/微服务架构大行其道,而分布式/微服务的根基在于网络编程,而Netty恰恰是Java网络编程领域的无冕之王。Netty这个框架相信大家定然听说过,其在Java网络编程中的地位,好比JavaEE中的Spring。
|
2月前
|
存储 网络协议 Java
【Netty 神奇之旅】Java NIO 基础全解析:从零开始玩转高效网络编程!
【8月更文挑战第24天】本文介绍了Java NIO,一种非阻塞I/O模型,极大提升了Java应用程序在网络通信中的性能。核心组件包括Buffer、Channel、Selector和SocketChannel。通过示例代码展示了如何使用Java NIO进行服务器与客户端通信。此外,还介绍了基于Java NIO的高性能网络框架Netty,以及如何用Netty构建TCP服务器和客户端。熟悉这些技术和概念对于开发高并发网络应用至关重要。
52 0
|
3月前
|
安全 Java Linux
(七)Java网络编程-IO模型篇之从BIO、NIO、AIO到内核select、epoll剖析!
IO(Input/Output)方面的基本知识,相信大家都不陌生,毕竟这也是在学习编程基础时就已经接触过的内容,但最初的IO教学大多数是停留在最基本的BIO,而并未对于NIO、AIO、多路复用等的高级内容进行详细讲述,但这些却是大部分高性能技术的底层核心,因此本文则准备围绕着IO知识进行展开。
137 1
|
存储 缓存 NoSQL
跟着源码学IM(十一):一套基于Netty的分布式高可用IM详细设计与实现(有源码)
本文将要分享的是如何从零实现一套基于Netty框架的分布式高可用IM系统,它将支持长连接网关管理、单聊、群聊、聊天记录查询、离线消息存储、消息推送、心跳、分布式唯一ID、红包、消息同步等功能,并且还支持集群部署。
13447 1
下一篇
无影云桌面