TIP
本文主要是介绍 I/O通信-聊天室NIO模式 。
# 手动搭建I/O网络通信框架3:NIO编程模型,升级改造聊天室
第二章中用BIO编程模型,简单的实现了一个聊天室。但是其最大的问题在解释BIO时就已经说了:ServerSocket接收请求时(accept()方法)、InputStream、OutputStream(输入输出流的读和写)都是阻塞的。还有一个问题就是线程池,线程多了,服务器性能耗不起。线程少了,在聊天室这种场景下,让用户等待连接肯定不可取。今天要说到的NIO编程模型就很好的解决了这几个问题。有两个主要的替换地方:
# NIO模型优化方案
1.用Channel代替Stream。2.使用Selector监控多条Channel,起到类似线程池的作用,但是它只需一条线程。
既然要用NIO编程模型,那就要说说它的三个主要核心:Selector、Channel、Buffer。它们的关系是:一个Selector管理多个Channel,一个Channel可以往Buffer中写入和读取数据。Buffer名叫缓冲区,底层其实是一个数组,会提供一些方法往数组写入读取数据。
# Buffer:
不太了解Buffer的可以看看这个:https://blog.csdn.net/czx2018/article/details/89502699
常用API:
allocate() - 初始化一块缓冲区
put() - 向缓冲区写入数据
get() - 向缓冲区读数据
filp() - 将缓冲区的读写模式转换
clear() - 这个并不是把缓冲区里的数据清除,而是利用后来写入的数据来覆盖原来写入的数据,以达到类似清除了老的数据的效果
compact() - 从读数据切换到写模式,数据不会被清空,会将所有未读的数据copy到缓冲区头部,后续写数据不会覆盖,而是在这些数据之后写数据
mark() - 对position做出标记,配合reset使用
reset() - 将position置为标记值
简单地说:Buffer实质上是个数组,有两个关键的指针,一个position代表当前数据写入到哪了、一个limit代表限制。初始化时设置了数组长度,这limit就是数组的长度。如:设置intBuffer.allocate(10),最大存储10个int数据,写入5五个数据后,需要读取数据了。用filp()转换读写模式后,limit=position,position=0。也就是说从0开始读,只能读到第五个。读完后这个缓冲区就需要clear()了,实际上并没有真的去清空数据,而是position和limit两个指针又回到了初始化的位置,接着又可以写入数据了,反正数组下标相同重新写入数据会覆盖,就没必要真的去清空了。
# Channel:
Channel(通道)主要用于传输数据,然后从Buffer中写入或读取。它们两个结合起来虽然和流有些相似,但主要有以下几点区别:
- 1.流是单向的,可以发现Stream的输入流和输出流是独立的,它们只能输入或输出。而通道既可以读也可以写。
- 2.通道本身不能存放数据,只能借助Buffer。
- 3.Channel支持异步。
Channel有如下三个常用的类:FileChannel、SocketChannel、ServerSocketChannel。从名字也可以看出区别,第一个是对文件数据的读写,后面两个则是针对Socket和ServerSocket,这里我们只是用后面两个。更详细的用法可以看:https://www.cnblogs.com/snailclimb/p/9086335.html,下面的代码中也会用到,会有详细的注释。
# Selector
多个Channel可以注册到Selector,就可以直接通过一个Selector管理多个通道。Channel在不同的时间或者不同的事件下有不同的状态,Selector会通过轮询来达到监视的效果,如果查到Channel的状态正好是我们注册时声明的所要监视的状态,我们就可以查出这些通道,然后做相应的处理。这些状态如下:
- 1.客户端的SocketChannel和服务器端建立连接,SocketChannel状态就是Connect。
- 2.服务器端的ServerSocketChannel接收了客户端的请求,ServerSocketChannel状态就是Accept。
- 3.当SocketChannel有数据可读,那么它们的状态就是Read。
- 4.当我们需要向Channel中写数据时,那么它们的状态就是Write。 具体的使用见下面代码注释或看https://www.cnblogs.com/snailclimb/p/9086334.html
# NIO编程模型
NIO编程模型工作流程:
- 1.首先会创建一个Selector,用来监视管理各个不同的Channel,也就是不同的客户端。相当于取代了原来BIO的线程池,但是它只需一个线程就可以处理多个Channel,没有了线程上下文切换带来的消耗,很好的优化了性能。
- 2.创建一个ServerSocketChannel监听通信端口,并注册到Selector,让Seletor监视这个通道的Accept状态,也就是接收客户端请求的状态。
- 3.此时客户端ClientA请求服务器,那么Selector就知道了有客户端请求进来。这时候我们可以得到客户端的SocketChannel,并为这个通道注册Read状态,也就是Selector会监听ClientA发来的消息。
- 4.一旦接收到ClientA的消息,就会用其他客户端的SocketChannel的Write状态,向它们转发ClientA的消息。
上代码之前,还是先说说各个类的作用:
- 相比较BIO的代码,NIO的代码还少了一个类,那就是服务器端的工作线程类。没了线程池,自然也不需要一个单独的线程去服务客户端。客户端还是需要一个单独的线程去等待用户输入,因为用户随时都可能输入信息,这个没法预见,只能阻塞式的等待。
- ChatServer:服务器端的唯一的类,作用就是通过Selector监听Read和Accept事件,并针对这些事件的类型,进行不同的处理,如连接、转发。
- ChatClient:客户端,通过Selector监听Read和Connect事件。Read事件就是获取服务器转发的消息然后显示出来;Connect事件就是和服务器建立连接,建立成功后就可以发送消息。
UserInputHandler:专门等待用户输入的线程,和BIO没区别。
# ChatServer
public class ChatServer {
//设置缓冲区的大小,这里设置为1024个字节
private static final int BUFFER = 1024;
//Channel都要配合缓冲区进行读写,所以这里创建一个读缓冲区和一个写缓冲区
//allocate()静态方法就是设置缓存区大小的方法
private ByteBuffer read_buffer = ByteBuffer.allocate(BUFFER);
private ByteBuffer write_buffer = ByteBuffer.allocate(BUFFER);
//为了监听端口更灵活,再不写死了,用一个构造函数设置需要监听的端口号
private int port;
public ChatServer(int port) {
this.port = port;
}
private void start() {
//创建ServerSocketChannel和Selector并打开
try (ServerSocketChannel server = ServerSocketChannel.open(); Selector selector = Selector.open()) {
//【重点,实现NIO编程模型的关键】configureBlocking设置ServerSocketChannel为非阻塞式调用,Channel默认的是阻塞的调用方式
server.configureBlocking(false);
//绑定监听端口,这里不是给ServerSocketChannel绑定,而是给ServerSocket绑定,socket()就是获取通道原生的ServerSocket或Socket
server.socket().bind(new InetSocketAddress(port));
//把server注册到Selector并监听Accept事件
server.register(selector, SelectionKey.OP_ACCEPT);
System.out.println("启动服务器,监听端口:" + port);
while (true) {
//select()会返回此时触发了多少个Selector监听的事件
if(selector.select()>0) {
//获取这些已经触发的事件,selectedKeys()返回的是触发事件的所有信息
Set<SelectionKey> selectionKeys = selector.selectedKeys();
//循环处理这些事件
for (SelectionKey key : selectionKeys) {
handles(key, selector);
}
//处理完后清空selectedKeys,避免重复处理
selectionKeys.clear();
}
}
} catch (IOException e) {
e.printStackTrace();
}
}
//处理事件的方法
private void handles(SelectionKey key, Selector selector) throws IOException {
//当触发了Accept事件,也就是有客户端请求进来
if (key.isAcceptable()) {
//获取ServerSocketChannel
ServerSocketChannel server = (ServerSocketChannel) key.channel();
//然后通过accept()方法接收客户端的请求,这个方法会返回客户端的SocketChannel,这一步和原生的ServerSocket类似
SocketChannel client = server.accept();
client.configureBlocking(false);
//把客户端的SocketChannel注册到Selector,并监听Read事件
client.register(selector, SelectionKey.OP_READ);
System.out.println("客户端[" + client.socket().getPort() + "]上线啦!");
}
//当触发了Read事件,也就是客户端发来了消息
if (key.isReadable()) {
SocketChannel client = (SocketChannel) key.channel();
//获取消息
String msg = receive(client);
System.out.println("客户端[" + client.socket().getPort() + "]:" + msg);
//把消息转发给其他客户端
sendMessage(client, msg, selector);
//判断用户是否退出
if (msg.equals("quit")) {
//解除该事件的监听
key.cancel();
//更新Selector
selector.wakeup();
System.out.println("客户端[" + client.socket().getPort() + "]下线了!");
}
}
}
//编码方式设置为utf-8,下面字符和字符串互转时用得到
private Charset charset = Charset.forName("UTF-8");
//接收消息的方法
private String receive(SocketChannel client) throws IOException {
//用缓冲区之前先清空一下,避免之前的信息残留
read_buffer.clear();
//把通道里的信息读取到缓冲区,用while循环一直读取,直到读完所有消息。因为没有明确的类似\n这样的结尾,所以要一直读到没有字节为止
while (client.read(read_buffer) > 0) ;
//把消息读取到缓冲区后,需要转换buffer的读写状态,不明白的看看前面的Buffer的讲解
read_buffer.flip();
return String.valueOf(charset.decode(read_buffer));
}
//转发消息的方法
private void sendMessage(SocketChannel client, String msg, Selector selector) throws IOException {
msg = "客户端[" + client.socket().getPort() + "]:" + msg;
//获取所有客户端,keys()与前面的selectedKeys不同,这个是获取所有已经注册的信息,而selectedKeys获取的是触发了的事件的信息
for (SelectionKey key : selector.keys()) {
//排除服务器和本客户端并且保证key是有效的,isValid()会判断Selector监听是否正常、对应的通道是保持连接的状态等
if (!(key.channel() instanceof ServerSocketChannel) && !client.equals(key.channel()) && key.isValid()) {
SocketChannel otherClient = (SocketChannel) key.channel();
write_buffer.clear();
write_buffer.put(charset.encode(msg));
write_buffer.flip();
//把消息写入到缓冲区后,再把缓冲区的内容写到客户端对应的通道中
while (write_buffer.hasRemaining()) {
otherClient.write(write_buffer);
}
}
}
}
public static void main(String[] args) {
new ChatServer(8888).start();
}
}
# ChatClient
public class ChatClient {
private static final int BUFFER = 1024;
private ByteBuffer read_buffer = ByteBuffer.allocate(BUFFER);
private ByteBuffer write_buffer = ByteBuffer.allocate(BUFFER);
//声明成全局变量是为了方便下面一些工具方法的调用,就不用try with resource了
private SocketChannel client;
private Selector selector;
private Charset charset = Charset.forName("UTF-8");
private void start() {
try {
client=SocketChannel.open();
selector=Selector.open();
client.configureBlocking(false);
//注册channel,并监听SocketChannel的Connect事件
client.register(selector, SelectionKey.OP_CONNECT);
//请求服务器建立连接
client.connect(new InetSocketAddress("127.0.0.1", 8888));
//和服务器一样,不停的获取触发事件,并做相应的处理
while (true) {
selector.select();
Set<SelectionKey> selectionKeys = selector.selectedKeys();
for (SelectionKey key : selectionKeys) {
handle(key);
}
selectionKeys.clear();
}
} catch (IOException e) {
e.printStackTrace();
}catch (ClosedSelectorException e){
//当用户输入quit时,在send()方法中,selector会被关闭,而在上面的无限while循环中,可能会使用到已经关闭了的selector。
//所以这里捕捉一下异常,做正常退出处理就行了。不会对服务器造成影响
}
}
private void handle(SelectionKey key) throws IOException {
//当触发connect事件,也就是服务器和客户端建立连接
if (key.isConnectable()) {
SocketChannel client = (SocketChannel) key.channel();
//finishConnect()返回true,说明和服务器已经建立连接。如果是false,说明还在连接中,还没完全连接完成
if(client.finishConnect()){
//新建一个新线程去等待用户输入
new Thread(new UserInputHandler(this)).start();
}
//连接建立完成后,注册read事件,开始监听服务器转发的消息
client.register(selector,SelectionKey.OP_READ);
}
//当触发read事件,也就是获取到服务器的转发消息
if(key.isReadable()){
SocketChannel client = (SocketChannel) key.channel();
//获取消息
String msg = receive(client);
System.out.println(msg);
//判断用户是否退出
if (msg.equals("quit")) {
//解除该事件的监听
key.cancel();
//更新Selector
selector.wakeup();
}
}
}
//获取消息
private String receive(SocketChannel client) throws IOException{
read_buffer.clear();
while (client.read(read_buffer)>0);
read_buffer.flip();
return String.valueOf(charset.decode(read_buffer));
}
//发送消息
public void send(String msg) throws IOException{
if(!msg.isEmpty()){
write_buffer.clear();
write_buffer.put(charset.encode(msg));
write_buffer.flip();
while (write_buffer.hasRemaining()){
client.write(write_buffer);
}
if(msg.equals("quit")){
selector.close();
}
}
}
public static void main(String[] args) {
new ChatClient().start();
}
}
# UserInputHandler
public class UserInputHandler implements Runnable {
ChatClient client;
public UserInputHandler(ChatClient chatClient) {
this.client=chatClient;
}
@Override
public void run() {
BufferedReader read=new BufferedReader(
new InputStreamReader(System.in)
);
while (true){
try {
String input=read.readLine();
client.send(input);
if(input.equals("quit"))
break;
} catch (IOException e) {
e.printStackTrace();
}
}
}
}
测试运行:之前用的是win10的终端运行的,以后直接用IDEA运行,方便些。不过一个类同时运行多个,以实现多个客户端的场景,需要先做以下设置
设置完后,就可以同时运行两个ChatClient了,上图中得Unnamed就是第二个ChatClient,选中后点击右边运行按钮就行了。效果如下:
# 参考文章
- https://www.cnblogs.com/lbhym/p/12698309.html