1. BIO

1.1 MySocketBIOv1

  1. import java.io.BufferedReader;
  2. import java.io.IOException;
  3. import java.io.InputStream;
  4. import java.io.InputStreamReader;
  5. import java.net.ServerSocket;
  6. import java.net.Socket;
  7. public class MySocketBIOv1 {
  8. public static void main(String[] args) throws IOException {
  9. //开启9000端口的监听
  10. ServerSocket serverSocket = new ServerSocket(9000, 20);
  11. System.out.println("已开启9000端口监听");
  12. //程序会卡死阻塞,直到有新的TCP进来。
  13. Socket client = serverSocket.accept();
  14. System.out.println("接收到一个新的连接:"+client.getRemoteSocketAddress());
  15. InputStream inputStream = client.getInputStream();
  16. //用buffer缓冲区读,读的快一点
  17. BufferedReader reader = new BufferedReader(new InputStreamReader(inputStream));
  18. for (;;){
  19. String dataLine = reader.readLine(); //读取一行数据
  20. if (dataLine != null) {
  21. System.out.println("读取到客户端一行数据:"+dataLine);//打印
  22. }else {
  23. System.out.println("客户端已关闭");
  24. client.close();
  25. break;
  26. }
  27. }
  28. }
  29. }

好了。启动!然后使用linux的nc连接

  1. wangfan@ubuntu:~/桌面$ nc 192.168.235.1 9000
  2. wangfan@ubuntu:~/桌面$ nc 192.168.235.1 9000
  3. 111
  4. 222
  5. 333
  6. 444
  7. 555
  8. 666
  9. 777
  10. ^C
  11. wangfan@ubuntu:~/桌面$

项目打印:

已开启9000端口监听接收到一个新的连接:/192.168.235.137:49122 读取到客户端一行数据:111 读取到客户端一行数据:222 读取到客户端一行数据:333 读取到客户端一行数据:444 读取到客户端一行数据:555 读取到客户端一行数据:666 读取到客户端一行数据:777 客户端已关闭

上面的代码只能有一个客户端连接,使用完就关闭了。 下面这个会支持多个客户端连接进来。

1.2 MySocketBIOv2

  1. import java.io.BufferedReader;
  2. import java.io.IOException;
  3. import java.io.InputStream;
  4. import java.io.InputStreamReader;
  5. import java.net.ServerSocket;
  6. import java.net.Socket;
  7. public class MySocketBIOv2 {
  8. public static void main(String[] args) throws IOException {
  9. //开启9000端口的监听
  10. ServerSocket serverSocket = new ServerSocket(9000, 20);
  11. System.out.println("已开启9000端口监听");
  12. for (;;){
  13. //程序会卡死阻塞,直到有新的TCP进来。
  14. Socket client = serverSocket.accept();
  15. System.out.println("接收到一个新的连接:"+client.getRemoteSocketAddress());
  16. InputStream inputStream = client.getInputStream();
  17. //用buffer缓冲区读,读的快一点
  18. BufferedReader reader = new BufferedReader(new InputStreamReader(inputStream));
  19. for (;;){
  20. String dataLine = reader.readLine(); //读取一行数据
  21. if (dataLine != null) {
  22. System.out.println("读取到客户端一行数据:"+dataLine);
  23. }else {
  24. System.out.println("客户端已关闭");
  25. client.close();
  26. break;
  27. }
  28. }
  29. }
  30. }
  31. }

好了。启动!然后使用linux的nc连接

  1. wangfan@ubuntu:~/桌面$ nc 192.168.235.1 9000
  2. 111
  3. 222
  4. ^C
  5. wangfan@ubuntu:~/桌面$ nc 192.168.235.1 9000
  6. 333
  7. 444
  8. ^C
  9. wangfan@ubuntu:~/桌面$ nc 192.168.235.1 9000
  10. 555
  11. 666
  12. ^C
  13. wangfan@ubuntu:~/桌面$

项目打印:

已开启9000端口监听接收到一个新的连接:/192.168.235.137:49140 读取到客户端一行数据:111 读取到客户端一行数据:222 客户端已关闭 接收到一个新的连接:/192.168.235.137:49142 读取到客户端一行数据:333 读取到客户端一行数据:444 客户端已关闭 接收到一个新的连接:/192.168.235.137:49144 读取到客户端一行数据:555 读取到客户端一行数据:666 客户端已关闭

好了,可以支持多个客户端了,但是还有一个弊端,就是,连接进来的只能是顺序的,加上前面的客户端一直不断开,那么后面的客户端就要永远排队。所以。我们是用多线程再次改进。

1.3 MySocketBIOv3

  1. import java.io.BufferedReader;
  2. import java.io.IOException;
  3. import java.io.InputStream;
  4. import java.io.InputStreamReader;
  5. import java.net.ServerSocket;
  6. import java.net.Socket;
  7. public class MySocketBIOv3 {
  8. public static void main(String[] args) throws IOException {
  9. //开启9000端口的监听
  10. ServerSocket serverSocket = new ServerSocket(9000, 20);
  11. System.out.println("已开启9000端口监听");
  12. for (;;){
  13. //程序会卡死阻塞,直到有新的TCP进来。
  14. Socket client = serverSocket.accept();
  15. new Thread(()->{
  16. System.out.println("接收到一个新的连接:"+client.getRemoteSocketAddress());
  17. InputStream inputStream = null;
  18. try {
  19. inputStream = client.getInputStream();
  20. //用buffer缓冲区读,读的快一点
  21. BufferedReader reader = new BufferedReader(new InputStreamReader(inputStream));
  22. for (;;){
  23. String dataLine = reader.readLine(); //读取一行数据
  24. if (dataLine != null) {
  25. System.out.println("读取到客户端"+client.getRemoteSocketAddress()+"一行数据:"+dataLine);
  26. }else {
  27. //读取不到则为客户端关闭
  28. System.out.println("客户端"+client.getRemoteSocketAddress()+"已关闭");
  29. client.close();
  30. break;
  31. }
  32. }
  33. } catch (IOException e) {
  34. e.printStackTrace();
  35. }
  36. }).start();
  37. }
  38. }
  39. }

好了。启动!然后使用linux的nc连接

  1. wangfan@ubuntu:~/桌面$ nc 192.168.235.1 9000
  2. 111
  3. 222
  4. ^C
  5. wangfan@ubuntu:~/桌面$

再打开一个标签,再次连接

  1. wangfan@ubuntu:~/桌面$ nc 192.168.235.1 9000
  2. 333
  3. 444
  4. ^C
  5. ^C
  6. wangfan@ubuntu:~/桌面$

项目打印:

已开启9000端口监听接收到一个新的连接:/192.168.235.137:49152 读取到客户端/192.168.235.137:49152一行数据:111 读取到客户端/192.168.235.137:49152一行数据:222 接收到一个新的连接:/192.168.235.137:49154 读取到客户端/192.168.235.137:49154一行数据:333 读取到客户端/192.168.235.137:49154一行数据:444 读取到客户端/192.168.235.137:49154一行数据: 客户端/192.168.235.137:49154已关闭 客户端/192.168.235.137:49152已关闭

好了。BIO最多只能通过多线程支持到这种程度了,不能做更进一步的优化了。但是BIO的缺陷已经显露出来了。

BIO的缺陷:
因为接收TCP握手以及握手成功后接收数据是阻塞操作,也就是上面的serverSocket.accept();reader.readLine();。所以系统不得不启用多线程处理,但是这样随着客户端连接数量越来越大。系统启动的多线程越来越多,cpu大部分时间消耗在线程之间切换上。严重浪费资源。

归根到底:BIO的根本缺陷在于它有2个是阻塞操作。即:接收到连接的阻塞,和接收数据的阻塞。

2. NIO

为解决BIO的阻塞操作的原因造成系统资源严重浪费,Linux的kernel推出了NIO的API。
即调用serverSocket.accept();reader.readLine(); 这两个API时不再是“接收”的意思,而是“询问”的意思。 即有连接/数据就会有返回,没有则返回无。 这样线程不用卡住。

2.1 MySocketNIOv1

  1. import java.io.IOException;
  2. import java.net.InetSocketAddress;
  3. import java.nio.ByteBuffer;
  4. import java.nio.channels.ServerSocketChannel;
  5. import java.nio.channels.SocketChannel;
  6. public class MySocketNIOv1 {
  7. public static void main(String[] args) throws IOException {
  8. //开启9000端口的监听并设置为非阻塞
  9. ServerSocketChannel serverSocketChannel = ServerSocketChannel.open();
  10. serverSocketChannel.bind(new InetSocketAddress(9000));
  11. //设置为非阻塞。重点!!!!!
  12. serverSocketChannel.configureBlocking(false);
  13. System.out.println("已开启9000端口监听...");
  14. //不断轮询接收客户端连接
  15. for (;;){
  16. //接受客户端的连接,而且这一步不阻塞,如果没有客户端连接进来,则client会返回null
  17. SocketChannel client = serverSocketChannel.accept();//不会阻塞? -1 NULL
  18. if (client != null) {
  19. new Thread(()->{
  20. try {
  21. System.out.println("接收到一个新的连接:"+client.getRemoteAddress().toString());
  22. //重点!!!!客户端已连接成功,设置接收数据不阻塞
  23. client.configureBlocking(false);
  24. //不断轮询接收客户端发过来的数据
  25. for (;;){
  26. ByteBuffer buffer = ByteBuffer.allocateDirect(4096);
  27. int readBytesNum = client.read(buffer);
  28. //读取数据
  29. if ( readBytesNum > 0 ){
  30. buffer.flip();
  31. byte[] readDataBytes = new byte[buffer.limit()];
  32. buffer.get(readDataBytes);
  33. String readData = new String(readDataBytes);
  34. System.out.println("读取到客户端"+client.getRemoteAddress()+"一行数据:"+readData);
  35. buffer.clear();
  36. }else if (readBytesNum == -1){//客户端关闭
  37. System.out.println("客户端"+client.getRemoteAddress()+"已关闭");
  38. client.close();
  39. break;
  40. }
  41. }
  42. } catch (IOException e) {
  43. e.printStackTrace();
  44. }
  45. }).start();
  46. }
  47. }
  48. }
  49. }

好了。启动!然后使用linux的nc连接

  1. wangfan@ubuntu:~/桌面$ nc 192.168.235.1 9000
  2. aaa
  3. bbb
  4. ^C
  5. wangfan@ubuntu:~/桌面$

再打开一个标签,再次连接

  1. wangfan@ubuntu:~/桌面$ nc 192.168.235.1 9000
  2. ccc
  3. ddd
  4. ^C
  5. wangfan@ubuntu:~/桌面$

再打开一个标签,再次连接

  1. wangfan@ubuntu:~/桌面$ nc 192.168.235.1 9000
  2. eee
  3. fff
  4. ^C
  5. wangfan@ubuntu:~/桌面$

项目打印:

已开启9000端口监听…接收到一个新的连接:/192.168.235.137:49178 读取到客户端/192.168.235.137:49178一行数据:aaa

读取到客户端/192.168.235.137:49178一行数据:bbb

接收到一个新的连接:/192.168.235.137:49180 读取到客户端/192.168.235.137:49180一行数据:ccc

读取到客户端/192.168.235.137:49180一行数据:ddd

接收到一个新的连接:/192.168.235.137:49182 读取到客户端/192.168.235.137:49182一行数据:eee

读取到客户端/192.168.235.137:49182一行数据:fff

客户端/192.168.235.137:49182已关闭 客户端/192.168.235.137:49178已关闭 客户端/192.168.235.137:49180已关闭

2.2 MySocketNIOv2

  1. import java.io.IOException;
  2. import java.net.InetSocketAddress;
  3. import java.nio.ByteBuffer;
  4. import java.nio.channels.ServerSocketChannel;
  5. import java.nio.channels.SocketChannel;
  6. import java.util.Iterator;
  7. import java.util.LinkedList;
  8. public class MySocketNIOv2 {
  9. public static void main(String[] args) throws IOException {
  10. //使用LinkedList收集所有已建立连接的客户端
  11. LinkedList<SocketChannel> clients = new LinkedList<>();
  12. //开启9000端口的监听并设置为非阻塞
  13. ServerSocketChannel serverSocketChannel = ServerSocketChannel.open();
  14. serverSocketChannel.bind(new InetSocketAddress(9000));
  15. //设置为非阻塞。重点!!!!!
  16. serverSocketChannel.configureBlocking(false);
  17. System.out.println("已开启9000端口监听...");
  18. //起新线程不断轮询接收客户端连接
  19. new Thread(()->{
  20. for (;;){
  21. try {
  22. synchronized (MySocketNIOv2.class){
  23. //接受客户端的连接,而且这一步不阻塞,如果没有客户端连接进来,则client会返回null
  24. SocketChannel client = serverSocketChannel.accept();
  25. if (client != null) {
  26. System.out.println("接收到一个新的连接:"+client.getRemoteAddress().toString());
  27. //重点!!!!客户端已连接成功,设置接收数据不阻塞
  28. client.configureBlocking(false);
  29. //不断轮询接收客户端发过来的数据
  30. clients.add(client);
  31. }
  32. }
  33. } catch (IOException e) {
  34. e.printStackTrace();
  35. }
  36. }
  37. }).start();
  38. //起新线程不断轮询clients,从里面拿数据
  39. new Thread(()->{
  40. //不断轮询clients
  41. for (;;){
  42. synchronized (MySocketNIOv2.class){
  43. Iterator<SocketChannel> iterator = clients.iterator();
  44. while (iterator.hasNext()){
  45. SocketChannel client = iterator.next();
  46. //不断轮询接收客户端发过来的数据
  47. for (;;){
  48. try {
  49. //开辟一个4096字节的buffer
  50. ByteBuffer buffer = ByteBuffer.allocateDirect(4096);
  51. int readBytesNum = client.read(buffer);
  52. if ( readBytesNum > 0 ){
  53. buffer.flip();
  54. byte[] readDataBytes = new byte[buffer.limit()];
  55. buffer.get(readDataBytes);
  56. String readData = new String(readDataBytes);
  57. System.out.println("读取到客户端"+client.getRemoteAddress()+"一行数据:"+readData);
  58. buffer.clear();
  59. }else if (readBytesNum == -1){
  60. System.out.println("客户端"+client.getRemoteAddress()+"已关闭");
  61. client.close();
  62. iterator.remove();
  63. break;
  64. }
  65. } catch (IOException e) {
  66. e.printStackTrace();
  67. }
  68. }
  69. }
  70. }
  71. }
  72. }).start();
  73. System.in.read();
  74. }
  75. }

好了。启动!然后使用linux的nc连接

  1. [root@192 ~]# nc 192.168.235.1 9000
  2. 123
  3. 234
  4. 345
  5. 456
  6. 567
  7. ^C
  8. [root@192 ~]#

项目打印:

已开启9000端口监听…接收到一个新的连接:/192.168.235.133:36198 读取到客户端/192.168.235.133:36198一行数据:123

读取到客户端/192.168.235.133:36198一行数据:234

读取到客户端/192.168.235.133:36198一行数据:345

读取到客户端/192.168.235.133:36198一行数据:456

读取到客户端/192.168.235.133:36198一行数据:567

客户端/192.168.235.133:36198已关闭

上面是优化后的NIO模型,这个模型放弃了一个连接建立一个线程的方式,而是使用两个线程,一个线程不断接收客户端连接,接收到的客户端放入到一个链表里面,另一个线程不断轮询链表内的客户端,从客户端里面读数据。
MySocketNIOv2看似解决了多线程的问题,但是遇到另外一个新的问题。那就是, LinkedList里面的元素都是排队取数据的,假设其中一个的数据很多,取出数据很慢,这样会阻塞其他客户端取出数据。所以这个时候我们可以把有数据到达的客户端启抛出一个线程单独处理数据的读取。

2.3 MySocketNIOv3

  1. import java.io.IOException;
  2. import java.net.InetSocketAddress;
  3. import java.nio.ByteBuffer;
  4. import java.nio.channels.ServerSocketChannel;
  5. import java.nio.channels.SocketChannel;
  6. import java.util.Iterator;
  7. import java.util.LinkedList;
  8. public class MySocketNIOv3 {
  9. public static void main(String[] args) throws IOException {
  10. //使用LinkedList收集所有已建立连接的客户端
  11. LinkedList<SocketChannel> clients = new LinkedList<>();
  12. //开启9000端口的监听并设置为非阻塞
  13. ServerSocketChannel serverSocketChannel = ServerSocketChannel.open();
  14. serverSocketChannel.bind(new InetSocketAddress(9000));
  15. //设置为非阻塞。重点!!!!!
  16. serverSocketChannel.configureBlocking(false);
  17. System.out.println("已开启9000端口监听...");
  18. //起新线程不断轮询接收客户端连接
  19. new Thread(()->{
  20. for (;;){
  21. try {
  22. synchronized (MySocketNIOv3.class){
  23. //接受客户端的连接,而且这一步不阻塞,如果没有客户端连接进来,则client会返回null
  24. SocketChannel client = serverSocketChannel.accept();
  25. if (client != null) {
  26. System.out.println("接收到一个新的连接:"+client.getRemoteAddress().toString());
  27. //重点!!!!客户端已连接成功,设置接收数据不阻塞
  28. client.configureBlocking(false);
  29. //不断轮询接收客户端发过来的数据
  30. clients.add(client);
  31. }
  32. }
  33. } catch (IOException e) {
  34. e.printStackTrace();
  35. }
  36. }
  37. }).start();
  38. //起新线程不断轮询clients,从里面拿数据
  39. new Thread(()->{
  40. //不断轮询clients
  41. for (;;){
  42. synchronized (MySocketNIOv3.class){
  43. Iterator<SocketChannel> iterator = clients.iterator();
  44. while (iterator.hasNext()){
  45. SocketChannel client = iterator.next();
  46. if (!client.isConnected()){
  47. iterator.remove();
  48. }
  49. //不断轮询接收客户端发过来的数据
  50. for (;;){
  51. try {
  52. //开辟一个4096字节的buffer
  53. ByteBuffer buffer = ByteBuffer.allocateDirect(4096);
  54. String data = MySocketNIOv3.readDataFromClient(buffer, client);
  55. if (data == null){
  56. System.out.println("客户端"+client.getRemoteAddress()+"已关闭");
  57. client.close();
  58. iterator.remove();
  59. break;
  60. }
  61. if (!data.equals("")){
  62. String finalData = data;
  63. new Thread(()->{
  64. try {
  65. System.out.println("读取到客户端"+client.getRemoteAddress()+"一行数据:"+ finalData);
  66. while (true){
  67. buffer.flip();
  68. String data1 = MySocketNIOv3.readDataFromClient(buffer, client);
  69. if (data1 == null){
  70. System.out.println("客户端"+client.getRemoteAddress()+"已关闭");
  71. client.close();
  72. break;
  73. }else if (!data1.equals("")){
  74. System.out.println("读取到客户端"+client.getRemoteAddress()+"一行数据:"+ data1);
  75. }
  76. }
  77. } catch (IOException e) {
  78. e.printStackTrace();
  79. }
  80. }).start();
  81. }
  82. } catch (IOException e) {
  83. e.printStackTrace();
  84. }
  85. }
  86. }
  87. }
  88. }
  89. }).start();
  90. System.in.read();
  91. }
  92. public static String readDataFromClient(ByteBuffer buffer,SocketChannel client){
  93. try {
  94. int readBytesNum = client.read(buffer);
  95. if (readBytesNum > 0){
  96. buffer.flip();
  97. byte[] readDataBytes = new byte[buffer.limit()];
  98. buffer.get(readDataBytes);
  99. String readData = new String(readDataBytes);
  100. buffer.clear();
  101. return readData;
  102. }
  103. if (readBytesNum == -1){
  104. return null;
  105. }else {
  106. return "";
  107. }
  108. } catch (IOException e) {
  109. e.printStackTrace();
  110. return null;
  111. }
  112. }
  113. }
  1. import java.net.InetSocketAddress;
  2. import java.nio.ByteBuffer;
  3. import java.nio.channels.ServerSocketChannel;
  4. import java.nio.channels.SocketChannel;
  5. import java.util.LinkedList;
  6. public class SocketNIO {
  7. public static void main(String[] args) throws Exception {
  8. //所有连接进来的客户端的集合
  9. LinkedList<SocketChannel> clients = new LinkedList<>();
  10. ServerSocketChannel ss = ServerSocketChannel.open(); //服务端开启监听:接受客户端
  11. ss.bind(new InetSocketAddress(9090));
  12. //设置为NONBLOCKING,不阻塞。
  13. ss.configureBlocking(false); //重点 OS NONBLOCKING!!! //只让接受客户端 不阻塞
  14. //不断轮询接收客户端连接
  15. while (true) {
  16. //接受客户端的连接,而且这一步不阻塞,如果没有客户端连接进来,则client会返回null
  17. SocketChannel client = ss.accept(); //不会阻塞? -1 NULL
  18. if (client == null) {
  19. //System.out.println("没有客户端连接进来..");
  20. } else {
  21. //客户端已连接成功,设置接收数据不阻塞
  22. client.configureBlocking(false); //重点 socket(服务端的listen socket<连接请求三次握手后,往我这里扔,我去通过accept 得到 连接的socket>,连接socket<连接后的数据读写使用的> )
  23. int port = client.socket().getPort(); //客户端的端口号
  24. System.out.println("client..port: " + port);
  25. clients.add(client);
  26. }
  27. ByteBuffer buffer = ByteBuffer.allocateDirect(4096); //可以在堆里 堆外
  28. //遍历已经链接进来的客户端能不能读写数据
  29. for (SocketChannel c : clients) { //串行化!!!! 多线程!!
  30. int num = c.read(buffer); // >0 -1 0 //不会阻塞
  31. if (num > 0) {
  32. buffer.flip();
  33. byte[] aaa = new byte[buffer.limit()];
  34. buffer.get(aaa);
  35. String b = new String(aaa);
  36. System.out.println(c.socket().getPort() + " : " + b);
  37. buffer.clear();
  38. }
  39. }
  40. }
  41. }
  42. }

这样的不阻塞操作可以让线程不在浪费,只使用一个线程即可遍历所有连接进来的client。并读写数据。
但是这样的模型,如果遇到客户端数量再一次增加一个量级的客户端连接,依然不够用, 如果遇到C10K的问题。每次一循环就要,循环10000次,而且由于客户端的read操作都是一次用户态向内核态的切换,每循环一次就是10000次切换,这对于系统来说损失很大造成的资源浪费。

NIO模型的最大根本弊端在于:用户态和内核态的切换过于频繁,导致的性能下降。多路复用技术就是解决这个问题。

3. 多路复用

多路复用说的是:select、poll以及epoll的集合。也就是说:select、poll以及epoll都属于多路复用。

3.1 select

3.2 poll

3.3 epoll