一、基本说明

  1. Netty 的组件设计:Netty 的主要组件有 Channel、EventLoop、ChannelFuture、ChannelHandler、ChannelPipe 等。
  2. ChannelHandler 充当了处理入站和出站数据的应用程序逻辑的容器。例如,实现 ChannelInboundHandler 接口(或 ChannelInboundHandlerAdapter),你就可以接收入站事件和数据,这些数据会被业务逻辑处理。当要给客户端发送响应时,也可以从 ChannelInboundHandler 冲刷数据。业务逻辑通常写在一个或者多个 ChannelInboundHandler 中。ChannelOutboundHandler 原理一样,只不过它是用来处理出站数据的。
  3. ChannelPipeline 提供了 ChannelHandler 链的容器。以客户端应用程序为例,如果事件的运动方向是从客户端到服务端的,那么我们称这些事件为出站的,即客户端发送给服务端的数据会通过 pipeline 中的一系列 ChannelOutboundHandler,并被这些 Handler 处理,反之则称为入站的。

image.png

二、编码解码器

  1. 当 Netty 发送或者接受一个消息的时候,就将会发生一次数据转换。入站消息会被解码:从字节转换为另一种格式(比如 java 对象);如果是出站消息,它会被编码成字节。

所以,编码器都是继承的 ChannelOutboundHandlerAdapter。解码器都是继承的ChannelInboundHandlerAdapter。如下
解码器—》入站
image.png
编码器—》出站
image.png

  1. Netty 提供一系列实用的编解码器,他们都实现了 ChannelInboundHadnler 或者 ChannelOutboundHandler 接口。在这些类中,channelRead 方法已经被重写了。以入站为例,对于每个从入站 Channel 读取的消息,这个方法会被调用。随后,它将调用由解码器所提供的 decode() 方法进行解码,并将已经解码的字节转发给 ChannelPipeline 中的下一个 ChannelInboundHandler。

    三、解码器 - ByteToMessageDecoder

    image.png

  2. 由于不可能知道远程节点是否会一次性发送一个完整的信息,tcp 有可能出现粘包拆包的问题,这个类会对入站数据进行缓冲,直到它准备好被处理.【后面有说TCP的粘包和拆包问题】。

  3. 一个关于 ByteToMessageDecoder 实例分析。

image.png
image.png
in.readInt()每次读取四个字节,假设 [3,7,9,2]是代表四个字节,那个每次读取四个字节就会放入到 list中。

关于 基本数据类型的的大小,参考 https://www.yuque.com/wangchao-volk4/fdw9ek/qk2yt8#tUBlY

四、Netty 的handler链的调用机制

1、实例要求

  1. 使用自定义的编码器和解码器来说明 Netty 的 handler 调用机制 客户端发送 long -> 服务器,服务端发送 long -> 客户端。

image.png

2、代码部分

MyClient

  1. public class MyClient {
  2. public static void main(String[] args) throws InterruptedException {
  3. NioEventLoopGroup group = new NioEventLoopGroup();
  4. try {
  5. Bootstrap bootstrap = new Bootstrap();
  6. bootstrap.group(group).channel(NioSocketChannel.class).handler(new MyClientInitializer());
  7. ChannelFuture channelFuture = bootstrap.connect("localhost", 6688).sync();
  8. channelFuture.channel().closeFuture().sync();
  9. } finally {
  10. group.shutdownGracefully();
  11. }
  12. }
  13. }

MyClientInitializer

  1. public class MyClientInitializer extends ChannelInitializer<SocketChannel> {
  2. @Override
  3. protected void initChannel(SocketChannel ch) throws Exception {
  4. ChannelPipeline pipeline = ch.pipeline();
  5. // 加入一个出站的 handler 对数据进行一个编码
  6. pipeline.addLast(new MyLongToByteEncoder());
  7. // 入站的 handler 进行解码,MyByteToLongDecoder
  8. pipeline.addLast(new MyByteToLongDecoder());
  9. // 加入一个自定义的 handler,处理业务逻辑
  10. pipeline.addLast(new MyClientHandler());
  11. }
  12. }

MyClientHandler

  1. public class MyClientHandler extends SimpleChannelInboundHandler<Long> {
  2. @Override
  3. protected void channelRead0(ChannelHandlerContext ctx, Long msg) throws Exception {
  4. System.out.println("服务器的ip=" + ctx.channel().remoteAddress());
  5. System.out.println("收到服务器消息=" + msg);
  6. }
  7. // 重写 channelActive 发送数据
  8. @Override
  9. public void channelActive(ChannelHandlerContext ctx) throws Exception {
  10. System.out.println("MyClientHandler 发送数据");
  11. ctx.writeAndFlush(123456L); // 发送的是一个 Long
  12. // 分析
  13. // 1、 adadadadadadadad 16个字节
  14. // 2、该处理器的前一个 handler 是 MyLongToByteEncoder
  15. // 3、MyLongToByteEncoder 父类 MessageToByteEncoder
  16. // 4、父类 MessageToByteEncoder 有个 write 方法(判断当前msg 是不是应该处理的类型,如果是就处理,如果不是就跳过encoder)
  17. /**
  18. * @Override
  19. * public void write(ChannelHandlerContext ctx, Object msg, ChannelPromise promise) throws Exception {
  20. * ByteBuf buf = null;
  21. * try {
  22. * if (acceptOutboundMessage(msg)) { // 判断当前msg 是不是应该处理的类型,如果是就处理,如果不是就跳过encoder
  23. * @SuppressWarnings("unchecked")
  24. * I cast = (I) msg;
  25. * buf = allocateBuffer(ctx, cast, preferDirect);
  26. * try {
  27. * encode(ctx, cast, buf);
  28. * } finally {
  29. * ReferenceCountUtil.release(cast);
  30. * }
  31. *
  32. * if (buf.isReadable()) {
  33. * ctx.write(buf, promise);
  34. * } else {
  35. * buf.release();
  36. * ctx.write(Unpooled.EMPTY_BUFFER, promise);
  37. * }
  38. * buf = null;
  39. * } else {
  40. * ctx.write(msg, promise);
  41. * }
  42. * } catch (EncoderException e) {
  43. * throw e;
  44. * } catch (Throwable e) {
  45. * throw new EncoderException(e);
  46. * } finally {
  47. * if (buf != null) {
  48. * buf.release();
  49. * }
  50. * }
  51. * }
  52. */
  53. // 5、因此我们编写 encoder 时,要注意传入的数据类型和处理的数据类型要一致
  54. // ctx.writeAndFlush(Unpooled.copiedBuffer("adadadadadadadad", CharsetUtil.UTF_8));
  55. }
  56. }

MyByteToLongDecoder

  1. public class MyByteToLongDecoder extends ByteToMessageDecoder {
  2. /**
  3. * decode 会根据接收的数据,被调用多次,直到确定没有新的元素被添加到 list,或者是 ByteBuf 没有更多的可读字节为止
  4. * 如果 List out 不为空,就会将list 的内容传递给下一个 channelinboundhandler 处理,该处理器的方法也会被调用多次。
  5. * @param ctx 上下文对象
  6. * @param in 入站的 ByteBuffer
  7. * @param out List 集合,将解码后的数据传给下一个 handler
  8. * @throws Exception
  9. */
  10. @Override
  11. protected void decode(ChannelHandlerContext ctx, ByteBuf in, List<Object> out) throws Exception {
  12. System.out.println("MyByteToLongDecoder 被调用");
  13. // 因为 Long 8个字节,必须判断有八个字节才能读取一个Long
  14. if (in.readableBytes() >= 8) {
  15. out.add(in.readLong());
  16. }
  17. }
  18. }

MyLongToByteEncoder

  1. public class MyLongToByteEncoder extends MessageToByteEncoder<Long> {
  2. /**
  3. * 编码的方法
  4. *
  5. * @param ctx
  6. * @param msg
  7. * @param out
  8. * @throws Exception
  9. */
  10. @Override
  11. protected void encode(ChannelHandlerContext ctx, Long msg, ByteBuf out) throws Exception {
  12. System.out.println("MyLongToByteEncoder encode 被调用");
  13. System.out.println("msg=" + msg);
  14. out.writeLong(msg);
  15. }
  16. }

MyServer

  1. public class MyServer {
  2. public static void main(String[] args) throws InterruptedException {
  3. NioEventLoopGroup bossGroup = new NioEventLoopGroup(1);
  4. NioEventLoopGroup workerGroup = new NioEventLoopGroup();
  5. try {
  6. ServerBootstrap serverBootstrap = new ServerBootstrap();
  7. serverBootstrap.group(bossGroup,workerGroup).channel(NioServerSocketChannel.class)
  8. // 自定义一个初始化类
  9. .childHandler(new MyServerInitializer());
  10. ChannelFuture channelFuture = serverBootstrap.bind(6688).sync();
  11. channelFuture.channel().closeFuture().sync();
  12. }finally {
  13. bossGroup.shutdownGracefully();
  14. workerGroup.shutdownGracefully();
  15. }
  16. }
  17. }

MyServerHandler

  1. public class MyServerHandler extends SimpleChannelInboundHandler<Long> {
  2. @Override
  3. protected void channelRead0(ChannelHandlerContext ctx, Long msg) throws Exception {
  4. System.out.println("从客户端" + ctx.channel().remoteAddress() + " 读取到long:" + msg);
  5. // 给客户端发送一个Long
  6. ctx.writeAndFlush(98765L);
  7. }
  8. @Override
  9. public void exceptionCaught(ChannelHandlerContext ctx, Throwable cause) throws Exception {
  10. cause.printStackTrace();
  11. ctx.channel();
  12. }
  13. }

MyServerInitializer

  1. public class MyServerInitializer extends ChannelInitializer<SocketChannel> {
  2. @Override
  3. protected void initChannel(SocketChannel ch) throws Exception {
  4. ChannelPipeline pipeline = ch.pipeline();
  5. // 入站的 handler 进行解码,MyByteToLongDecoder
  6. pipeline.addLast(new MyByteToLongDecoder());
  7. // 出站 handler 进行编码,MyLongToByteEncoder
  8. pipeline.addLast(new MyLongToByteEncoder());
  9. // 自定义的 handler 处理业务逻辑
  10. pipeline.addLast(new MyServerHandler());
  11. }
  12. }

3、注意点

父类 MessageToByteEncoder 有个 write 方法(判断当前msg 是不是应该处理的类型,如果是就处理,如果不是就跳过encoder)。因此我们编写 encoder 时,要注意传入的数据类型和处理的数据类型要一致。

  1. public void write(ChannelHandlerContext ctx, Object msg, ChannelPromise promise) throws Exception {
  2. ByteBuf buf = null;
  3. try {
  4. // 这里会判断
  5. if (this.acceptOutboundMessage(msg)) {
  6. I cast = msg;
  7. buf = this.allocateBuffer(ctx, msg, this.preferDirect);
  8. try {
  9. this.encode(ctx, cast, buf);
  10. } finally {
  11. ReferenceCountUtil.release(msg);
  12. }
  13. if (buf.isReadable()) {
  14. ctx.write(buf, promise);
  15. } else {
  16. buf.release();
  17. ctx.write(Unpooled.EMPTY_BUFFER, promise);
  18. }
  19. buf = null;
  20. } else {
  21. ctx.write(msg, promise);
  22. }
  23. } catch (EncoderException var17) {
  24. throw var17;
  25. } catch (Throwable var18) {
  26. throw new EncoderException(var18);
  27. } finally {
  28. if (buf != null) {
  29. buf.release();
  30. }
  31. }
  32. }

4、分析输出结果

客户端

image.png

服务端

image.png

分析

image.png

  1. 客户端有出站入站,服务端也有出站入站。
  2. 以客户端为例,如果有服务端传送的数据到达客户端,那么对于客户端来说就是入站; 如果客户端传送数据到服务端,那么对于客户端来说就是出站; 同理,对于服务端来说,也是一样的,有数据来就是入站,有数据输出就是出站 。
  3. 为什么服务端和客户端的Serverhandler都是继承 SimpleChannelInboundHandler,而没有继承ChannelOutboundHandler 出站类? 实际上当我们在handler中调用ctx.writeAndFlush()方法后,就会将数据交给 ChannelOutboundHandler 进行出站处理,只是我们没有去定义出站类而已,若有需求可以自己去实现ChannelOutboundHandler 出站类 。
  4. 总结就是客户端和服务端都有出站和入站的操作
    1. 服务端发数据给客户端:服务端—->出站—->Socket通道—->入站—->客户端
    2. 客户端发数据给服务端:客户端—->出站—->Socket通道—->入站—->服务端
  5. io.netty.channel.ChannelPipeline 也给出一些 图

image.png

五、其他编解码器

1、解码器 - ReplayingDecoder

  1. public abstract class ReplayingDecoder extends ByteToMessageDecoder。
  2. ReplayingDecoder 扩展了 ByteToMessageDecoder 类,使用这个类,我们不必调用 readableBytes() 方法,也就不用判断还有没有足够的数据来读取。参数 S 指定了用户状态管理的类型,其中 Void 代表不需要状态管理。
  3. 应用实例:使用 ReplayingDecoder 编写解码器,对前面的案例进行简化[案例演示]。

    1. public class MyByteToLongDecoder2 extends ReplayingDecoder<Void> {
    2. @Override
    3. protected void decode(ChannelHandlerContext ctx, ByteBuf in, List<Object> out) throws Exception {
    4. System.out.println("MyByteToLongDecoder 被调用");
    5. // 因为 Long 8个字节,必须判断有八个字节才能读取一个Long
    6. out.add(in.readLong());
    7. // 这步不需要了
    8. // if (in.readableBytes() >= 8) {
    9. // out.add(in.readLong());
    10. // }
    11. }
    12. }
  4. ReplayingDecoder 使用方便,但它也有一些局限性:

    • 并不是所有的 ByteBuf 操作都被支持,如果调用了一个不被支持的方法,将会抛出一个 UnsupportedOperationException。
    • ReplayingDecoder 在某些情况下可能稍慢于 ByteToMessageDecoder,例如网络缓慢并且消息格式复杂时,消息会被拆成了多个碎片,速度变慢。

      2、其他编解码器

  5. LineBasedFrameDecoder:这个类在 Netty 内部也有使用,它使用行尾控制字符(\n或者\r\n)作为分隔符来解析数据。

  6. DelimiterBasedFrameDecoder:使用自定义的特殊字符作为消息的分隔符。
  7. HttpObjectDecoder:一个 HTTP 数据的解码器
  8. LengthFieldBasedFrameDecoder:通过指定长度来标识整包消息,这样就可以自动的处理黏包和半包消息。

解码器。。。
image.png
编码器。。。
image.png