当前播放: 13 | 源码剖析:Netty对处理粘包/半包的支持
00:00 / 00:00
高清
  • 高清
1.0x
  • 2.0x
  • 1.5x
  • 1.25x
  • 1.0x
  • 0.5x
网页全屏
全屏
00:00
付费课程,可试看
课程目录
第一章:初识Netty:背景、现状与趋势 (7讲)
01 | 课程介绍
免费
02 | 内容综述
免费
03 | 揭开Netty面纱
免费
04 | 为什么舍近求远:不直接用JDK NIO?
免费
05 | 为什么孤注一掷:独选Netty?
免费
06 | Netty的前尘往事
07 | Netty的现状与趋势
第二章:Netty源码:从“点”(领域知识)的角度剖析 (13讲)
08 | Netty怎么切换三种I/O模式?
09 | 源码剖析:Netty对I/O模式的支持
10 | Netty如何支持三种Reactor?
11 | 源码剖析:Netty对Reactor的支持
12 | TCP粘包/半包Netty全搞定
13 | 源码剖析:Netty对处理粘包/半包的支持
14 | 常用的“二次”编解码方式
15 | 源码剖析:Netty对常用编解码的支持
16 | keepalive与idle监测
17 | 源码剖析:Netty对keepalive与idle监测的支持
18 | Netty的那些“锁”事
19 | Netty如何玩转内存使用
20 | 源码解析:Netty对堆外内存和内存池的支持
第三章:Netty源码:从“线”(请求处理)的角度剖析 (8讲)
21 | Netty代码编译与总览
22 | 源码剖析:启动服务
23 | 源码剖析:构建连接
24 | 源码剖析:接收数据
25 | 源码剖析:业务处理
26 | 源码剖析:发送数据
27 | 源码剖析:断开连接
28 | 源码剖析:关闭服务
第四章:Netty实战入门:写一个“玩具”项目 (8讲)
29 | 编写网络应用程序的基本步骤
30 | 案例介绍和数据结构设计
31 | 实现服务器端编解码
32 | 实现一个服务器端
33 | 实现客户端编解码
34 | 完成一个客户端雏形
35 | 引入"响应分发"完善客户端
36 | Netty编码中易错点解析
第五章:Netty实战进阶:把“玩具”变成产品 (18讲)
37 | 调优参数:调整System参数夯实基础
38 | 调优参数:权衡Netty核心参数
39 | 调优参数:图解费脑的三个参数
40 | 跟踪诊断:如何让应用易诊断?
41 | 跟踪诊断:应用能可视,心里才有底
42 | 跟踪诊断:让应用内存不“泄露”?
43 | 优化使用:用好自带注解省点心
44 | 优化使用:“整改”线程模型让"响应"健步如飞
45 | 优化使用:增强写,延迟与吞吐量的抉择
46 | 优化使用:如何让应用丝般“平滑”?
47 | 优化使用:为不同平台开启native
48 | 安全增强:设置“高低水位线”等保护好自己
49 | 安全增强:启用空闲监测
50 | 安全增强:简单有效的黑白名单
51 | 安全增强:少不了的自定义授权
52 | 安全增强:拿来即用的SSL-对话呈现表象
53 | 安全增强:拿来即用的SSL-抓包暴露本质
54 | 安全增强:拿来即用的SSL-轻松融入案例
第六章:成长为Netty的贡献者 (6讲)
55 | Cassandra如何使用Netty ?
56 | Dubbo如何使用Netty ?
57 | Hadoop如何使用Netty ?
58 | 赏析Netty之美
59 | 如何给Netty贡献代码?
60 | 结课测试&结束语
13 | 源码剖析:Netty对处理粘包/半包的支持

13 | 源码剖析:Netty对处理粘包/半包的支持

傅健
Netty源码贡献者、Cisco高级软件工程师
全集6952
新人首单 ¥29.9 原价 ¥129
7
本节摘要
登录 后留言

精选留言(13)

  • z.l
    看了源码,说下我对两种方式的Cumulator的理解。我觉得使用哪种主要看decode实现,如果decode的实现包含很多随机读(比如读取第4-8个字节这种),这种情况肯定是基于复制的Cumulator更好,因为复制方式是连续内存,随机读时间复杂度为O(1), 而组合方式是基于数组实现,由于不确定目标内容在数组的位置,所以 需要遍历数组,效率偏低。
    2020-02-08
    4
  • 冬渐暖
    在编码数据前,先对数据进行积累Cumulator。解码的时候先判断是否小于固定的长度,小的话就是包不全也就不去解码数据,等于的话就直接解(没问题),大于的话就解对应长度的,多的那部分还是在积累器里面,等下次用

    关于Cumulator,先看看空间够不够,不够扩容,然后
    有两种方式
    1.内存复制(默认)
    2.像list一样组合起来
    内容复制:就是把数据复制到内存里面去
    关于您说内存复制是默认的,,,buff是子类的decoder搞出来的,所以不能说哪个是绝对的好,但为什么内存复制更加通用所以才选择这个啊.........................?

    netty有三个编码器,对应上节的三个找边界的,
    其中有个固定长度的,可以设置偏移量等一系列参数,比如传进来的数据为“18cm不含头”,描述符为“7” ,下次读的时候就往右偏一个字段,不读描述符的那个“7”

    作者回复: 因为组合的方式没有经过充分的证明:证明在所有场景下肯定比内存复制的性能要好(毕竟组合方式的指针维护复杂些,如果解码是把组合的直接能拆出来就可以用,那明显会好,例如ssl hanlder里面就有显示设置为组合方式的例子,但是大多不是如此用,仅有的测试也只是表明好一点而已),所以自然默认就用原始的那种方式(也就是所有人一上来就会想到的通用的内存复制的方式),而不是直接切换到后来加的组合方式,只是提供了setCumulator方法让我们有切换的选择。
    总结下:不是说1+1不等于2,而是说大家都这么觉得,但是没有人去有力的证明,所以保持怀疑的态度,就保守起见了,没有改默认的。

    2019-11-14
    1
  • 蓝魔丶
    老师,视频里讲到的数据收集器有两种方式,一种内存复制,一种组合方式,这两种方式netty选择内存复制作为默认方式,视频中也说明了原因,但是感觉不够深入,听着还是没有说服力,后面会有深入分析嘛?

    作者回复: 这是个好问题,正好前面(或许是后面)也有一个人问这个问题,我直接复制下给他的回复吧:
    因为组合的方式没有经过充分的证明:证明在所有场景下肯定比内存复制的性能要好(毕竟组合方式的指针维护复杂些,如果解码是把组合的直接能拆出来就可以用,那明显会好,例如ssl hanlder里面就有显示设置为组合方式的例子,但是大多不是如此用,仅有的测试也只是表明好一点点而已),所以自然默认就还是用原始的那种方式(也就是所有人一上来就会想到的通用的内存复制的方式),而不是直接切换到后来加的组合方式,另外提供了setCumulator方法让我们有切换的选择。

    总结下:不是说1+1不等于2,而是说大家都这么觉得,但是没有人去有力的证明,所以保持怀疑的态度,就保守起见了,没有改默认的。

    2019-11-03
    1
  • 瓜瓜
    lengthFieldLength是从流中取出4个字节(java中int占4个字节)作为该字段的值吗??包括lengthFieldOffset等等字段也是一样吗??望老师解答
    2020-02-15
  • delete is create
    如果客户端传的是16进制字节流,用DelimiterBasedFrameDecoder做分隔符就不好使了,客户端必须发送字符串才行 老师怎么解决这个问题

    作者回复: 你这个问题是你自己假想的?因为最终交给底层的(jdk的)的数据类型还是byte,所以你肯定要转的,所以你的16进制最终还是要与byte互转,所以再加一层编解码就行,或者直接在已有的编解码里面转也可以。另外,DelimiterBasedFrameDecoder说是分隔符,但是还是byte:io.netty.handler.codec.DelimiterBasedFrameDecoder#delimiters

    2019-12-25
    1
  • Sebastian
    不应该先写个netty使用的demo吗。从来没接触过netty的看着有点蒙

    作者回复: 可以先看第四章,但是直接看,就算是demo,缺乏很多背景知识也难懂,所以才把相关知识放前面了,你可以结合着看看,现在都更新完了。谢谢

    2019-12-25
    1
  • polk
    讲那四个参数,打开画图或者notepad写两个例子不就一目了然了,光对着源码我又得看很多遍

    作者回复: 因为他的源码那个注释很详细,里面也有图(虽然不太好看),所以对着源码说了,哈

    2019-12-04
  • 陆凌枫
    老师,课程看得很吃力,特别是一讲源码。想问下学习Netty之前,需要先补下nio相关知识点吗?或者是其它相关知识点?

    作者回复: 推荐一本 java tcp ip socket网络编程,默认很多没有讲的前提性的基础知识可以看看这本。

    2019-11-02
  • reed7
    Netty 在运行时是依据什么信息决定使用哪个 decoder 的?

    作者回复: 自己代码指定的,也就是你定义了你的传输信息结构,或者说叫pdu后,你就确定了你用那种解码了,然后你就找哪些支持了,显示设置下,找不到就只能自己写了。就是你告诉他怎么解他才知道,它自己不自动判断

    2019-10-28
  • NoBody
    老师你好,对于java网络编程没有实际经验只有了解的情况下的开发人员来说。我觉得这样的课程安排其实有点欠妥。源码层面是否应该在掌握了一些基本概念和基本使用的情况下去认识呢?

    作者回复: 这是两种学习方法,但是netty的使用真的很简单,所以才把这个顺序掉过来了😂,你可以尝试换个方法看,从后往前看,然后再反过来看下。

    2019-10-27
  • WING
    老师,这节课中提到内存复制和非内存复制,后面有两节课讲内存的,会不会设计到这方面?很想了解netty作者在这方面的巧妙之处。

    作者回复: 后面确实有一节提及内存相关了,主要说的是堆外内存、内存池等相关的。

    2019-10-24
  • 偶然~zZ
    希望老师多一点实战教学 一边实战 一边解读 光讲源码 映像不是很熟深刻

    作者回复: 这个是安排在第四章和第五章,先大体看下源码有个印象,再实战可能效果好点,所以才这么安排的

    2019-10-17
  • 加载中……
    老师好,请教个问题。
    对于Netty来说,如果一次解码,因为长度不够没解出来,上层的处理代码是不是永远也感知不到这部分数据?

    作者回复: 不知道您这里说的上层是指什么?如果是业务层,确实是的,它先把不够数据屯起来,所以不会往外传,传也没用,因为不完整

    2019-10-16
收起评论
看过的人还看
数据结构与算法之美

王争  前Google工程师

80讲 | 89702 人已学习

新人首单 ¥29.9 原价 ¥129
Java并发编程实战

王宝令  资深架构师

51讲 | 18405 人已学习

新人首单 ¥19.9 原价 ¥99
MySQL实战45讲

林晓斌  网名丁奇,前阿里资深技术专家

49讲 | 58312 人已学习

新人首单 ¥29.9 原价 ¥129
Java核心技术面试精讲

杨晓峰  前Oracle首席工程师

44讲 | 47342 人已学习

新人首单 ¥19.9 原价 ¥99