Web 协议详解与抓包实战
陶辉
智链达 CTO,前阿里云高级技术专家
43211 人已学习
新⼈⾸单¥68
课程目录
已完结/共 121 讲
第一章:HTTP/1.1协议 (38讲)
时长 05:53
时长 06:57
Web 协议详解与抓包实战
登录|注册
留言
22
收藏
沉浸
阅读
分享
手机端
回顶部
当前播放: 51 | 如何使用Wireshark解密TLS/SSL报文?
00:00 / 00:00
高清
  • 高清
1.0x
  • 2.0x
  • 1.5x
  • 1.25x
  • 1.0x
  • 0.75x
  • 0.5x
网页全屏
全屏
00:00
付费课程,可试看
01 | 课程介绍
02 | 内容综述
03 | 浏览器发起HTTP请求的典型场景
04 | 基于ABNF语义定义的HTTP消息格式
05 | 网络为什么要分层:OSI模型与TCP/IP模型
06 | HTTP解决了什么问题?
07 | 评估Web架构的七大关键属性
08 | 从五种架构风格推导出HTTP的REST架构
09 | 如何用Chrome的Network面板分析HTTP报文
10 | URI的基本格式以及与URL的区别
11 | 为什么要对URI进行编码?
12 | 详解HTTP的请求行
13 | HTTP的正确响应码
14 | HTTP的错误响应码
15 | 如何管理跨代理服务器的长短连接?
16 | HTTP消息在服务器端的路由
17 | 代理服务器转发消息时的相关头部
18 | 请求与响应的上下文
19 | 内容协商与资源表述
20 | HTTP包体的传输方式(1):定长包体
21 | HTTP包体的传输方式(2):不定长包体
22 | HTML form表单提交时的协议格式
23 | 断点续传与多线程下载是如何做到的?
24 | Cookie的格式与约束
25 | Session及第三方Cookie的工作原理
26 | 浏览器为什么要有同源策略?
27 | 如何“合法”地跨域访问?
28 | 条件请求的作用
29 | 缓存的工作原理
30 | 缓存新鲜度的四种计算方式
31 | 复杂的Cache-Control头部
32 | 什么样的响应才会被缓存
33 | 多种重定向跳转方式的差异
34 | 如何通过HTTP隧道访问被限制的网络
35 | 网络爬虫的工作原理与应对方式
36 | HTTP协议的基本认证
37 | Wireshark的基本用法
38 | 如何通过DNS协议解析域名?
39 | Wireshark的捕获过滤器
40 | Wireshark的显示过滤器
41 | Websocket解决什么问题
42 | Websocket的约束
43 | WebSocket协议格式
44 | 如何从HTTP升级到WebSocket
45 | 传递消息时的编码格式
46 | 掩码及其所针对的代理污染攻击
47 | 如何保持会话心跳
48 | 如何关闭会话
49 | HTTP/1.1发展中遇到的问题
50 | HTTP/2特性概述
51 | 如何使用Wireshark解密TLS/SSL报文?
52 | h2c:在TCP上从HTTP/1升级到HTTP/2
53 | h2:在TLS上从HTTP/1升级到HTTP/2
54 | 帧、消息、流的关系
55 | 帧格式:Stream流ID的作用
56 | 帧格式:帧类型及设置帧的子类型
57 | HPACK如何减少HTTP头部的大小?
58 | HPACK中如何使用Huffman树编码?
59 | HPACK中整型数字的编码
60 | HPACK中头部名称与值的编码格式
61 | 服务器端的主动消息推送
62 | Stream的状态变迁
63 | RST_STREAM帧及常见错误码
64 | 我们需要Stream优先级
65 | 不同于TCP的流量控制
66 | HTTP/2与gRPC框架
67 | HTTP/2的问题及HTTP/3的意义
68 | HTTP/3: QUIC协议格式
69 | 七层负载均衡做了些什么?
70 | TLS协议的工作原理
71 | 对称加密的工作原理(1):XOR与填充
72 | 对称加密的工作原理(2):工作模式
73 | 详解AES对称加密算法
74 | 非对称密码与RSA算法
75 | 基于openssl实战验证RSA
76 | 非对称密码应用:PKI证书体系
77 | 非对称密码应用:DH密钥交换协议
78 | ECC椭圆曲线的特性
79 | DH协议升级:基于椭圆曲线的ECDH协议
80 | TLS1.2与TLS1.3 中的ECDH协议
81 | 握手的优化:session缓存、ticket票据及TLS1.3的0-RTT
82 | TLS与量子通讯的原理
83 | 量子通讯BB84协议的执行流程
84 | TCP历史及其设计哲学
85 | TCP解决了哪些问题
86 | TCP报文格式
87 | 如何使用tcpdump分析网络报文
88 | 三次握手建立连接
89 | 三次握手过程中的状态变迁
90 | 三次握手中的性能优化与安全问题
91 | 数据传输与MSS分段
92 | 重传与确认
93 | RTO重传定时器的计算
94 | 滑动窗口:发送窗口与接收窗口
95 | 窗口的滑动与流量控制
96 | 操作系统缓冲区与滑动窗口的关系
97 | 如何减少小报文提高网络效率
98 | 拥塞控制(1):慢启动
99 | 拥塞控制(2):拥塞避免
100 | 拥塞控制(3):快速重传与快速恢复
101 | SACK与选择性重传算法
102 | 从丢包到测量驱动的拥塞控制算法
103 | Google BBR拥塞控制算法原理
104 | 关闭连接过程优化
105 | 优化关闭连接时的TIME-WAIT状态
106 | keepalive 、校验和及带外数据
107 | 面向字节流的TCP连接如何多路复用
108 | 四层负载均衡可以做什么
109 | 网络层与链路层的功能
110 | IPv4分类地址
111 | CIDR无分类地址
112 | IP地址与链路地址的转换:ARP与RARP协议
113 | NAT地址转换与LVS负载均衡
114 | IP选路协议
115 | MTU与IP报文分片
116 | IP协议的助手:ICMP协议
117 | 多播与IGMP协议
118 | 支持万物互联的IPv6地址
119 | IPv6报文及分片
120 | 从wireshark报文统计中找规律
121 | 结课测试&结束语
本节摘要
登录 后留言

全部留言(22)

  • 最新
  • 精选
到不了的塔
mac系统中环境变量SSLKEYLOGFILE的设置方法和windows,linux不同,shell终端和GUI程序使用两套不同的环境变量设置,shell终端的环境变量可以在~/.bash_profile中添加,而GUI程序的环境变量设置(即本课程应该设置的)可以在命令行执行命令launchctl setenv SSLKEYLOGFILE 环境变量路径,之后就可以生效了

作者回复: 谢谢你的分享^_^

2020-02-17
3
kakashi
这个算不算chrome的BUG,毕竟都能这样解密的话,https还有什么作用。

作者回复: 不算的,对于通讯双方而言,一定要能解密信息,只是要防着第三者。其中,浏览器是被多页面共享的,而JS、JavaApplet、Flash等是无法读取debug日志的。当然,如果client主机被攻破,那黑客直接读取页面内容即可,也不需要多此一举解析TLS层的

2020-10-25
2
老师你好,请问wireshark如何抓取并解析手机端的https包?

作者回复: 可以将PC设为热点,以手机通过PC的wifi通讯,再打开wireshark抓相应虚拟网卡上的报文

2020-09-25
3
1
closer
老师 我在centos服务器上面用tcpdump抓包 那些数据包是https 但是在wireshark导入密钥 无法解密

作者回复: 导入密钥?哪来的密钥?只有RSA协商才有固定的密钥,否则密钥都是会话建立时即时生成的,只有记录下密钥生成时的日志(包括对方传来的公钥和自己生成的私钥),才能计算出密钥。你用的是什么密钥协商算法?ECDHE吗?

2020-09-16
1
凌空飞起的剪刀腿
老师您好,这个方法可以抓去http1.1版本的https吗?

作者回复: 可以的

2020-02-28
1
霍华德斯塔克
Win10的系统,设置了SSLKEYLOGFILE环境变量,密钥的LOG文件也能生成;Pre-Master-Secret log file也配置了,Wireshark 3和Wireshark 2都尝试过,但是死活还是抓不到HTTP/2的报文,这是怎么回事呀T_T

作者回复: 如果wireshark不能读取到完整的TLS握手日志,就不能解密TLS。 1、你可以尝试把LOG文件删除重新生成,再抓包,或者多试几个WEB站点,以使得LOG文件里有完整的日志(默认最大30MB)。 2、在wireshark里点decode as,设置http2协议。

2019-10-09
2
1
aaa
老师我有个疑问:每次ssl的握手都会协商一个对称密钥,然而实际大并发场景下。server或者slb就得有个数量庞大的字典表对应每个客户端的密钥key吧?他们这里是怎么做优化的呢?(不知道我本身表述的对不对)

作者回复: 对的,比如Nginx上会用红黑树字典表存放密钥,这样增、删、查的速度都是O(logN)。而且。为了防止密钥占用的内存过多,还设有过期淘汰时间。

2020-08-14
飞天
老师,我的是windows 10,同样的问题有个同学问过了,我这里的chrome debug日志,看到有内容输出。是一个空文件,我的SSLKEYLOGFILE环境变量也配置了,甚至配置了2个用户级和系统级,请问这是哪里的问题?chrome是最新版。

作者回复: 重启下看看

2020-07-02
airmy丶
老师您好!请问该怎么理解这个“可见性”的意思? 您在视频中说提到了 HTTP/1.1因为是用ASCII编码,对头部和内容都可以很容易的修改。那HTTP/2是用的二进制编码,可见性不那么好。不管是从chrom面板中还是wireshark都可以很清晰的看见请求头部字段。 我还从Chrome面板中复制了h2的curl请求(不知道这样合不合理)去通过终端请求,结果得到结果如下: [root@localhost ~]# curl 'https://http2.akamai.com/demo/h2_demo_frame.html' -H 'authority: http2.akamai.com' -H 'pragma: no-cache' -H 'cache-control: no-cache' -H 'upgrade-insecure-requests: 1' -H 'user-agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.120 Safari/537.36' -H 'sec-fetch-mode: nested-navigate' -H 'accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3' -H 'sec-fetch-site: same-origin' -H 'referer: https://http2.akamai.com/demo' -H 'accept-encoding: gzip, deflate, br' -H 'accept-language: zh-CN,zh;q=0.9' --compressed -I HTTP/1.1 200 OK Server: Apache ETag: "a36c5bf5b522a6a2bd2842c9cafb76d8:1441001436" Last-Modified: Mon, 31 Aug 2015 06:09:25 GMT Accept-Ranges: bytes Content-Length: 39079 push: true rtt: 127 ghost_ip: 104.71.159.169 ghost_service_ip: 23.3.104.110 client_real_ip: 112.94.43.29 client_ip: 112.94.43.29 myproto: protocol_negotiation: h1 Expires: Thu, 17 Oct 2019 01:51:57 GMT Cache-Control: max-age=0, no-cache, no-store Pragma: no-cache Date: Thu, 17 Oct 2019 01:51:57 GMT Connection: keep-alive Content-Type: text/html;charset=UTF-8 Accept-CH: DPR, Width, Viewport-Width, Downlink, Save-Data Access-Control-Max-Age: 86400 Access-Control-Allow-Credentials: false Access-Control-Allow-Headers: * Access-Control-Allow-Methods: GET,HEAD,POST Access-Control-Allow-Origin: * Strict-Transport-Security: max-age=31536000 ; includeSubDomains 为啥响应还是HTTP/1.1 ?

作者回复: 1、这是因为chrome或者wireshark把二进制报文解析出后,以友好的字符串形式向你展示。在你用chrome时,是看不到Frame细节的,例如weight权重。 2、你访问的网站既支持http1也支持http2。如果想使curl使用http2,需要加入参数--http2。当然,首先你的curl版本要支持。可参考这篇文章:https://www.sysgeek.cn/curl-with-http2-support/

2019-10-17
Hurry
老师,是不是每个 TCP 连接的建立,TLS/SSL 都会产生一个加密秘钥去加密

作者回复: 不是,只有应用明确的使用TLS/SSL,才会对TCP上传输的数据加密

2019-07-31
收起评论