下载APP
登录
关闭
讲堂
算法训练营
Python 进阶训练营
企业服务
极客商城
客户端下载
兑换中心
渠道合作
推荐作者
当前播放: 30 | epoll的优劣及原理
00:00 / 00:00
标清
  • 标清
1.0x
  • 2.0x
  • 1.5x
  • 1.25x
  • 1.0x
  • 0.5x
网页全屏
全屏
00:00
付费课程,可试看

Nginx核心知识100讲

共155讲 · 155课时,约1300分钟
18534
免费
01 | 课程综述
免费
02 | Nginx适用于哪些场景?
免费
03 | Nginx出现的历史背景
免费
04 | 为什么用Nginx:它的 5 ...
免费
05 | Nginx的四个主要组成部分
06 | Nginx的版本发布历史
07 | 选择哪一个Nginx发行版本...
08 | 编译出适合自己的Nginx
09 | Nginx配置文件的通用语法...
10 | Nginx命令行及演示:重载...
11 | 用Nginx搭建一个可用的静...
12 | 用Nginx搭建一个具备缓存...
13 | 用GoAccess实现可视化并实...
14 | 从网络原理来看SSL安全协...
15 | 对称加密与非对称加密各自...
16 | SSL证书的公信力是如何保...
17 | SSL协议握手时Nginx的性能...
18 | 用免费SSL证书实现一个HTT...
19 | 基于OpenResty用Lua语言...
20 | Nginx的请求处理流程
21 | Nginx的进程结构
22 | Nginx的进程结构实例演示
23 | 使用信号管理Nginx的父子...
24 | reload重载配置文件的真相
25 | 热升级的完整流程
26 | 优雅地关闭worker进程
27 | 网络收发与Nginx事件间的...
28 | Nginx网络事件实例演示
29 | Nginx的事件驱动模型
30 | epoll的优劣及原理
31 | Nginx的请求切换
32 | 同步&异步、阻塞&非阻塞...
33 | Nginx的模块究竟是什么?
34 | Nginx模块的分类
35 | Nginx如何通过连接池处理...
36 | 内存池对性能的影响
37 | 所有worker进程协同工作的...
38 | 用好共享内存的工具:Slab...
39 | 哈希表的max_size与bucke...
40 | Nginx中最常用的容器:红...
41 | 使用动态模块来提升运维效...
免费
42 | 第三章内容介绍
43 | 冲突的配置指令以谁为准?
44 | Listen指令的用法
免费
45 | 处理HTTP请求头部的流程
46 | Nginx中的正则表达式
47 | 如何找到处理请求的server...
48 | 详解HTTP请求的11个阶段
49 | 11个阶段的顺序处理
50 | postread阶段:获取真实客...
51 | rewrite阶段的rewrite模块...
52 | rewrite阶段的rewrite模块...
53 | rewrite阶段的rewrite模块...
54 | find_config阶段:找到处...
55 | preaccess阶段:对连接做...
56 | preaccess阶段:对请求做...
57 | access阶段:对ip做限制的...
58 | access阶段:对用户名密码...
59 | access阶段:使用第三方做...
60 | access阶段的satisfy指令
61 | precontent阶段:按序访问...
62 | 实时拷贝流量:precontent...
63 | content阶段:详解root和a...
64 | static模块提供的3个变量
65 | static模块对url不以斜杠...
66 | index和autoindex模块的用...
67 | 提升多个小文件性能的conc...
68 | access日志的详细用法
69 | HTTP过滤模块的调用流程
70 | 用过滤模块更改响应中的字...
71 | 用过滤模块在http响应的前...
72 | Nginx变量的运行原理
73 | HTTP框架提供的请求相关的...
74 | HTTP框架提供的其他变量
75 | 使用变量防盗链的referer...
76 | 使用变量实现防盗链功能实...
77 | 为复杂的业务生成新的变量...
78 | 通过变量指定少量用户实现...
79 | 根据IP地址范围的匹配生成...
80 | 使用变量获得用户的地理位...
81 | 对客户端使用keepalive提...
82 | 反向代理与负载均衡原理
83 | 负载均衡策略:round-rob...
84 | 负载均衡哈希算法:ip_has...
85 | 一致性哈希算法:hash模块
86 | 最少连接算法以及如何跨wo...
87 | upstream模块提供的变量
88 | proxy模块处理请求的流程
89 | proxy模块中的proxy_pas...
90 | 根据指令修改发往上游的请...
91 | 接收用户请求包体的方式
92 | 与上游服务建立连接
93 | 接收上游的响应
94 | 处理上游的响应头部
95 | 上游出现失败时的容错方案
96 | 对上游使用SSL连接
97 | 用好浏览器的缓存
98 | Nginx决策浏览器过期缓存...
99 | 缓存的基本用法
100 | 对客户端请求的缓存处理...
101 | 接收上游响应的缓存处理...
102 | 如何减轻缓存失效时上游...
103 | 及时清除缓存
104 | uwsgi、fastcgi、scgi指...
105 | memcached反向代理的用法
106 | 搭建websocket反向代理
107 | 用分片提升缓存效率
108 | open file cache提升系...
109 | HTTP/2协议介绍
110 | 搭建HTTP/2服务并推送资...
111 | gRPC反向代理
112 | stream四层反向代理的7个...
113 | proxy protocol协议与r...
114 | 限并发连接、限IP、记日...
115 | stream四层反向代理处理S...
116 | stream_preread模块取出S...
117 | stream proxy四层反向...
118 | UDP反向代理
119 | 透传IP地址的3个方案
120 | 性能优化方法论
121 | 如何高效使用CPU
122 | 多核间的负载均衡
免费
123 | 控制TCP三次握手参数
免费
124 | 建立TCP连接的优化
125 | 滑动窗口与缓冲区
126 | 优化缓冲区与传输效率
127 | 慢启动与拥塞窗口
128 | TCP协议的keepalive功能
129 | 减少关闭连接时的time_wa...
130 | lingering_close延迟关闭...
131 | 应用层协议的优化
免费
132 | 磁盘IO的优化
133 | 减少磁盘读写次数
134 | 零拷贝与gzip_static模...
135 | 用tcmalloc优化内存分配
136 | 使用Google PerfTools分...
137 | 使用stub_status模块监控...
138 | 第三方模块源码的阅读
139 | Nginx的启动流程
140 | HTTP第三方模块的初始化
141 | if指令是邪恶的吗?
142 | 解读Nginx的核心转储文件
143 | 通过debug日志定位问题
144 | OpenResty概述
145 | OpenResty中的Nginx模块...
146 | 如何在Nginx中嵌入Lua代...
147 | OpenResty中Lua与C代码...
148 | 获取、修改请求与响应的S...
149 | 工具类型的SDK
150 | 同步且非阻塞的底层SDK:...
151 | 基于协程的并发编程SDK
152 | 定时器及时间相关的SDK
153 | share.DICT基于共享内存...
154 | 子请求的使用方法
155 | 基于OpenResty的WAF防火...

精选留言(21)

  • x
    2018-11-26
    老师,看了along2018的留言,Nginx作为反向代理服务器的时,Nginx所在服务器端口数(65536)限制了与后端服务建立连接数,但是请求数不等于连接数,所以限制不了请求数,毕竟连接是可以被复用的。

    作者回复: 对的,而且65535只是限制了nginx与一个上游服务端口之间的连接数。

    7
  • 2018-11-21
    不好意思,刚才可能是我没有表达清楚。我指的nginx作为反向代理服务器的时候,上游服务器为Tomcat,浏览器->nginx->tomcat 这样的架构,单台nginx不能建立百万并发吧,毕竟nginx需要向上游服务器Tomcat建立转发的链接,nginx服务器向上游Tomcat最多建立65536个链接?对吧老师?

    作者回复: 这么理解没问题,上游服务器的总连接数限制了作为反向代理的nginx的并发上限。

    6
  • 2019-02-13
    老师您好 有一个问题没太理解,链表跟红黑树的关系,一个新的事件产生会同时加入到以上两个数据结构吗

    作者回复: 当需要监控某个事件时,用户进程要把它加到树中;当某个事件发生时,系统把它加入到链表中。

    5
  • 2019-03-31
    老师这一节课,感觉讲的有点含糊,尤其是红黑树存储活跃的链接,平衡二叉树存储事件这一点没理解。

    作者回复: 1、红黑树用于快速操作,例如增删改查
    2、链表用于epoll_wait系统调用,快速返回活跃事件

    1
    3
  • 2019-04-22
    老师请教两个问题:
    1. 对于epoll模型, 一个连接从不活跃变成活跃时, 是需要遍历全部100万个连接找到这个连接然后放到链表中吗?
    2. 事件的存储结构为什么采用红黑树的方式, 为什么不采用队列的方式呢?

    作者回复: 1、变成活跃,通常是因为网卡收到报文,而从报文的端口和IP可以快速关系到socket,再把这个socket直接放到链表即可,不需要遍历全部连接。
    2、红黑树的查找效率是O(logN)的复杂度,比队列的O(N)好得多

    1
    2
  • 2019-03-31
    老师不明白,链表中存放的是活跃的连接还是事件?怎么确定是活跃的?平衡二叉树中的事件与链表有什么关联关系?

    作者回复: 1、链表中存放的是活跃的事件;
    2、网卡收到报文形成事件,放入该链表;
    3、二叉树是事件全集,包括不活跃事件。它相当于链表的字典,用于快速查询。

    2
  • 2019-03-06
    老师,活跃连接是怎么定义呢?还有就是活跃连接的增减可不可以细说一下,还有红黑树事件的增减,我感觉这个对整个nginx的处理流程的理解至关重要,老师辛苦了

    作者回复: 可以这么理解活跃连接:在TCP连接上正在处理HTTP请求。因为一个HTTP请求由一个请求+一个响应组成,相当于一个事务。事务完成后,若连接仍然留存等待下次复用,则是非活跃连接。参见后续第三部分最后一课、第四部分与上游的keepalive、第五部分tcp keepalive连接的课程。

    2
  • 2019-01-23
    老师,有个疑问,epoll应该不算是真正的异步模式吧,只是多路IO复用就绪通知?比起select这种扫描全部的文件描述符,epoll只读取就绪的文件描述符,再加入基于事件的就绪通知机制,所以性能比较好?

    作者回复: 1、epoll只是一组API,不是框架。
    2、是的。

    2
  • 2019-01-13
    没有听懂老师讲的epoll模型为什么好,尴尬!

    作者回复: 1、基于epoll的事件多路复用减少了进程间切换的次数,使得操作系统少做了相对于用户任务来说的无用功。
    2、epoll比select等多路复用方式来说,减少了遍历循环及内存拷贝的工作量,因为活跃连接只占总并发连接的很小一部分。

    2
  • 2019-03-05
    老师,有几个疑问,每一个连接会对应两个事件,一个读事件,一个写事件,而事件存储在红黑树中,我的疑问是,活跃连接是怎么和红黑树中的事件关联的,是通过活跃连接去红黑树中检索事件吗?还有一个疑问是,红黑树具体的存储结构,是通过什么排序的?最后一个疑问是,定时器事件,是怎么监测到期的?是不断轮训红黑树,检测到期的定时器事件吗?问题有点多,谢谢老师,老师辛苦了

    作者回复: 网卡发现报文后,内核可以直接从地址定位到事件

    1
  • 2018-12-20
    老师能不能详细的讲解一下select、poll、epoll的区别呢?

    作者回复: select和poll最大的问题是,每次都需要传递全部并发fd,而实际只有少量fd有数据需要处理,所以效率低下。而epoll通过epoll_ctl和epoll_wait分解了这个问题,效率大幅提高。

    1
  • 2018-11-21
    当nginx作为负载均衡器的时候,比方说下游为Tomcat服务器,这个时候nginx就不能建立百万并发连接了吧,因为nginx所在服务器(单网卡)的端口是有限的(65536),所以也最多建立6万多连接吧,我这样理解对吗?

    作者回复: 一个TCP连接是四元组,所以nginx对下游虽然只开放一个端口例如80,IP地址也只有1个,但下游服务器每台可以对该nginx最多建立6万多连接,只要15台下游服务器,就能建立百万并发连接了。

    1
  • 请问老师,能不能讲解一下什么情况下属于活跃链接,什么情况下属于不活跃链接?为什么会有那么多的不活跃链接存在?谢谢

    作者回复: 先讲下什么叫不活跃连接,比如:
    1、有些TCP连接网速很慢,只有几B/S;
    2、有些客户端很慢,它的CPU 100%了;
    3、有些业务应用需要用户做输入后,才会在TCP连接上继续发送消息。
    我就不穷举了。这些TCP连接,在某个1秒内都没有任何事件,就叫不活跃链接。
    反之叫活跃链接

    1
  • 2019-11-21
    老师您好,看到 蚂蚁 的留言,
    一个新的事件产生会同时加入到以上两个数据结构吗?
    您的回答:当需要监控某个事件时,用户进程要把它加到树中;当某个事件发生时,系统把它加入到链表中。

    您的回答还是不太理解,
    新事件产生后,是会先放到事件队列中的吧,
    1,这个事件队列和链表和二叉树是什么关系?
    2,事件触发后,再把它放到链表中吗,还是其他时间?
    3,监控事件是说从事件队列中取出事件放到树中,等待监听吗?
    小白,还望老师理解。
    展开

    作者回复: 事件太笼筒了。你所指的新事件是指网络事件吗?比如收到ACK,或者收到PSH报文吗?这只会加到rdlist链表中。

  • 2019-11-10
    就是监听事件放入红黑色中,监听到结果了可以进行处理的事件就放入待处理连表是吧?监听是监听的什么东西了,监听浏览器的请求跟 nginx 上游处理结果?

    作者回复: 监听网络事件 ,包括接收到TCP报文(ACK或者DATA报文)或者触发定时器,可以看下27课。对TCP协议引发的网络事件可以再看下《Web协议详解与抓包实战》第88-96课。

  • 2019-09-18
    老师你好,我想问一下nginx使用epoll的是边缘触发还是水平触发,我这边测试accept的时候使用边缘触发模拟处理缓慢的情况下,accept请求会有丢失的情况,我看一些文档建议是建议accept阶段使用水平触发,处理数据的时候使用边缘触发,请问nginx是怎么做的?

    作者回复: 边缘触发。nginx处理是非阻塞的,如果不是有问题的HTTP模块导致阻塞,是不会出现你说的情况的

    1
  • 2019-04-25
    老师您好,网络上说nginx默认使用的是ET模式,开启multi_accept后,使用的是LT模式,请问一下是正确的吗

    作者回复: 不对,Nginx只使用ET模式

  • 2019-04-08
    关于epoll数据结构的这张图被网上很多文章引用过。不过左上角的文字表述是有误的吧?应该是链表中的每个节点...
  • 2019-03-13
    弱弱的问一句,老师这课提到的epoll、select等概念都是什么?在哪里可以看到补充资料

    作者回复: 建议优先阅读wiki上的资料,例如https://zh.wikipedia.org/wiki/Epoll

  • 2019-03-12
    老师,你好!我自己读过epoll的源代码,想问一下 (1) ovflist  的作用就是"当内核进程将事件从内核拷贝到用户空间时,这段时间目标文件可能会产生新的事件,这个时候,就需要将新的时间链入到ovlist里面。"吗?
    (2)将事件从内核拷贝到用户时,是拷贝 rdlist , 是吗?
    (3)然后还有epoll_wait 就只去检查 rdlis 这个双向链表中有没有时间就行了,对吗?迫切需要老师指导!!!!!!
    展开

    作者回复: 全部正确!