下载APP
登录
关闭
讲堂
算法训练营
Python 进阶训练营
企业服务
极客商城
客户端下载
兑换中心
渠道合作
推荐作者
当前播放: 35 | Nginx如何通过连接池处理网络请求
00:00 / 00:00
标清
  • 标清
1.0x
  • 2.0x
  • 1.5x
  • 1.25x
  • 1.0x
  • 0.5x
网页全屏
全屏
00:00
付费课程,可试看

Nginx核心知识100讲

共155讲 · 155课时,约1300分钟
18530
免费
01 | 课程综述
免费
02 | Nginx适用于哪些场景?
免费
03 | Nginx出现的历史背景
免费
04 | 为什么用Nginx:它的 5 ...
免费
05 | Nginx的四个主要组成部分
06 | Nginx的版本发布历史
07 | 选择哪一个Nginx发行版本...
08 | 编译出适合自己的Nginx
09 | Nginx配置文件的通用语法...
10 | Nginx命令行及演示:重载...
11 | 用Nginx搭建一个可用的静...
12 | 用Nginx搭建一个具备缓存...
13 | 用GoAccess实现可视化并实...
14 | 从网络原理来看SSL安全协...
15 | 对称加密与非对称加密各自...
16 | SSL证书的公信力是如何保...
17 | SSL协议握手时Nginx的性能...
18 | 用免费SSL证书实现一个HTT...
19 | 基于OpenResty用Lua语言...
20 | Nginx的请求处理流程
21 | Nginx的进程结构
22 | Nginx的进程结构实例演示
23 | 使用信号管理Nginx的父子...
24 | reload重载配置文件的真相
25 | 热升级的完整流程
26 | 优雅地关闭worker进程
27 | 网络收发与Nginx事件间的...
28 | Nginx网络事件实例演示
29 | Nginx的事件驱动模型
30 | epoll的优劣及原理
31 | Nginx的请求切换
32 | 同步&异步、阻塞&非阻塞...
33 | Nginx的模块究竟是什么?
34 | Nginx模块的分类
35 | Nginx如何通过连接池处理...
36 | 内存池对性能的影响
37 | 所有worker进程协同工作的...
38 | 用好共享内存的工具:Slab...
39 | 哈希表的max_size与bucke...
40 | Nginx中最常用的容器:红...
41 | 使用动态模块来提升运维效...
免费
42 | 第三章内容介绍
43 | 冲突的配置指令以谁为准?
44 | Listen指令的用法
免费
45 | 处理HTTP请求头部的流程
46 | Nginx中的正则表达式
47 | 如何找到处理请求的server...
48 | 详解HTTP请求的11个阶段
49 | 11个阶段的顺序处理
50 | postread阶段:获取真实客...
51 | rewrite阶段的rewrite模块...
52 | rewrite阶段的rewrite模块...
53 | rewrite阶段的rewrite模块...
54 | find_config阶段:找到处...
55 | preaccess阶段:对连接做...
56 | preaccess阶段:对请求做...
57 | access阶段:对ip做限制的...
58 | access阶段:对用户名密码...
59 | access阶段:使用第三方做...
60 | access阶段的satisfy指令
61 | precontent阶段:按序访问...
62 | 实时拷贝流量:precontent...
63 | content阶段:详解root和a...
64 | static模块提供的3个变量
65 | static模块对url不以斜杠...
66 | index和autoindex模块的用...
67 | 提升多个小文件性能的conc...
68 | access日志的详细用法
69 | HTTP过滤模块的调用流程
70 | 用过滤模块更改响应中的字...
71 | 用过滤模块在http响应的前...
72 | Nginx变量的运行原理
73 | HTTP框架提供的请求相关的...
74 | HTTP框架提供的其他变量
75 | 使用变量防盗链的referer...
76 | 使用变量实现防盗链功能实...
77 | 为复杂的业务生成新的变量...
78 | 通过变量指定少量用户实现...
79 | 根据IP地址范围的匹配生成...
80 | 使用变量获得用户的地理位...
81 | 对客户端使用keepalive提...
82 | 反向代理与负载均衡原理
83 | 负载均衡策略:round-rob...
84 | 负载均衡哈希算法:ip_has...
85 | 一致性哈希算法:hash模块
86 | 最少连接算法以及如何跨wo...
87 | upstream模块提供的变量
88 | proxy模块处理请求的流程
89 | proxy模块中的proxy_pas...
90 | 根据指令修改发往上游的请...
91 | 接收用户请求包体的方式
92 | 与上游服务建立连接
93 | 接收上游的响应
94 | 处理上游的响应头部
95 | 上游出现失败时的容错方案
96 | 对上游使用SSL连接
97 | 用好浏览器的缓存
98 | Nginx决策浏览器过期缓存...
99 | 缓存的基本用法
100 | 对客户端请求的缓存处理...
101 | 接收上游响应的缓存处理...
102 | 如何减轻缓存失效时上游...
103 | 及时清除缓存
104 | uwsgi、fastcgi、scgi指...
105 | memcached反向代理的用法
106 | 搭建websocket反向代理
107 | 用分片提升缓存效率
108 | open file cache提升系...
109 | HTTP/2协议介绍
110 | 搭建HTTP/2服务并推送资...
111 | gRPC反向代理
112 | stream四层反向代理的7个...
113 | proxy protocol协议与r...
114 | 限并发连接、限IP、记日...
115 | stream四层反向代理处理S...
116 | stream_preread模块取出S...
117 | stream proxy四层反向...
118 | UDP反向代理
119 | 透传IP地址的3个方案
120 | 性能优化方法论
121 | 如何高效使用CPU
122 | 多核间的负载均衡
免费
123 | 控制TCP三次握手参数
免费
124 | 建立TCP连接的优化
125 | 滑动窗口与缓冲区
126 | 优化缓冲区与传输效率
127 | 慢启动与拥塞窗口
128 | TCP协议的keepalive功能
129 | 减少关闭连接时的time_wa...
130 | lingering_close延迟关闭...
131 | 应用层协议的优化
免费
132 | 磁盘IO的优化
133 | 减少磁盘读写次数
134 | 零拷贝与gzip_static模...
135 | 用tcmalloc优化内存分配
136 | 使用Google PerfTools分...
137 | 使用stub_status模块监控...
138 | 第三方模块源码的阅读
139 | Nginx的启动流程
140 | HTTP第三方模块的初始化
141 | if指令是邪恶的吗?
142 | 解读Nginx的核心转储文件
143 | 通过debug日志定位问题
144 | OpenResty概述
145 | OpenResty中的Nginx模块...
146 | 如何在Nginx中嵌入Lua代...
147 | OpenResty中Lua与C代码...
148 | 获取、修改请求与响应的S...
149 | 工具类型的SDK
150 | 同步且非阻塞的底层SDK:...
151 | 基于协程的并发编程SDK
152 | 定时器及时间相关的SDK
153 | share.DICT基于共享内存...
154 | 子请求的使用方法
155 | 基于OpenResty的WAF防火...

精选留言(11)

  • 2018-11-28
    一个 连接 232+(96*2) = 424 字节
    如果预分配给 nginx 4G 的内存, 那连接数connection 是不是就是 4G/424B 的数量
    这个值是最大并发连接数么 ?
    老师, 有一些概念只有一点感觉, 一直很模糊, 65535, 这个到底是什么, 什么操作能占用这个数值?
    还有比如 nginx. conf 里的一些数值设置, 比如 buffer_size 数值之类的, 根据系统资源, 怎么应该合理的去设置一些数值?
    !谢谢!
    展开

    作者回复: 不是,这只是描述连接的结构体需要的内存,在第3部分第4节课里会介绍处理http请求还会分配的内存,默认至少有5K会被分配出,你可以等下周课程推出后仔细看下。第2个问题,第5部分课程会详细介绍的。

    1
  • 看完,实践完。有几个疑点未找到答案:
    1. 按照每个连接消耗424个字节,如果work_connections配置10000。在nginx初始化时,是不是要占用系统 424*10000 = 4G 内存。如果配置10万,是不是需要系统内存要40G以上才可以?
    2. 老师强调在64位系统中ngx_connection_s 结构体占用的内存是232字节,那在32位系统中占用的内存有差异?
    3.我分别请求两个html资源,查看byte_sent,发现一个是0字节(用md文档导出的一个html),一个正常(普通html):
    192.168.1.252 - - [12/Sep/2019:10:13:30 +0800] "GET / HTTP/1.1" 304 0 "-" "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/76.0.3809.132 Safari/537.36" "-"
    192.168.1.252 - - [12/Sep/2019:10:13:56 +0800] "GET /file.html HTTP/1.1" 200 307 "-" "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/76.0.3809.132 Safari/537.36" "-"
    展开

    作者回复: 1、算错了单位,424*10000=4M不是4G
    2、32位OS里指针长度是4字节,而64位为8字节
    3、未见问题

  • 2019-08-14
    老师你好,请问和connection数组对应的读写事件(读写事件数组),和connecttion结构体里面的读写事件,他们有什么区别,两者的作用分别是什么?

    作者回复: 1个连接只有1个读事件和1个写事件,其他引用都是指针

  • 2019-07-03
    老师请问这个参数: proxy_set_header X-Forwarded-Proto https; 写在location和server为啥有区别?

    作者回复: 没明白,什么区别?给个具体例子

    1
  • 2019-06-27
    请问access.log有段时间不知道,求解答:
    115.238.101.9 - - [27/Jun/2019:15:55:04 +0800] "OPTIONS /staticcommon/bs3/1.0.0/css/ HTTP/1.1" 405 172 "-" "Microsoft Office Excel 2014" "123.234.44.178, 140.249.242.142" TLSv1.2 ECDHE-RSA-AES128-GCM-SHA256 - 0.000 - static.qx***.cn
    nginx日志格式:
    log_format main '$remote_addr - $remote_user [$time_local] "$request" '
                            '$status $body_bytes_sent "$http_referer" '
                            '"$http_user_agent" "$http_x_forwarded_for" '
                            '$ssl_protocol $ssl_cipher $upstream_addr $request_time $upstream_response_time $http_host';
    请问这段怎么理解的?
    "Microsoft Office Protocol Discovery" "123.234.44.178, 140.249.242.142" TLSv1.2 ECDHE-RSA-AES128-GCM-SHA256 - 0.000 - static.qx***.cn
    展开

    作者回复: 看不懂你的问题,我猜你是对不上字符串与变量,我把中间两个跟你说下做标的:
    Microsoft Office Excel 2014是$http_user_agent,123.234.44.178, 140.249.242.142是$http_x_forwarded_for,其他前后以此类推

  • 2019-01-09
    老师您好,这里说的连接池中的连接是指TCP连接么?

    作者回复: 是的,如果用stream反向代理(参见第四部分UDP反向代理),那么连接池同样适用UDP会话

  • 针对ngx的调优是否还需要针对linux默认参数进行修改呢?比如somaxconn之类的?

    作者回复: 需要的,第5部分课程会有多堂课介绍linux在OSI四层的性能优化。

  • 2018-12-16
    如果启用gzip,那byte_sent是指压缩后的字节吗

    作者回复: 是的

  • 2018-12-09
    老师您好,生产环境遇到过nginx返回502 Bad Gateway的情况,希望您能帮忙解答下
    服务器配置: 4C8G
    nginx.conf: worker_processes 8; worker_connections 10240;
    出现场景:
          1. 反向代理:段时间内收到大量请求,用户接收到502,请求量下降后能自动恢复
          2. 正向代理:同样是大量请求访问公网服务,且请求量下降后无法自动恢复,必须reload一下才能恢复
    目前排查过Nginx配置,服务器最大打开文件数,依然没能解决问题,现在是通过每天定时reload,但是还是不能完全避免;希望老师能帮忙分析一下
    展开

    作者回复: 第4部分对反向代理做了深入的介绍,参考这部分课程。502通常是连接建立失败,考虑与上游使用keepalive长连接试试看。

  • 2018-11-20
    谢谢老师,多网卡或者虚拟网卡可以解决65535端口限制的问题。我再请教一个问题,请问多网卡实现tcp四层反向代理时,nginx的配置文件里面涉及的stream和server字段内容应该怎么书写?能否写个demo?比如有三张内网网卡,三个上游服务器。

    作者回复: 课程第四部分会有demo和指令讲解的。

  • 2018-11-20
    老师,请问一下,nginx作为四层反向代理时。
    配置文件的worker_connections如果设置为200000,那么nginx作为客户端向上游服务器发起tcp连接,是否会有端口65535个的限制?那该如何解决?使用虚拟网卡吗?还是有其他办法?

    作者回复: 会有限制,这是操作系统限制的。使用多网卡是解决办法,虚拟的也可以。