从0打造音视频直播系统
李超
前新东方音视频直播技术专家，前沪江音视频架构师
立即订阅
2827 人已学习
课程目录
已完结 40 讲
0/4登录后，你可以任选4讲全文学习。
开篇词 (1讲)
开篇词 | 5G的到来将会为音视频插上飞翔的翅膀
免费
WebRTC 1对1通话 (23讲)
01 | 原来通过浏览器访问摄像头这么容易
02 | 如何通过WebRTC进行音视频设备检测呢？
03 | 如何使用浏览器给自己拍照呢？
04 | 可以把采集到的音视频数据录制下来吗？
05 | 原来浏览器还能抓取桌面？
06 | WebRTC中的RTP及RTCP详解
07 | 你竟然不知道SDP？它可是WebRTC的驱动核心！
08 | 有话好商量，论媒体协商
09 | 让我们揭开WebRTC建立连接的神秘面纱
10 | WebRTC NAT穿越原理
11 | 如何通过Node.js实现一套最简单的信令系统？
12 | RTCPeerConnection：音视频实时通讯的核心
13 | 在WebRTC中如何控制传输速率呢？
14 | 如何打开/关闭音视频？
15 | WebRTC中的数据统计原来这么强大（上）
16 | WebRTC中的数据统计原来这么强大（下）
17 | 如何使用Canvas绘制统计图表（上）？
18 | 如何使用Canvas绘制统计图表（下）？
19 | WebRTC能不能进行文本聊天呢？
20 | 原来WebRTC还可以实时传输文件？
21 | 如何保证数据传输的安全（上）？
22 | 如何保证数据传输的安全（下）？
23 | 实战演练：通过WebRTC实现一个1对1音视频实时直播系统
WebRTC多人音视频实时通话 (7讲)
24 | 多人音视频实时通讯是怎样的架构？
25 | 那些常见的流媒体服务器，你该选择谁？
26 | 为什么编译Medooze Server这么难？
27 | 让我们一起探索Medooze的具体实现吧（上）
28 | 让我们一起探索Medooze的具体实现吧（下）
29 | 如何使用Medooze 实现多方视频会议？
30 | 实战演练：通过WebRTC实现多人音视频实时互动直播系统
支持上万人同时在线的直播系统 (8讲)
31 | 一对多直播系统RTMP/HLS，你该选哪个？
32 | HLS：实现一对多直播系统的必备协议
33 | FLV：适合录制的多媒体格式
34 | 如何使用Nginx搭建最简单的直播服务器？
35 | 如何构建云端一对多直播系统？
36 | 如何使用 flv.js 播放 FLV 多媒体文件呢？
37 | 如何使用 video.js 播放多媒体文件？
38 | 实战推演：带你实现一个支持万人同时在线的直播系统
结束语 (1讲)
结束语 | 路漫漫其修远兮，吾将上下而求索
从0打造音视频直播系统
登录|注册
24 | 多人音视频实时通讯是怎样的架构？
李超 2019-09-07
在前面的章节里，我们通过大量的篇幅介绍了 WebRTC 在浏览器上对实时通信的各种支持。WebRTC 本身提供的是 1 对 1 的通信模型，在 STUN/TURN 的辅助下，如果能实现 NAT 穿越，那么两个浏览器是可以直接进行媒体数据交换的；如果不能实现 NAT 穿越，那么只能通过 TURN 服务器进行数据转发的方式实现通信。目前来看，Google 开源的用于学习和研究的项目基本都是基于 STUN/TURN 的 1 对 1 通信。
如果你想要通过 WebRTC 实现多对多通信，该如何做呢？其实，基于 WebRTC 的多对多实时通信的开源项目也有很多，综合来看，多方通信架构无外乎以下三种方案。
Mesh 方案，即多个终端之间两两进行连接，形成一个网状结构。比如 A、B、C 三个终端进行多对多通信，当 A 想要共享媒体（比如音频、视频）时，它需要分别向 B 和 C 发送数据。同样的道理，B 想要共享媒体，就需要分别向 A、C 发送数据，依次类推。这种方案对各终端的带宽要求比较高。
MCU（Multipoint Conferencing Unit）方案，该方案由一个服务器和多个终端组成一个星形结构。各终端将自己要共享的音视频流发送给服务器，服务器端会将在同一个房间中的所有终端的音视频流进行混合，最终生成一个混合后的音视频流再发给各个终端，这样各终端就可以看到 / 听到其他终端的音视频了。实际上服务器端就是一个音视频混合器，这种方案服务器的压力会非常大。
SFU（Selective Forwarding Unit）方案，该方案也是由一个服务器和多个终端组成，但与 MCU 不同的是，SFU 不对音视频进行混流，收到某个终端共享的音视频流后，就直接将该音视频流转发给房间内的其他终端。它实际上就是一个音视频路由转发器。
取消
完成
0/1000字
划线
笔记
复制
© 版权归极客邦科技所有，未经许可不得传播售卖。 页面已增加防盗追踪，如有侵权极客邦将依法追究其法律责任。
该试读文章来自付费专栏《从0打造音视频直播系统》，如需阅读全部文章，
请订阅文章所属专栏。
请订阅文章所属专栏。
立即订阅
登录 后留言
精选留言(8)
Derek思考题：录制桌面？作者回复: 不错！
2019-09-15 1
helloa目前的实际应用中，是使用Simulcast多还是SVC多呢？WebRTC支持它们吗？作者回复: 两种都支持，目前用 Simulcast居多。
2019-10-17- tiga在 SFU 方案中，可以制作一个虚拟客户端接入 SFU 服务器，仅拉流，不上传流。
这个虚拟客户端接收每个成员的音视频流后，写入文件。
如果需要录制成一个文件，那虚拟客户端还要实现混屏和混音功能。作者回复: 最终是否混音/混屏要看业务要求了
2019-09-30 
澈Mesh 方案如果客户端全是用 Adnroid和iOS设备不使用浏览器 是否可以支持多人连接作者回复: 可以
2019-09-18- 澈使用Mesh架构，如果客户端全是Native的（iOS和Android设备，不允许浏览器接入，那么允许最对的连接数是多少）
作者回复: 许多，许多！1万个，10万个一点问题都没有，关键点不在这里，你想你应该可以想瓶颈是什么
2019-09-18 2 
JohnSFU相当于中转服务器 他的outbound bandwidth流量会消耗很大呀 很烧钱呀 李哥有没有更省钱又不影响效果的方案呢作者回复: 没有，烧不烧钱其实与你的业务有很大关系，如果人数少的话你用Mesh方案是最省钱的。
2019-09-17 1
小沙弥老师，我想问一下，浏览器中用js可以实现回音消除吗？我在做一个sip的终端与浏览器互通的项目，噪声回音怎么处理啊？作者回复: js里有回音消除的开关，应该是在 getUserMedia这个 API 的contraints中的音频配置中设置的，你可以将它打开。
2019-09-09- Walter1对1 方案中的云服务器需要2M的带宽，sfu方案是不是需要更高的带宽呢？
作者回复: 必须的！
2019-09-09
收起评论