08 | 有话好商量,论媒体协商
该思维导图由 AI 生成,仅供参考
在 WebRTC 处理过程中的位置
- 深入了解
- 翻译
- 解释
- 总结
WebRTC中的媒体协商是实现音视频通信的关键环节。通过SDP格式整理媒体信息,通信双方通过信令服务器交换SDP信息,找出共同支持的媒体能力,最终实现音视频通信。文章详细介绍了WebRTC中媒体协商的原理和实现过程,包括位置处理、RTCPeerConnection类的作用,媒体协商的过程以及代码实现。通过createOffer、createAnswer、setLocalDescription、setRemoteDescription等API,呼叫方创建Offer,被呼叫方收到Offer后创建Answer,并通过信令通道交换SDP信息,最终完成媒体协商。此外,文章还简要介绍了RTCPeerConnection对象的作用,以及在WebRTC中SDP消息的交换使用RTCPeerConnection对象完成的重要性。这篇文章对于想要深入了解WebRTC技术的读者具有很高的参考价值,能够帮助读者快速了解WebRTC中媒体协商的关键过程和技术特点。
《从 0 打造音视频直播系统》,新⼈⾸单¥59
全部留言(19)
- 最新
- 精选
- qiezitxsdp信息的交换是通过信令服务器完成的,只不过sdp的填写是通过RTCPeerConnection完成的
作者回复: 非常准确!
2019-12-1319 - 波波安我使用chrome播放h264视频流,流媒体使用kurento,内部做了转码为vp8,chrome默认使用vp8协商,什么方法可以使chrome使用h264,避免转码
作者回复: 修改SDP,将m=video中的多个编码器换一下位置,把H264放在最前面就可以了。不过由于WebRTC的整体机制没有对 H264做特别好的适配,所以特别容易产生卡顿与花屏。
2020-06-305 - 俊哥老师,我有一个疑问,A怎么知道呼叫的B而不是其他的C、D呢?从你的js代码里没有看出来对B的描述,比如B的ip地址是xxx.xxx.xxx.xxx。那么A调用sendMessage(sessionDescription)发到哪里去了呢?
作者回复: 通过信令服务器转发。 A与B都要先与信令服务器建立连接,之后通过服务器转发。
2019-10-1833 - Jian呼叫方和被呼叫方的角色是如何确认的呢?会否存在两端都向对方发送offer的情况?是由服务器确定的?
作者回复: 谁先发起呼叫谁就发offer,另一方发answer;这完全有应用层控制;比如第一个人进入房间后,就在哪里等待,当发现第二个人上来的时候它就给对方发offer 就好了。如果两个人同时进入房间,就在服务器端建个队列,让他们顺序进入就好了,非常好处理对吧?另外两端都发offer 那协商必然失败。
2019-08-0133 - icema目前遇到了采集steam没有声音的问题,对方听不到我的声音,并且是偶现,不是必现,前端有没有什么方式可以检测或者监控采集到的流是存在异常的或者没有声音的呢?
作者回复: 你可能通过receiver里的统计信息来判断
2020-04-212 - Benjamin两端的 SDP 的创建都是在 RTCPeerConnection 中完成,创建好了 SDP 信息。至于两端交换这个 SDP 的实现,是完全可以剥离解耦的。 常见就是用 single 服务器来交换,至于交换 SDP 的具体承载模式都是自己去实现的。 常见就是用 socket,为了好玩或者一些常见用 HTTP 也可以,甚至可以生成 txt 文件在用 ftp 交换都可以只要不嫌麻烦 😀 但是,SDP 第一次后的来回交换是不是还有,这块一直很疑惑。
作者回复: 协商成功之后就不会再有了,除非你自己要重新再进行协商
2020-02-112 - 君请问老师哪些开源的sip框架支持webrtbc的吗
作者回复: 你可以使用sip 协议做信令,但sip 协议用的人比较少,一般都在监控系统中使用,目前开源的基本没有人使用sip 与WebRTC 结合
2019-08-0222 - Beast-Of-Prey发送信令用socket?
作者回复: 由于信令数据量不大,所以你可选择的协议就比较多了,TCP、HTTP/HTTPS、WS/WSS,都可以,底层实现都是用的socket
2019-08-012 - Her later此时,媒体协商过程完成。紧接着在 WebRTC 底层会收集 Candidate,并进行连通性检测,最终在通话双方之间建立起一条链路来。 如果 Candidate 是 WebRTC 底层收集的 ,那么为什么还需要经过信令服务器呢 ?
作者回复: Webrtc 底层收集的candidate 是他自己的地址信息呀,需要通过信令服务器交换给对端双方才能通信
2021-04-1621 - Jason思考题:从老师的讲解来看,SDP 消息的交换不是使用 RTCPeerConnection对象完成的,RTCPeerConnection对象负责创建offer、设置本地SDP描述信息、设置远端SDP描述信息、创建answer。交换SDP消息应该是socket对象完成的,但socket的类型啥呢,还不知道。
作者回复: 有没有想过用http?它可是浏览器天然的哈
2019-08-011