目录   前言   正文   1. Mesh（P2P）       简介        缺点        优点   2. MCU（Multi-point Control Unit）       简介       缺点       优点   3. SFU（Selective Forwarding Unit）     &...

目录   架构 Architecture   客户端 API   服务器 API    《WebRTC工作原理精讲》系列-总览    架构 Architecture   所有的用户都可以在房间内通过Licode分享他们的媒体流。 他们可以像视频会议聊天室、即时消息室、视频流会话和任何其他类型的虚拟场景进行实时协作。   服务器应用程序通过Nuve API来创建会话房间，其他用户通过Erizo连接到对应的会话房间。 会话房间是由Erizo控制器进行管理的，它通过Erizo API来控制不同的媒体流。   客户端 API   使用客户端的 API 可以用来处理Web应用程序中的会话房间和...

目录   前言   正文    前言   absl其实是一个C++工具库，是谷歌公司开发自己的产品项目（比如WebRTC, Chrome等）过程中形成的一个内部工具库子集。   《WebRTC工作原理精讲》系列-总览   正文   其实，谷歌产品线中很多模块都是可以共用的，为了避免重复造轮子，渐渐就形成了一个公共基础库。   我猜他们研发自己也很意外这个神来之笔。如果我们开发过程中需要修改 WebRTC，Chrome 的C++源码，这个库是可以直接使用的。   官方推荐用法如下：   absl::InlinedVector absl::WrapUnique absl::optional and...

目录   WebRTC   VoIP   相同点   不同点   联系   参考文献        《WebRTC工作原理精讲》       WebRTC   WebRTC（Web实时通信）是由万维网联盟（W3C）起草的API。简单地说，它是一种软件中介，使应用程序能够相互交互并共享数据。WebRTC用于启用浏览器到浏览器的应用程序，以便在不使用插件的情况下进行语音呼叫、P2P文件共享和视频聊天。WebRTC是一种通过JavaScript API访问的新兴技术，目前正在开发的是一种音频和视频数据流以及API，允许两个或多个用户在浏览器间通信、实时游戏、文本聊天、文件传输和其他在线共享。   V...

目录   前言   正文    《WebRTC工作原理精讲》   前言   WebRTC 在编码视频的时候有四个选项，今天我们就简单聊一下这四个选项的基本用途。后边的文章我们再介绍他们分别是怎么起作用的。本文简单介绍了一些概念和原理，想深入了解这部分内容的同学可以直接看这篇文章《WebRTC[43] - WebRTC是如何设置视频编码偏好的？》。   正文   好了，先回归今天的主题。首先，WebRTC定义了一个枚举类DegradationPreference，之所以没有直接使用enum枚举类型，是处于类型安全的考虑，枚举类的值是不能和整数型进行转换的，这样就可以保证数据不被意外修改。   e...

目录   前言   正文    前言   WebRTC的编码模式有很多种，其实是可以通过参数进行控制的，今天我们就来一探究竟，本文以M67为例。   《WebRTC工作原理精讲》系列-总览   正文   直接看关键函数：bool WebRtcVideoChannel::AddSendStream(const StreamParams& sp)    调用AddSendStream（）方法时，WebRTC首先会检验StreamParams参数是否有效，然后判断SSRC是否可用。创建WebRtcVideoSendStream实例的时候，将参数传递给WebRtcVideoSendS...

相信大家在阅读WebRTC源码的过程中，经常会遇到一些专用术语。明知道它们代表了一定的特定意义，但就是不知道，很影响阅读理解和学习体验，自己也有类似经历，平时就稍微记录了一下。其实如果你经常看的话，也不用专门记录，时间久了慢慢就理解了。   《WebRTC工作原理精讲》系列-总览   快来看看都有哪些常用术语吧！   1. VAD（Voice Activity Detection）算法的作用是检测语音。   2. AGC（Auto Gain Control），自动增益控制。   3. ANS（Auto Noise Suppression），自动噪声抑制。   4. AEC（Auto Echo ...

目录   前言   正文   结论     最近一直在做量子加密相关的项目，突然意识到以前很多高大上的技术都已经落地了。几年前还是一个概念，现在已经非常普遍的开始为我们服务了。顿时感叹科学技术发展之快。    前言   也许，我们从另一个角度来看待安全加密问题。安全加密不是为了加密而加密，是因为需求推动的，是一种技术发展的必然要求。我们在社会生活中，经常会接触到各种信息或者信息的载体，比如银行卡余额、食品保质期、货币真假、衣服质量等。再比如，早上起床，我们听到一条新闻，我们该怎么判断这条信息的真实性呢？   《WebRTC工作原理精讲》系列-总览   正文   信息的真实性指确保信息的来源可靠...

目录   前言   正文    前言   WebRTC除了通过API接口控制某些参数外，还能通过SDP信息进行音视频参数的控制，特别是在进行JS SDK开发时，这种情况是非常普遍的。   《WebRTC工作原理精讲》系列-总览   正文   本文以WebRTC的M76版本为例进行介绍。   首先来看一段SDP信息（只包含音频信息）：   v=0 o=- 8275923203002055919 2 IN IP4 127.0.0.1 s=- t=0 0 a=group:BUNDLE audio video a=msid-semantic: WMS 6a6d1509-69e0-4fc2-b447-5...

目录   前言   正文       OpenSLESPlayer       AAudioPlayer       AudioTrackJni    前言   在Android系统中，WebRTC播放音频的方式有三种，分别是OpenSLESPlayer、AAudioPlayer、AudioTrackJni。今天就来简单介绍一下。   《WebRTC工作原理精讲》系列-总览    正文   OpenSLESPlayer   OpenSLESPlayer 是使用基于C...

目录   问题   解决   一、使用file协议打开的本地文件   二、使用https协议打开的服务器文件   三、使用http协议打开的服务器文件    问题   基于WebRTC进行JS开发时，有时在浏览器上会遇到navigator.mediaDevices.getUserMedia为undefined的报错。   《WebRTC工作原理精讲》系列-总览   解决   报navigator.mediaDevices.getUserMedia为undefined的错误，其实是因为navigator.mediaDevices没有找到。但这也只是表相，其根本原因是浏览器的安全策略，特别是chr...

目录   前言   正文   结尾   参考资料    前言   大家都知道WebRTC集各种协议于一身，今天就来谈谈SCTP协议在WebRTC中的使用。   《WebRTC工作原理精讲》系列-总览   正文   SCTP的全称是Stream Control Transmission Protocol，它是一种传输协议，默认使用5000端口，在TCP/IP协议栈中所处的位置和TCP、UDP类似，同时具备TCP和UDP的特征。   编辑   通过上图，我们可以知道SCTP协议基本上集成了TCP和UDP的全部优点，属于介于二者之间的产物。在流量控制、拥塞控制、可靠性传输和包的顺序传输方面都和TCP...

目录   问题   解决       Java：       OC：       C++：       JS:    问题   WebRTC音视频通道建立的前提是完成SDP信息的交换，前端时间遇到了一个SDP信息交换失败的问题，非常具有代表性，今天周末特意整理了这篇文档。   报错信息：    Failed to set remote offer sdp: Called with SDP without DTLS fingerprint...

目录   前言   正文    前言   WebRTC推视频流遇到带宽限制时，是如何取舍分辨率和帧率的呢？今天我们就来具体分析，先从对外接口介绍走起。   《WebRTC工作原理精讲》系列-总览   正文   iOS的OC接口：    编辑   Android的Java接口：   编辑   C++接口：   编辑   SetParametersInternal()具体实现如下：    编辑   这里 media_channel_ 对象会调用哪个SetRtpSendParameters()方法呢？具体要看 media_channel_ 是音频Channel还是视频C...