肥宅钓鱼网
当前位置: 首页 钓鱼百科

webrtc最全面的指南(你未必知道的WebRTC前世)

时间:2023-08-05 作者: 小编 阅读量: 2 栏目名: 钓鱼百科

你未必知道的WebRTC前世图片来源@视觉中国文丨凡泰极客如果你是一位工程师,想必听过WebRtc,就算没有开发过;如果你是一位互联网用户,大概率使用过WebRTC,虽然可能没有意识到在这个视频为王的时代,我们漫谈一下这个技术的。

图片来源@视觉中国

文丨凡泰极客

如果你是一位工程师,想必听过 WebRtc,就算没有开发过;如果你是一位互联网用户,大概率使用过 WebRTC,虽然可能没有意识到。在这个视频为王的时代,我们漫谈一下这个技术的来龙去脉以及一些有趣的应用。

WebRTC 关卿底事?

文言「底」也表示疑问,是「何」、「什么」的意思。如南唐中主李璟在调侃冯延巳时所写「风乍起,吹皱一池春水,干卿底事?」

如果说 20 世纪人类的书写工具是笔、通讯方式是邮局寄信,那么 21 世纪初人类的书写工具就变成键盘、通讯方式就是电子邮件/短信/即时通信聊天,而从现在开始的可见未来,手机摄像头/VR 设备就是你的书写记录这个世界的工具、实时网络通讯就是你的通讯方式。

视频成了娱乐、学习、商务会议、社交、电商的载体,人们逐渐不再有耐心阅读文字性的信息,现在连购买一件自安装的家具,它都附带二维码,用户只要一扫即打开安装指南的视频,再也不用反复研究纸质说明书里那往往画的非常蹩脚的安装图。

视频不仅是信息的展现方式,它从一部部的 mov、jpeg4、wmv(你硬盘上熟悉而又陌生的文件对不对?)变成一个个的播放器,再变成一个个的 App,然后又从这种单向的“录制 上传 下载  找播放器打开  播放”,变成了“现场录制  边录边播  实时收看”,再变成视频与即时通讯工具、会议工具融合的双向“录制与播放”。

远程视频会议已经成为如今办公的标配

传说中的“实况直播”终于发展到一个“平民化”的阶段。WebRTC,全称 Web Real-Time Communication,就是这么一种基础技术,它促进你用新的“笔”(智能视频设备,例如你的手机)以影像而非文字方式去记录与沟通。

它的奥妙在两部分,自然就是:WebRTC!这不是显而易见的废话吗?还真不是… 但我们先聊一下 RTC,实时网络通讯。

与 RTC 相比,WebRTC 仅仅是针对网页实时通信所建立的标准,其中也只提供了基础的前端功能进行实现。我们并不能简单地将 WebRTC 与 RTC 划等号。

“感觉上很快”就是实时?

WebRTC 强调“实时通讯网络”。网络早已无处不在了,但是否“实时”呢?大部分情况下不是。

首先,当前互联网上最重要最基本的 HTTP 协议并不是为“实时”应用设计的,当你访问一个网站的时候,你发起请求,等候网站的服务器把内容应答送回到你的 PC 或者手机设备,虽然这个应答可以非常快,但本质上是“请求-等候-应答”,这个“等候”,往往是一个不易控制的时间变量。

  • 电子邮件是不是“实时”的呢?显然也不是,虽然相比传统的邮递快了十万八千倍,但是它本质上是“存储-转发”(Store-and-Forward)的机制,是由互联网上很多的邮件服务器以接力的方式,在某个最优网络路径上把电邮从某甲的设备送到某乙的设备,任何中间环节都可能延迟。
  • 聊天工具是不是实时?它相比电子邮件而言,有更加“在线”的会话感 – 一个群里聊天信息来来回回、这边发那边看,好像很“实时”,但它的技术本质依然是“存储-转发”,消息接收方不在线没关系,只要“上线”(打开 App)就能收到,也不需要马上回复。

事实上,对快慢的感觉不能定义实时。网络的低延迟、高带宽固然是实时性的一些保障,但不等同于实时。

用大白话来描述的话,实时视频的目标,是把正在某个地方A发生的人和事,以几乎零延迟、不失真的方式“同步”到另外一个地方 B,让 B 的人瞬间看到、听到,并且反之亦然。人和事都是在不断的变化中,视频需要以“流”的方式源源不断的向远端推送更新,A、B 两地的人虽然隔着十万八千里,但是他们之间的网络能把“视频流”瞬间同步,让彼此感觉近在咫尺,这就是“实时”。

那么现在我们的“实时通讯网络”,距离真正的实时还有多远?

构建元宇宙?无限追求实时

上述问题的简单答案是,有点远。

我们对“实时”的追求是无限的,详细一点的解释,可以借最近热炒的“元宇宙”作为例子。元宇宙,是一个“仿真”或者说“全真”的互联网,它的特点之一,是利用极其强大的实时网络,把物理世界里事物的无限细节信息化并瞬间传播给接收者,使其通过一些特殊设备去复原这些信息并最大程度感受到在原发地事物的原本样子。

这些信息能包括些什么呢?例如有空间感的立体声效(Spatial Audio),让你在一个线上会议室里能听到讲话的人在自己的什么方位,让你在一个虚拟社交沙龙里能听到轻微的背景音乐、左边一群人的闲言碎语、右边吧台上酒保的调酒声;例如能足以让远端设备渲染还原成逼真 3D 效果的人或物的特征数据,大至街景建筑小至毛发与脸部表情,让你在虚拟空间里与其中的物品或人进行互动,像真的一样; 假如有一天我们发明出能收集味道并信息化并在远端通过刺激大脑皮层还原味道的设备,那么这又是一种需要传送的数据。一句话,我们希望把任何物理距离以外的东西,色香味俱全的“同步”到自己的大脑。

如果说我们现在的互联网是 2D 的话(即你只能面对一个屏幕这样的二维平面去交互感知),元宇宙就是下一代 3D 互联网,你“沉浸”在其中,你被实时送达的数据包裹,你的眼耳鼻舌身意“六根”都在里面。不要以为这是科幻,一些技术已经看的到摸得着,简单者如 hubhub,复杂花哨者如 Google 的 Starline。

有兴趣的小伙伴可以去看看 Metaverse Primer

在 Matthew Ball 的“元宇宙入门”( Metaverse Primer)中,提到实时网络是让这一代沉浸式互联网成为可能的8种最核心技术之一。海量数据的极低延迟实时传输能力,目前技术上还是有点遥远。

虽然元宇宙还在“炒作曲线”的不知道哪个点上,可是一些实实在在的商业应用场景确实已经可以基于实时的视频技术进行构建。除了大家熟悉的直播带货、娱乐互动,还有虚拟展会、实时教练培训、远程医疗(Telehealth)等等应用,相信任何线下的场景,只要技术允许,都会有产生线上仿真的一天。

去中心化的通讯方式?

WebRTC 的里的“Web”部分,并非简单无意义的泛指,而是特指 Web Browser(浏览器)。这个标准以及实现它的技术,目前均已内置在各主流浏览器中,理论上让任何用户通过任何 PC、Mac、iPhone、Android 甚至车载系统的浏览器,即可发起彼此之间的直接视频语音通讯。

也就是说,张三和李四,不管人在何方,理论上只要各自有一台设备运行一个支持 HTML5 标准的浏览器,即可以无需经过“中间商”(互联网大平台、电信运营商等等)的通讯服务或渠道而建立这两个浏览器之间的直接连接,实现传说中的“点对点”(Peer-to-Peer)视频通讯和文件分享!如果还有王五、陈六、何七几位呢?欢迎加入,组成一个完全无障碍的、无服务器的、自组织的对等网络,每个人的浏览器都是这个网络的节点,共同进行视频会议、文件分享。

有点像 VR Pro Max 的感觉

无中间商赚差价、无互联网大平台收集通讯各方的隐私数据,个人掌握自己的信息安全,也不依赖任何第三方,是不是忽然有一种自由飞翔的感觉?去中心化、点对点、对等网络,让我们回忆到互联网美好的蛮荒时代 – BT、电驴、迅雷… the good old days…

可惜暂时来说,上述情形只是一种理想,因为互联网的实际环境复杂,例如我们每个人的上网设备实际上都是在某个小区宽带、移动运营商网络、酒店 WiFi、公司局域网等等的后面,互联网实际上是由无数这样大大小小的局部网络通过一系列的网络设备、网络协议进行互联互通的,链路上信息的传递通过不同网络的设备进行层层转发和网络地址/端口的“翻译”转换,最终才到达某个个体设备。

在深圳南山区科技园某公司的员工张某,如何让其浏览器发现并连接北京朝阳区某小区的群众李某的浏览器设备地址,从而建立起点对点直连?没有直接办法。

现有的技术实现方案,依然是中心化的,即张某与李某,不得不通过一个第三方的服务来“发现”彼此的地址,这个环节叫做 Signaling(信令)。

“去中心化”临门一脚,暂时没有现成技术,比较可惜。

区块链WebRTC 有没有的搞?

有一些这方面的研究探索,待有志者进一步深入。

首先是关于技术本身的优化与扩展。例如有人提出利用 Kademlia(一种 DHT/分布式哈希表的算法,被以太坊、Storj 等区块链用于组网)实现信令服务的去中心化。一篇 IEEE 的研究论文则探讨了通过区块链智能合约去提高 WebRTC 的安全性。

区块链能借助WebRtc实现新的突破吗

其次在应用方面,有一种方案提出,在疫情以来远程办公比重日益增加的情况下,出于企业信息安全、合规留痕、工作效率管控等等原因,需要对例如销售、服务等各种发生在公司外部的远程通讯活动进行记录,依靠现有的基础设施提供商的 CDR(Call Detail Record)难以确立单一可信来源、追踪上下文,可以结合区块链与智能合约,对 WebRTC 的通讯记录数据出块,实现单一可信源拷贝、不可篡改以及分布式存储等好处。

很多金融机构的服务,例如开户或者购买理财产品等,需要远程视频见证,也许是区块链 WebRTC 的一个很好的应用场景。

WebRTC的未来与Google的算盘

讲到未来,我们不得不先回顾一下这个技术的历史。

2021 年 1 月 26 日,W3C 正式宣告 1.0 标准(“WebRTC 1.0:Real-Time Communication Between Browser”)。此前 WebRTC 经历了整整 10 年的发展:2011-2014 是这个技术的探索期,大家的主要疑问是:我是否应该尝试这个技术?2015-2019 是这个技术的成长期,随着所有主流浏览器对 WebRTC 的支持,业界的问题变成:我该如何利用这个标准技术?有些什么应用场景?2020 年开始迄今,是这个技术应用的差异化时期。

WebRtc 的标识具有典型的 Google 配色

2020 年的新冠疫情,被认为对 WebRTC 技术产生直接促进性影响。视频会议无处不在,Zoom 变成一个家喻户晓的品牌(在国内市场自然是某些互联网巨头的相应品牌),可以说大众对云端视频会议的认知与接受度得到史无前例的加强。

同样是 W3C 的标准,WebRTC 有没有机会像 HTTP 之于“古典互联网”一样,成为下一代互联网(无论你称它为“实时通讯网络”、“Web3.0”还是“元宇宙”)的基础协议?回答这个问题,得了解一下 WebRTC 背后的真正“操盘手”。

操盘手是 Google – 它不仅推动 WebRTC 成为一个互联网标准,也贡献了大部分的底层开源技术。十年前 Google 干这事的动机是什么呢?大概有这么几个原因:

  • 押注这十年的技术发展,让视频编码技术、视频质量、网络带宽、运算资源都有重大发展,视频成为网上最最重要的应用载体;
  • 很多企业当时的视频会议还是企业内部的、设置使用繁复的、需要专用设备的那种技术。随着云计算的发展,视频会议会不会变成云服务?很有可能;
  • 视频应用需要专门的软件工具(回忆一下十年前五花八门的视频播放器?),Google 不控制计算机操作系统,但是它的 Chrome 浏览器已经开始击败微软和火狐,成为无处不在的存在。把一个视频技术内置于浏览器,给用户带来极大便利,视频内容与网页内容随时交织在一起,打开即看,下载什么视频播放器呢?
  • 最重要一点来了,当年 Google 在视频会议这个领域,毫无优势可言,领先的技术平台提供商并不是 Google。所以,开个源、搅个局,完全没有坏处。

WebRTC 标准与技术,最终赢得了 Firefox、Opera、Apple Safari、Microsoft Edge 以及各种 Chrome 变种浏览器的支持,从这个角度看,是取得巨大的成功。但比较讽刺的是,Google 自己的产品中涉及视频的,似乎都没有太取得商业上的成功。例如视频会议方面,大家甚至都不太想起 Google 也有这方面的产品(而且质量不错),反而 Google 的竞争者们不少都采用 WebRTC 却取得竞争优势。

WebRtc 在各浏览器中的支持程度超过 90%

当 WebRTC 成为公共标准后,Google自己貌似在开始与 WebRTC “脱钩”,开始投资到另一个全新的技术栈:WebTransportWebCodecsWebAssembly。其中 WebTransport 主要基于 QUIC(HTTP/3的传输层协议),带来更低的网络延迟,更适合视频类应用。WebCodecs 内置于浏览器,让其有独立的音视频编码解码能力。WebAssembly,一个已经发展了相当长时间、进入成熟期的开源技术,它不仅让浏览器渲染执行 JavaScript 代码的性能获得“原生”级别的提升,更重要的是它可能支持机器学习方面的结合。

如果 Google 作为 WebRTC 开源技术的主要推手,不再投资到其中,那么 WebRTC 1.0 之后,除了修修补补的小版本,还有持续发展的未来吗?我们基于 WebRTC 打造应用,是否得担心一下?

WebRTC 成为下一代互联网的实时应用基石,估计有点悬,因为确实有潜在的更优解在那里。但是,对于应用开发者,未来几年内,WebRTC可能就是我们的最优解,原因有三:

  1. 不要说 HTTP/3,到了今天互联网的主体还是依赖古老过时的 HTTP/1.1,HTTP/2 还在缓慢的增长中。替换一个积累10年而成熟的标准不容易;
  2. 虽然 Apple 有它的 FaceTime、Zoom(以及国内外的视频服务巨头们)有自己的封闭技术,未必在意 WebRTC,但是对于独立开发者,一个标准的、开放的、互联互通的、工业品质的开源技术,依然是我们最好的选择;
  3. 标准与开源的好处就是,只要有企业能利用它做出杀手级应用、商业成功,就会有人去继续支持维护与创新,接过 Google 的枪。例如会不会有人把 WebRTC 更彻底的去中心化?利用 QUIC 去优化 WebRTC 的低延迟?总是有人会去琢磨。

作为应用开发者,可以做的事情是应用场景的创意发掘与创新,是促进一个标准/技术繁荣有生命力的最佳保证。

杀手级WebRTC应用有哪些?

Alexa,亚马逊的智能音箱 Echo 里的智能助手,采用 WebRTC。

Facebook Messenger、Discord、Amazon Chime、Google Meet/Hangout/Duo,都是基于 WebRTC 的视频通讯工具、视频会议应用。

Clubhouse,2021 年现象级的语音社交工具。

Chrome Remote Desktop,远程桌面工具。对于一般商务人士例如市场、销售等等来说,可能过于技术,难以驾驭。但这种工具为什么没有人深入研究借鉴一下,发展出实时远程销售培训、实时远程机器维修人员培训、实时远程医疗人员培训这样的东西呢?

最后必须特别推荐三个值得关注的 WebRTC 相关公司及其应用场景:

peer5.com

Peer 5,一个基于 WebRTC 的 eCDN(企业内容分发网络),对内容进行网络加速,充分利用到 WebRTC 内置在浏览器中的 P2P 能力。今年8月份被微软收购。这是一个借力新标准、开源技术成就一家创业公司的成功故事。

hopin.com

Hopin,一家英国的独角兽公司,采用 WebRTC 打造“虚拟活动平台”,成立两年成功融资 5 亿 7 千万美元、收购 4 家公司。

stadia.com

Stadia,这是 Google 尝试进军游戏行业的一大尝试,能否成功不去讨论。其有趣的地方是开启 Cloud Gaming 这一领域,也可以称之为“Gaming As A Service”(游戏即服务)或者“On-Demand Gaming”。怎么理解它呢,一直以来我们打 Xbox、任天堂的游戏,都是需要买一个游戏机,打不同的游戏就放进去不同的游戏光盘。 Cloud Gaming,就是你不需要本地的光盘了,游戏在云端运行,然后通过流媒体的方式传输到你的屏幕上,就像你在电视上点播电影一样,但你用游戏手柄可以与“电影”互动。

你怎么看待 WebRtc 在未来的发展?欢迎与我们交流。

,
    推荐阅读
  • 艾尔登法环绘画不飞之鸟在哪

    绘画不飞之鸟的奖励是祷告火焰重罪,许多小伙伴不知道不飞之鸟在哪,下面小编就带来艾尔登法环绘画不飞之鸟位置介绍,一起来看看吧。艾尔登法环绘画不飞之鸟位置介绍首先画的位置在王城城寨一楼篝火边上,就是王城圆桌。此画需要在烧王城之前拿,目前没有找到烧王城之后拿的方法。

  • 结婚不久的妻子被害案(妻子被害三个月)

    本月11日晚,山东莱阳一对母女正常回到家里。是有针对的作案。网友的恐慌,在警方的通报后得到一定缓解。温州的一对情侣在街上同行时发生争吵,男子暴怒中用啤酒瓶将女友当街刺死。依次在2016年及2021年的两起杀妻冰柜藏尸案。上海杀妻藏尸案的被告人,朱晓东。朱晓东在法庭上自称是“激情杀人”。激情杀人指的是无故意杀人动机,但因失去理智犯罪。令受害人窒息身亡,后利用冰柜藏尸数月。二位男主称这次行动为“舍命陪君子”。

  • 交通事故民事诉讼时效的规定是什么

    但是,从权利被侵害之日起超过二十年的,人民法院不予保护。第一百八十九条当事人约定同一债务分期履行的,诉讼时效期间自最后一期履行期限届满之日起计算。诉讼时效期间届满后,义务人同意履行的,不得以诉讼时效期间届满为由抗辩;义务人已经自愿履行的,不得请求返还。第一百九十三条人民法院不得主动适用诉讼时效的规定。

  • 梁朝伟获得香港金像奖(盘点TVB万千星辉贺台庆经典场面)

    最后肥姐还要在鸡蛋上玩呼拉圈,完成后一只鸡蛋都没有烂,真是看到现场艺员和家庭观众都非常紧张。曾志伟扮肥姐当年曾志伟与一班男星牺牲色相,反串组成《男色魅影歌舞团》演出歌舞,而曾志伟就自荐扮演因病缺席的沈殿霞(肥姐),令观众捧腹大笑,成功掀起高潮。王祖蓝向李亚男求婚王祖蓝在表演魔术时假扮失误,之后突然捧住红玫瑰及巨钻跪地向李亚男求婚。李亚男当场喊着答应,场面感人。

  • 油菜和油菜籽的功效与作用(油菜和油菜籽的功效与作用一样吗)

    菜籽油中含有丰富的不饱和脂肪酸以及维生素E,能够使人体很好的吸收其中的营养成分,对于软化血管、延缓衰老等具有重要的意义。

  • 英语考试怎样才能考100分呢?(英语如何考满分)

    下面希望有你要的答案,我们一起来看看吧!英语考试怎样才能考100分呢书要仔细不要放过任何一个你能记住的单词。考试要细心,听力要聚精会神.带上100%的精力去记忆和学习。另外音标要从字母的发音开始学习,音标是很重要的,多听标准发音磁带或是别的资料。把书上的单词和语法都背会。课文上的经典句子。

  • 空心菜粥做法(怎么做出简单好吃的空心菜粥)

    接下来我们就一起去研究一下吧!空心菜粥做法先把白粥煮好,备用。蒜拍碎,空心菜洗好,然后空心菜梗切碎,锅里放少量油,转动锅,让锅底均匀沾上油。把蒜米放进锅里,放盐,放空心菜梗炒一下至软,再放进白粥。用少量冷水兑开淀粉,把水淀粉倒进粥里,沸腾后盛起即可。

  • 刺客信条奥德赛多少个剧情(奥德赛官方剧情确定)

    刺客信条奥德赛多少个剧情今年E3展《刺客信条:奥德赛》正式揭露后,育碧便陆续透过游玩影片、游戏截图展示续作内容以及新加入的对话选项要素。将卡珊卓列为官方正史人物的做法,代表育碧正逐渐迈向更为多样与广纳各种可能性的玩家市场,同时也替传统男性主宰的电玩领域开创新局。尽管提倡游戏多样性并非坏事,官方的决定仍引来少数网友们抱怨,指控这不过是大公司为了迎合玩家而采取的做法。

  • 东莞住房公积金首套房最新贷款利率什么时候执行?

    利率调整时间的界限2022年10月1日(含)以后发放的个人住房公积金贷款,按调整后的新利率执行。2022年10月1日前已发放未结清的个人住房公积金贷款于2023年1月1日起按调整后的新利率执行。

  • 象拔蚌怎么吃(简单炒一下就很好吃)

    象拔蚌怎么吃首先买来新鲜的象拔蚌,将象拔蚌放在砧板上,用刀剔除两个蚌壳,剔壳的时候先用刀翘一边,另一半用手按住,如果怕打滑,可以用块湿毛巾按住。蚌和肉分离后,用清水分别洗净,然后把象拔蚌切成三部分,每个部分用作不同的烹调方式。然后取下膜丢掉,这时候,用刀将蚌身与蚌胆轻轻分离。上述操作处理好之后,象拔蚌就加工好了。