通话技能从低延时到超低延时实时通讯快速迭代，越来越多运用与服务迁移至线上，越来越实在无损地复原线下体会，新的互动方法和场景不断出现，从高度数字化到拟真化再到全真互联网年代。本次LiveVideoStackCon 2021上海站咱们约请到了腾讯云副总裁李郁韬来共享音视频的革新趋势、演进以及未来。

　　讲演 / 李郁韬 咱们好，我是腾讯云的李郁韬。作为LVS的老朋友，回想起上一年在电脑前用腾讯会议参加LVS线上圆桌评论，与咱们共享“危机之下的音视频技能驱动产品立异”。很快乐能再次与咱们团聚在此，面临面地沟通音视频在后疫情年代的展开趋势。 个人来讲，我很感谢这个年代，在上一年到本年这段困难时期，在座的音视频职业从业者依然能发挥技才能量，为社会发明价值。

　　本次共享内容首要环绕后疫情年代翻开，要点共享互联网数字化场景运用音视频技能的新事例以及展开趋势。 未来的互联网是全真的，是线上线下结合的，是数字与实体相通的——这样的互联网年代被叫做全真互联网年代。咱们团队对全真互联网是什么有许多的考虑，总结来说，首要它要有实时互动的才能；其次它要有高清音视频沉溺式体会；然后它要有无处不在的接入才能，例如APP、小程序、H5及硬件终端；终究它要有丰厚的内容制造才能，使全真互联网年代充溢有意思、能消费的内容产品。

　　三年前，腾讯协作同伴大会做过猜测，两到三年后整个音视频商场会以短视频为主，直播与长视频为辅。2020年的商场中，短视频和直播的活跃度显着居于前列，短视频用户浸透率趋势高达75%。可见短视频现已成为线上数字文娱内容消费的首要载体。

　　除了商场的底子载体被短视频、直播掩盖以外，许多职业都出现了大改动。第一是直播范畴，电商直播成为一切途径的标配。上一年，在整个直播电商商场流量增加了8倍，估计2021年大盘将打破万亿规划，信任在未来两到三年依然会呈高速增加的趋势。未来每一个直播途径和企业都会具有电商直播的途径做数字化营销。

　　第二是教育场景，头部的在线教育途径运用许多音视频通讯技能完结了各类生动教育；许多安排迫于疫情无法线下经营，也不得不选用SaaS东西，将线下教育场景搬至线上，许多OMO时机出现，上一年商场的浸透率增加很快，但全体仍是处于较低水平。因而，咱们估计教育场景在未来两到三年还有很大空间可以发掘。 第三是国内企业直播以及多媒体服务。自从疫情后，每个企业都在考虑怎么在线上有更好的门户、途径、线上事务流程。

　　多媒体服务和承载才能成为有必要面临的作业应战。从商场陈述看，2020年企业直播的同比增速超越100%，估计2021年整个商场规划有望到达50亿以上，并坚持高速增加。将来每家企业或许都会有专属的直播频道、视频号、专属短视频媒体库，而音视频技能将会成为社会的根底设施。

　　腾讯云一切产品线包含视频云、云通讯都会为线上数字化日子奉献技才能量和B2B产品，使线上数字日子进一步多媒体化。

　　关于直播电商，这儿讲一些不相同的。咱们或许都知道，一切APP做直播电商都需求SDK，要买CDN服务、点播服务。上一年疫情时，许多传统企业无法现做APP，这就导致它们需求挑选轻量化进口，快速开发途径支撑电商直播转型——小程序成为见义勇为的挑选。疫情期间腾讯云调查到电商直播流量涨了4倍多，50多家各类企业或电商途径都根据小程序做了电商直播。腾讯云将音视频体会以及其通讯才能做了包装和输出去承受这些需求。

　　每年的电竞直播都是对音视频、流媒体职业巨大的技能应战。根据曩昔三年的数据，每年LPL的决赛在线%增加。在全球范围内，友商直播峰值1千多万一同在线来自印度板球的全民观看。咱们作为我国的企业，可以很骄傲地说每年支撑的电竞直播峰值早就打破2千万，这背面是许多CDN根底设施保证以及降本增效关键技能的沉积堆集，包含腾讯云智能高清极速转码以及P2P降带宽技能。

　　在每年盛事峰值突发的状况下，社会网络带宽都有极大节约。从前，咱们只是在线上看直播，而上一年咱们通过一些技能手段与赛事主办方、播映途径方做了三方联动，将一键互动才能植入了竞赛进程中，使观众在看电竞直播画面的一同，可以实时看见游戏进程数据，一同还能跟现场说明做实时互动。以上测验点会在未来做进一步发掘与提炼，让未来电竞竞赛观看的互动性更强。

　　上一年，电竞直播进程中需求做到精彩视频的快速生成，且微博、抖音、快手等其他短视频软件都需求许多及时分发，现场的运营人员都可以通过云化在线修改东西和在线实时生成东西将精彩集锦编排，分发至相应途径，构成传达，招引更多观众参加直播房间。 上述两个特色都是从上一年开端大规划运用，估计未来两年将有更多的互动、更快内容的生成与分发会在电竞直播中进一步拓宽。

　　接下来共享的是云游戏，信任咱们都不生疏，这也是一个十分火、聊了两年的论题。十分激动的是从上一年开端，从腾讯云视点去看云游戏，它的展开速度是飞快的，远远超出了预期。我国整个网络环境与网民终端才能，以及整个技能老练度彻底支撑将许多端游和部分手游进行云游化，腾讯云游戏供应的PaaS层可以便利地把一款端游、手游在云端进行实例化，通过串流服务一同给到途径方全套的SDK处理方案，使之完结云游戏的完好上架和接入。

　　最近展开较好的大途径，包含斗鱼、菜鸡、YY都在云游戏上构建了许多实例，测验与自己的直播做互动。上图中的事例是菜鸡现已在云游戏中做主播与观众的接力玩法，例如主播正在玩、一切人正在看的时分，玩家可以申请与主播一同玩，可以到云游戏房间解锁主播控制权，乃至与主播在游戏中PK。

　　其他观众可以欣赏他们的游戏进程。整个进程的互动性得到了极大的增强。许多Party类、养成类游戏都十分合适此类玩法。它背面依托的是便利接入、低本钱、安稳的云游戏PaaS层，在上面做二次分装就可以便利地完结云游的处理方案。

　　在线文娱类比较多的场景是语音谈天室和在线K歌。咱们都关注到前段时刻北美的Clubhouse比较火，它运用到的技能咱们也都不会生疏，许多语音谈天运用早现已这样做了。在线K歌场景从曾经的合唱接龙方法到现如今可以完结多人实在实时合唱。通过一些测验和比照，时延现已到达70毫秒以内，在不久的将来，咱们就可以在全民K歌APP中体会到全实时合唱才能了。它背面依靠的是RTC技能的极致优化和全球各运营商布置节点的才能，以及事务上协作集成的作业，未来语音谈天和K歌场景会往全实时、更高清的方向展开。

　　接下来我想与咱们共享内容出产制造。在线制造数字化进程加快，每天消费内容需求量不断增加，对内容出产方应战很大，之前MCN的修改一人需求花很长一段时刻去创造，一同需求许多人帮他审阅、后期制造以及分发上传到相应的视频途径。跟着云化进程和多媒体云端处理才能的加快，未来作业都会移至云端完结，以真实变成全真互联网的内容供应。

　　从商场规划来看，2020年MCN商场规划达245亿元，数量达28000家，均匀同比增速大于100%。内容消费端，网络广告商场规划超万亿，企业及广告主更愿意为内容营销付费买单，未来在数字化营销以及内容分发和消费上，内容出产是有必要处理的问题。

　　首要是功率问题，腾讯在这一方面做了两年多云剪，云导播产品。翻开腾讯制造云，挑选云转推，增加输出地址，可以挑选视频号等多个第三方途径，填写推流地址，当即转推，即完结多途径同步直播。视频内容往往触及多人协作，成员A进行资料拍照并上传至云媒资，成员B在后台进行资料审阅、分类、打标签等操作，这儿预备了海量的视频模板，成员C可以运用模板快速制造成视频内容，点击导出完结创造。腾讯制造云支撑将视频一键上传至快手、微博、企鹅号。

　　本年咱们现已将整个产品线升级成云创多媒体引擎。其实咱们不是一个视频途径方，不做内容出产、内容分发，但咱们期望通过咱们的技能才能、通过云化的服务使视频开发者和企业主具有出产东西的才能。所以咱们将软件升级成云创多媒体引擎，期望以引擎的方法被集成至咱们的出产体系，使之具有云化编排、云化导播以及云端的媒体办理才能，一同在全流程的出产协作上供应必要的接口，以供应云化出产制造的全流程。

　　整个云创多媒体引擎特性可以用三个维度阐释。首要是它可以处理出产规划化的问题，曾经的出产都需求几个人像出产流水线相同人工操作，跟着云化出产东西进一步展开，未来可以有许多云端资料库、模板库协助活动运营内容制造商在节假日、庆祝活动快速通过模板资料生成一系列短视频。

　　本年春节期间，咱们有幸服务到好几家小程序客户，它们用微剪东西做了少儿春晚推行，作用十分好。咱们供应的是小程序音视频编排的插件，被植入到小程序中，再做线上的推行，给用户供应线上视频制造，再二次分发与裂变。其次是出产协同化，在线的多媒体制造实质来讲是作业协同场景。咱们将一切流水线上的操作都搬至云上，将一体化更智能的才能赋能给这些人。

　　传统形式下要做较好的短视频需求两天人工，到云创年代，估计整个进程缩短至30分钟以内。终究是一键多途径直播，作为东西的途径方，要协助做好一键多途径的才能，便利用户对接到新的视频途径和传达途径上。相似微信视频号这样新式展开起来的视频途径也可以由咱们一键转发。

　　终究是云创多媒体引擎被别的接入的方法，除了供应SaaS等级的0开发、即买即用方法之外，咱们也供应更改域名、更改LOGO定制化的才能和装备，除此之外还供应一系列的API，包含前端e集成，后端一些列视频接口和批量处理接口，用户可以十分简单、便利地接入集成至已有的出产体系中。在这个Case下，B站现已用这个引擎做了面向运营人员的东西，图中看不出是腾讯云供应的，也是期望赋能给各行各业，让咱们都具有云化多媒体出产才能。

　　后疫情年代，许多的作业现已被疫情改动。拿我自己来说，每天的会议，包含招聘的面试都在用腾讯会议进行，这在两年前是不行幻想的。传统的各行各业也将线下事务搬至线上，且现已回不到之前的状况了。

　　现在的在线教育展开现已有了用户习气的根底，商场上展开炽热的教育场景在腾讯云处理方案中有了丰厚全面的掩盖。这儿值得注意的是腾讯云低延时的产品，它可以十分便利地将大班课CDN相对高时延的服务快速切换至低时延RTC服务。

　　腾讯云供应的小程序音视频的才能，能便利在线教育创业者在小程序上快速试错，测验用户承受之后再导流到APP中，中心买量和运营本钱也将急剧下降。在RTC竞赛十分激烈的商场上，信任其他功用每家供应的处理方案趋同，大趋势是简直一切在线教育途径都会挑选多云方案，集成多家RTC的SDK，构成质量保证。

　　金融范畴在这一年内展开十分快。疫情期间受影响最大的，首战之地的是基金出售范畴。曩昔的形式是基金司理每过一段时刻就需求在线下办沙龙和会议出售基金产品。许多基金司理在没有办法线下展开时，都挑选用了小程序东西线上完结基金宣扬和售卖活动，作用十分好。

　　据途径调查，上一年典型的基金司理可以做几十场直播活动，相对曾经场次是20多倍的提高，每场参加人数从100至1000不等。全年累加，好的基金司理可以招引几十万人的观众和潜在客户。典型的工行、招行客户明星产品十分多。上一年股市十分火，基金更火。两层要素影响下，小程序基金直播十分值得等待。

　　许多线下传统的金融流程完好搬至线上。比较典型的是腾讯云的协作同伴飞虎互动，用了半年多的时刻将多家银行的开户流程搬至线上，以虚拟经营厅的方法使不能出家门的客户有了开户体会。信任未来这种场景会继续浸透进咱们日子的方方面面。

　　上一年云上广交会，腾讯从接到使命、线上投产到顺畅完毕，整个周期不到3个月，可以幻想在四五年前，音视频技能还没有这么兴旺的时分，这个项目也底子不或许做得了。上一年由于有了比较老练的云化方案，以及音视频技能的堆集，可以通过包含腾讯会议、TRTC的SDK整套归纳处理方案来快速支撑广交会的商户在云端构建每个商户的线上店肆，用音视频让全球买家与卖家经商，这是十分大趋势改动，信任在未来全球疫情没有得到很好改动时分，线上展会、与国外经商的大型企业的直播都会十分依靠音视频与云的技能。

　　在上一年疫情期间，腾讯云与贝壳如视一同协作了VR带看的场景。假如有租房买房的同学用过贝壳的话，都能感受到沉溺式的看房体会，随时随地可以建议与经纪人的联络，可以极大诠释看房的全真互联网年代。接下去还会有看车，看博物馆的展览，这些都会参加沉溺式与带看的体会。除了移动端的小程序与APP，咱们还推出了TCCC云化呼叫中心产品，它彻底根据TRTC去完结纯Web全座席端的呼叫产品，可以通过被集成的方法供应到现有的工单体系、CRM体系中，完结软件化和多触点通讯才能。

　　这一部分介绍一些新的技能趋势，以便利咱们挑选自己的技能栈。 5.1 云原生低码aPaaS出现

　　云原生是一个大趋势。云原生可以理解为容器和音视频结合，这儿边有十分多的幻想空间和可行性。曾经要做RTC服务或直播服务，除了购买RTC供货商的服务或CDN之外，还要自己建立媒体源站和录制服务，以便利做事务逻辑的分装。 现如今云原生年代，可以通过Serverless，无需购买建立服务，通过函数服务在几行代码中调用Rest API完结之前繁琐的进程。

　　其带来的优点清楚明了：弹性弹性，按量运用，按需付费，一同可以快速发动，无需办理大服务器的集群，一切的组件都是无服务器化的，无需运维，节约人力本钱。

　　上图中的两个比如，其间一个，曾经要做视频文件转直播流往往需求文件解析的源站，调用FFmpeg做转推服务至直播途径，现如今可以运用Serverless运转服务端的SDK处理这些问题；

　　另一个比如，在线教育用的是全景录制，它的意思是作为学生参加讲堂所看见的一切内容互动、PPT和教师的小窗口都需求原封不动地录制下来，这给服务端带来了很大的技能应战，试验起来很费事。现在通过Serverless技能可以在云端构建仿终端的实例，在Serverless安排下做到彻底复原录制。

　　腾讯有直播推流的SDK、TRTC互动音视频的SDK、IM即时通讯的SDK。在上一年年末咱们将这些都做了必定程度的一致，用相同的接口风格、相同的格局和接入方法供应给开发者All in One一站式的音视频终端引擎。未来咱们会更多投入到音视频终端引擎的开发中，包含前端埋点的上报、全链路的监控和日志的排查等，把全体处理方案供应给开发者。信任未来在兼入到腾讯云终端SDK后，只需求在控制台点选所需求的协议和需求的延时巨细等个性化参数，就可以便利地得到想要的SDK形状。

　　上图是全球的根底设施。从上一年开端，基建就面临着不小的应战，包含疫情要点区域巴西、印度等建造进展严峻受阻，通过不懈努力，以及与协作同伴的通力协作，现如今腾讯云全球节点已超越2100 个，可以包容120T的带宽储藏应对突发状况。包含腾讯会议海外版、TRTC海外版、IM海外版都现已全面支撑GDPR的要求，全面支撑干流大洲国家掩盖。所以在挑选出海事务时，腾讯云是一个比较好的全家桶挑选。

　　未来两年，咱们仍会环绕运用场景、根底设施、PaaS层三个方向展开。现在正式推出一致的根底网络与RT-ONE音视频通讯技能网络，旗下有实时音视频通讯网络去处理音视频实时通讯的问题、有即时通讯网络去处理IM音讯和事务信令的问题、有流媒体分发网络去处理海量大并发直点播CDN的问题。

　　在此之上，咱们构建的All in One SDK音视频引擎以及云创多媒体出产制造的引擎一同构建出了PaaS与aPaaS的产品宗族。再往上，咱们会供应给各范畴的场景，例如在线教育场景、会议场景、客服场景、泛文娱场景、金融场景等等，咱们都会与协作同伴推出全体处理方案。

　　上图是对开发者的奉献，上一年API个数超越300+，其开发速度满意了各行各业从业者的要求，全年迭代150+版别，整个进程中没有一例重大事故；文档打破2500+，咱们在腾讯云上查找相关产品都能取得全面的文档解说；SDK掩盖了一切的终端，aPaaS方案仍在向上叠加，现如今是10个，信任再过一年是20个，30个……未来各行各业的处理方案都会出现在产品库中，并且一切产品都标配了私有化布置的才能。在开源社区方面，咱们也继续活跃投入，现在有13个开源项目面向开发者，每年会有100+场活动与咱们一起沟通。

　　在音频处理方面，腾讯的多媒体试验室和天籁试验室投入了许多精力和人力去做3A的处理优化，力求将其做到极致。推出的cPLC接连突发丢包补偿方案和cFEC前向纠错编码方案在腾讯会议中也得到了十分多的运用。

　　现在咱们看见的干流短视频许多是通过软件编解码方法来做的。未来跟着云游戏、视频直播的展开，EGL编解码器逐步代替X86软件编码器，腾讯工程师研制的H.265硬件编码器瑶池V500也在路上了，信任会很快投产。

　　紧接着我想剖析一些趋势。流媒体的协议格局展开速度很快，全球范围上看，一切格局都在其运用场景上发挥着本身的价值，本次我想要点挑几个介绍。SRT曾经是传统广电直播范畴处理上行直播问题的协议，现在咱们将它用在了电竞直播长途技能中心高码率传输的进程中，可以极大地处理曾经靠专线和卫星传输带来的本钱耗费问题，一同带来了不错的质量；

　　WebRTC方面，咱们投入了十分多的精力去做社区奉献，调整其QoS、QoE，将秒开和卡顿做到极致。根据腾讯本身的RTC，咱们还将WebRTC作为接入端，完结多端互通，包含小程序；还要提一下QUIC，它是规范传输协议，在海外许多场景下，用QUIC做CDN的终究一公里加快十分不错。假如接入到腾讯云CDN，就可以天然享受到QUIC协议。

　　关于下一代的编码规范，AV1在海外现已大规划运用，国内长视频途径也现已开端运用AV1。腾讯云在2019年11月开端从云直播、云点播全线的转码服务，一同也是AOM的第一家我国公司董事会成员。在AV2上，咱们也参加了提案，信任在2022年会有定稿部分。腾讯多媒体试验室担任了VVC的联合主编，参加了许多提案。腾讯多媒体试验室、视频云室联合腾讯内部多部分一起研制H.266/VVC编解码器，许多产品都现已得到了客户的验证，最近咱们在考虑是否需求更好地与FFmpeg做结合并将其推出给开发者。 6.5 开源的考虑

　　腾讯的音视频团队一直在活跃拥抱开源社区，在开源技能的根底上通过加工，有了一些好的特性咱们都会活跃回馈至社区。拿FFmpeg为例，腾讯在2019~2020期间向社区提交的Patch数目 》 330个，被merge的Patch 》 180 个，是社区前10 的奉献者。信任未来在VMAF、SRT、WebRTC上也会有更多的奉献，期望能营建双向循环的生态，从云核算从开源社区拿到的好东西终究能以云服务的方法供应给开发者，一同将开发者反应的问题回馈给开源社区，让其他的云核算公司和开发者可以直接从开源社区拿到不错地版别去构建自己的服务。

　　终究想要聊生态协作的部分。腾讯云上一年成立了面向音视频职业的V加沙龙，并发动了招募活动。

　　现已有十分多的同伴参加到咱们的V加沙龙，一年收入已超越一个亿，展开空间十分巨大，信任未来咱们仍是需求和音视频开发者生态协作去服务客户。V加沙龙的底子思路是供应PaaS层和aPaaS层产品才能与ISV做某个职业的定制开发，继而构成联合产品，借由腾讯的千帆方案和云商场推出给腾讯云客户以及ISV本身的客户，使之了解两者联合产品的特别价值。

　　其次，咱们用技能生态协作去处理腾讯云许多客户的定制开发问题，让协作商进入项目中做技能开发作业。然后是咱们对商机的敞开，将咱们拿到的不能处理需求的商机奉献给V加沙龙成员，咱们一起服务好客户。

　　除此之外，今日还想面向开发者宣告一个音讯，在讲演前一天，腾讯云官网就现已上线了面向开发者的立异生长快线，期望可以让咱们有更多的免费资源，享受到视频通讯产品服务。TRTC会供应给契合规范的开发者100万分钟的免费时长，一同还有腾讯云专家团队的技能支撑，最高享有10万元云产品代金券，具体活动以腾讯云官网介绍为主。

上一篇：高通侯明娟：万物智能互联5G大有可为 下一篇：专心无线通讯范畴 力同科技树立体系完好技能渠道