实时互动与战疫中的世界
RTE2020大会首日,声网Agora创始人&CEO赵斌带来了《实时互动与战疫中的世界》的主题演讲,赵斌首先表示,疫情的意外到来,实时互联网服务成为了疫情期间人类社会生活和工作的基础工具,从全民“云监工”武汉火神山、雷神山医院的建设,到疫情下人们习以为常的远程办公、视频招聘、互动课堂、视频面诊等。疫情不仅改变了人们的生活、工作方式,更推动了教育、医疗、社交等众多行业的发展。声网Agora创始人&CEO赵斌
赵斌表示,在疫情期间,远程办公类软件得到快速普及,Gartner的调查显示:美国47%的企业负责人表示,他们允许员工完全远程办公,并且正在评估更永久的远程工作安排,以建立更具弹性的业务运营, 其中twitter宣布可永久在家办公,其中声网的数据显示,疫情期间平台远程办公行业实时音视频分钟数峰值增长 10 倍。教科文组织呼吁全球4.2亿学生远程上课,线下教育机构纷纷转到线上云课堂,疫情期间,新东方与声网合作,将其旗下80多个分校和子机构、上百万线下师生搬到线上“新东方云教室”。在线医疗的问诊量激增近10倍,好大夫在线疫情期间的日均问诊量同比增加203.7%。网民对移动社交的依赖也进一步加强,声网数据显示,疫情期间社交泛娱乐行业实时音视频分钟数峰值增长翻倍。此外,海外疫情肆虐,国内移动互联网出海仍在快速增长,出海热门应用类型主要包括语聊房、1V1视频、游戏语音、互动直播等。
从2015年声网首次举办RTC行业大会,到现在实时互动已经成为一个快速增长的新兴行业赛道,赵斌表示,实时互动正在走向成熟和专业,并主要体现在两个方面:1、以XLA体验质量标准为代表的实时互动行业标准出现,RTE实时互动行业一直缺乏相应的应用标准,特别是针对体验质量标准。今年7月,声网基于近万亿分钟的用户体验数据,结合海量用户主观体验评价,设计定义并推出了实时互动行业首个体验质量标准-XLA,区分于SLA,XLA 不仅关心实时互动的可用性和服务质量,还关注用户的体验质量,是首个围绕用户实际体验建立的可量化、可查证、可赔付的体验质量标准和保证。2、安全合规:随着业务全球化,需要主动遵守业务覆盖国家和地区以及行业的各项法律法规,遵循最小化及公开透明的数据采集、处理原则,充分满足信息安全、数据安全及个人隐私保护规范,符合ISO27001、ISO27017、ISO27018安全标准以及GDPR、HIPAA等法规要求。
今年RTC大会正式更名为RTE大会,正是因为声网看到了实时互动行业正呈现出共享情景、任意规模和形式、无处不在的特征,这也成为了实时互动PaaS的三大支柱能力。1、共享情景,在声网看来,实时互动不只是交换信息,它更多的是创造一个共享的情景和时空。例如基于VR实现情景共享的沉浸式互动教学、云游戏模式下的云对战、云试玩等玩法、百人同屏连麦的云演唱会、基于5G技术的AR远程协作、“云代驾”等场景。
2、实时互动未来可以支持任何场景规模和形式,小到1v1视频,大到几万人,甚至百万人同时在线的场景,赵斌表示,大规模、高质量、低延时形成了实时互动在体验保障方面的铁三角关系。作为实时互动专业平台,需要在三个能力的交叉点取得一个平衡,在面对超大规模实时互动场景时,也能保证甚至优化质量和延时。声网的数据显示,某些升级声网的视频高清专版的客户,随着主观画质的提升,用户留存时长大幅提高了15%以上;声网低码高清产品在主观画面不变的情况,可以帮助用户节省带宽50%;来自行业的数据显示,电商直播延时低于800ms,提升支付UV超过4%;
3、实时互动需要提供无处不在的能力,才能让开发者在所有的场景下创造实时互动的能力, 例如声网在今年新增对Unreal和RTOS的适配,总计支持超过20个开发工具、平台和框架,可以有效适配VR/AR,以及智能终端设备的开发。IoT行业的快速发展,未来万物皆可互动,从智能手表、智能摄像头、智能眼镜到无人机、智能机器人、车载系统等。此外,星链starlink正式上线商用,未来太空互联网有望走进现实。
RTE技术的持续衍变
声网Agora首席科学家钟声围绕RTE技术带来了《努力打造未来不过时的RTE技术》的主题演讲,他表示,线上实时互动需求的爆发,同样为RTE技术带来更多全新的挑战,例如带宽需求大幅增加,导致网络拥堵和丢包加剧。3G/4G/5G网络长期并存,区域鸿沟扩大,导致网络碎片化加剧。面对挑战,需要打造正确应对未知变化的敏捷性,系统的设置要用足够的精细化、模块化,技术方案需要根据网络变化进行自适应和可伸缩性的调整,在有限数据的情况下,利用先进的算法来导出更多的有效数据,来提升用户体验。
随后钟声重点分享了在网络传输受限,处于弱网情况下时,如何利用AI算法插帧来增加视频流畅度。由于带宽的限制,高丢包率的影响,怎样利用 AI 超分算法增加视频分辨率和细节。VR/360 度全景RTE直播场景中,如何进行网络自适应和可伸缩性的调整。演讲最后钟声还表示,接下来声网团队还将围绕“自适应编码和传输策略”、“优化人工智能模型和视频编码器”、“简化新的编码格式”进行技术打磨与优化,并将在明年RTE大会分享最新成果。图:声网Agora首席科学家钟声
中国音视频开源的现状与WebRTC的发展走向
随着用户对音视频类应用使用时长的逐渐增多,音视频开发者及内容也在迅猛增长。作为中国最大的开发者社区,CSDN创始人&董事长蒋涛也在大会主论坛中结合对社区音视频开发者的观察,分享了音视频行业趋势和音视频开源现状,他表示,从2000年开始至今20年的数据显示,最近几年开发者对开源的关注度显著提升,开源项目文章数量逐年攀升,并从2017 年开始,连续两年呈陡升态势,开源在开发者群体中越来越受关注。在美国以外各国中,开源软件使用数量,中国位居榜首。但中国开发者使用最多的音视频开源软件中,国产开源工具仍有较大差距。随后蒋涛还分享了CSDN基于开源项目来搭建服务的最佳实践。图:CSDN创始人&董事长蒋涛
今年WebRTC进入第十个年头,疫情期间Chrome的WebRTC用量增长13倍,但在WebRTC的Google搜索指数中,“WebRTC故障排除”关键词的关注度是第一。针对WebRTC的最新进展,Google的 产品经理 Huib Kleinhout也带来了精彩的分享。
Huib Kleinhout表示,2020年,浏览器的发展方向变了。首先是Microsoft将浏览器引擎从自身研发的引擎更改为基于Chrome的引擎,也成为了WebRTC的积极贡献者。Apple的Safari 还在继续改进自己的WebRTC API,最新一版的Safari Tech Preview中已支持了VP9,还支持硬件加速,用户可以点击Apple Safari中的“开发者设置”来启用它。火狐浏览器增加了重传支持和transport-cc传输,有助于更好地估算WebRTC的连接带宽,从而改善媒体质量。此外,Huib Kleinhout还分享了WebRTC与云游戏结合的全新用例。
在大会主论坛的最后的圆桌环节,来自悦跑圈CTO 钱荣明、豌豆思维研发VP 冯颖、松鼠Ai 1对1 技术VP 李文夔、花椒直播技术负责人唐赓等嘉宾围绕“实时互动的场景化赋能与创新”展开线上圆桌对话。四位嘉宾首先分享了疫情对各自所在的运动健身、教育、直播等行业带来的长远改变,并针对“如何看待线上与线下的关系”也分享了各自的观点。5G、AI是当下互联网行业绕不开的关键技术,四位嘉宾也分享了5G+AI+RTE技术给各自企业的业务带来了哪些颠覆或创新的场景,并探讨了未来实时互动还能为教育、直播、线上健身等行业带来哪些机会。10 月 23 日大会议程预告
10月23日 14:00 六场线上论坛将同步直播
10月23日,RTE大会将同步开启线上三场技术论坛与三场行业论坛,分别为AI技术、大前端技术、实时传输与架构技术论坛,教育、社交泛娱乐、IoT行业论坛,邀请了来自美团、搜狗、爱奇艺、饿了么、火花思维、51talk、伯索云学堂、伊对、英礴中国、Rokid、驭势科技、CSDN、北京大学、北京邮电大学、晨兴资本等超过40家企业与组织机构的50+技术专家、行业大咖、投资人等继续带来干货十足的演讲与圆桌对话,共同探讨实时互联网的现状与未来。
实时互联网创业挑战赛决赛会师线下
10月24日还将有线下“创新生态”论坛,不仅会邀请声网的合伙伙伴共同探讨RTE新生态的发展,还将有全新的Agora云市场2.0计划发布。由声网Agora 与晨兴资本联合主办的“RTE 2020 实时互联网创业挑战赛”的线下决赛也将在今年RTE大会的最后一天 10 月 25 日在上海落地,目前已有来自教育、医疗、AR、人工智能等领域的 100+创业企业报名参赛,10 家企业将经过激烈的PK晋级最后的决赛,并有望成为实时互联网赛道的下一个独角兽。