把元宇宙“搬”到技术大会现场 RTE2021大会是怎么做到的？

10月 22日,由声网Agora主办的 RTE2021实时互联网大会在北京举行,今年是实时互联网大会的第七届,也是七年来规模最大、议程最全、体验最好的一届。

大会以“万象频道”为主题,围绕实时互动行业一年来的行业变迁、趋势展望进行深度分享与探讨,从场景、技术、产品、生态等多个维度展现实时互联网万象纷呈。会议除了干货满满的技术议程,首次将教育、泛娱乐、IoT等行业论坛全面开放,为行业参会者提供全方位的分享交流空间。

另外,声网重磅发布RET万象图谱、宣布10月启动全球第一个全自动多场景模拟声学实验室,为未来多场景下的音频和音效研究、测试、评估带来新的高度和便利。

当然,最引人注目的是RTE大会酷炫的 Metaverse展台以及丰富的周边活动,让参会者置身其中,享受实时互动技术带来的全新体验。

声网是如何将元宇宙“搬”到技术大会现场的,让我们一探究竟。

虚拟世界大探险

元宇宙(Metaverse)这个词起源于Neal Stephenson在1992年出版的小说《雪崩》,其字面意思是一个超越宇宙的世界。更具体地说,这个“超越宇宙”的世界是指计算机生成的世界。本次RTE大会的 Metaverse展台也为参会者带来了两大精彩的体验环节。

第一大环节是虚拟世界大探险。通过丰富的VR、AR设备,让参会者在现场进入由VR、AR打造的虚拟世界,体验虚拟社交、虚拟会议、远程协作,还可与虚拟偶像实时互动,在游戏中打造自己的梦想世界。

在VR体验区域,我们可以通过 HTC Vive Focus 3设备体验虚拟会议 Vive Sync及热门游戏。

其中虚拟会议VIVE Sync App使用了声网提供的实时音视频技术,低延迟的互动体验将虚拟和现实世界无缝相连,为用户打造完美的远程协同工具。VR射击游戏也备受参会用户喜爱,让人仿佛在真实世界中对战,游戏体验达到新的境界。

在AR体验区,我们可以体检到Rokid最新推出的AR眼镜Rokid Air。戴上Rokid Air眼镜可以看到3D虚拟人出现在空间里,虚拟人的手势、口型、神态由Rokid XR能力的语音识别、手势识别、图像识别、体态识别、情绪识别、眼动追踪等技术支持,让虚拟人可以与人、与环境实时互动。听觉方面,声网的声场渲染技术给予体验者听声辨位的能力,听出发言者的空间位置。

作为全民“新”偶像,虚拟偶像能做到“颜值不倒”、“人设不塌”,近年来深受00后人群追捧。在此次Metaverse的展台上,我们就可以通过VR设备与远在千里外的虚拟主播实现实时互动。此前,在创幻举办的虚拟偶像神乐七奈跨国演唱中,神乐七奈是在剧场进行实时渲染,输出画面,全程毫秒级时延。音频从日本传回国内,声网的音频解决方案有力保障了稳定、流畅、低延迟的传输。

在大探险的展台雷锋网还看到了Reworld(重启世界)。在《重启世界》中,玩家可以加入激烈的战斗,体验枪林弹雨,也可以成为富商,包下海岛,打造私人港湾。角色没有任何限制,满足玩家丰富的想象,创造属于自己的梦想世界。

万物皆可互动

其二是IoT设备展区。除了VR、AR,大会现场还展出包括儿童手表、撸猫机、喂鸟机、老人机、行车记录仪、智能机器人等一些列丰富的IoT设备,全面展现万物互联、互动的画卷。

以儿童手表为例,智能设备最大的痛点就是轻巧、续航和发热,所以低功耗十分必要。据悉,声网为小天才全系列儿童手表提供了轻量级设备专属的视频通话SDK,包括了低功耗版本安卓SDK和全球首个适配RTOS系统的RTC SDK,可以保障持续通话15分钟不发烫,以极低的功耗确保了超长的续航能力,不用担心电量过快耗尽而失联。

在同期举行的IoT分论坛上,侯云忆也分享了诸多IoT与RTE结合的新颖应用场景,如通过远程控制红外来撸猫、吸宠,展台上展示的撸猫机和喂鸟机正是用了声网的解决方案,通过实时音视频来识别鸟类和松鼠,并捕捉他们喂食的精彩瞬间。此外,实时互动在智慧交通、智慧工业等领域同样发挥着不可替代的作用。比如,车和路、车和车之间的通信实时数据的融合,可以让交通的调度和智慧决策有据可依。

声网Agora创始人兼CEO赵斌曾说过,“听见声音,看见画面只是实时互动的一个起点,一个基础。”在声网Agora看来,实时互动不只是以语音通话或视频会议为代表的信息交换,它更多的是创造一个共享的情景和时空。

如今,Metaverse“星球”雏形在全球各地被人们打造着,未来当VR、AR、脑机接口或者是其他入口设备发展成熟,通过声网Agora这样的实时互动云服务商,我们终究会得以进入到《头号玩家》那样的世界中,在另一片有着无限可能的空间里遨游,那时实时互动会像元宇宙的水和空气一样不可或缺。