虚拟办公、虚拟展会、虚拟偶像,RTE+XR 还能做什么?

2,817 阅读5分钟

2021年6月10日,HTC VIVE 在北京举办以“融合·至界”为主题的新品体验会暨开发者客户大会。近 300 位 XR 行业精英齐聚一堂,共同见证了 HTC VIVE 全能 VR 一体机 VIVE FOCUS 3、革新专业级 PC-VR VIVE PRO 2 的首次公开亮相;并带来多个优秀的前沿应用案例,展示 XR 行业技术的最新动态与杰出成就。声网Agora 作为首批加入 HTC VIVE ISV 合作伙伴计划的企业之一,受邀出席大会并围绕 ISV 合作伙伴计划、VR/XR、实时互动等话题进行了深入分享和探讨。

图片

HTC VIVE ISV 合作伙伴 Panel

RTE+XR,创新场景无边界

随着技术的发展,VR/AR/MR 等 XR 技术已经在诸多行业落地。近两年,因疫情影响,全民宅家办公、学习、娱乐等已成全球趋势,以在线课堂、视频会议、远程医疗、远程面试、电商直播等为代表的众多实时互动场景爆发,实时互动(RTE)已经成为刚需,也为 XR 技术发展提供了丰富的应用场景。声网 IoT 产品负责人侯云忆指出,实时互动与 XR 相结合是行业发展的趋势,也是构建近期大火的 Metaverse 元宇宙的最佳实践。不论是面向个人用户还是企业级用户,XR 场景所强调的是用户在虚拟世界里实现深度沉浸式体验及实时互连、互动,而实时音视频技术则可以打破虚拟和现实的边界,为用户在虚拟世界中低延时、稳定、流畅的实时互动体验保驾护航。

图片

声网 IoT 产品负责人侯云忆

侯云忆认为,与 HTC VIVE 达成合作,能够为实时互动相关实践带来更丰富、创新及有趣的场景。但更为重要的是可以帮助相关 XR 开发者无缝接入声网的实时音视频技术,探索更多在场景和应用方面的创新,加速相关应用场景的落地。从消费者市场来看,RTE+XR 能够激发开发者创造更为丰富的内容,为用户带来更为沉浸化的体验。同期加入 ISV 合作伙伴计划,提供虚拟偶像业务服务的广州创幻数码科技有限公司也是声网的客户。通过声网的实时音视频技术,创幻的二次元虚拟偶像打破次元壁与用户实时互动,给用户带来了美妙的想象空间及介于虚拟与现实间独特的体验。从企业级市场来看,RTE+XR 能够为诸如远程查勘、远程医疗、智能制造在内的远程协作场景带来更为高效的体验,节省企业时间成本,助力其实现数字化及智能化。目前声网已有不少成功的合作案例,例如为远程工作、在线学习和虚拟活动等构建沉浸式 3D 世界的 Virbela 也是声网的客户之一。在 Virbela 构建的虚拟世界中,每位用户都可以创建独有的一个虚拟身份,通过声网的实时音视频技术,在虚拟场景中实现协同办公、演讲、教学等;在“闲暇之余”用户也可以在户外举办一场足球赛或沙滩派对,甚至能够将线下展会搬到线上,十分具有 Metaverse 的味道。

图片

图片源自 Virbela 官网

谈到未来5-10年实时互动与 XR 的发展趋势,侯云忆表示,随着相关硬件性能的不断提升,用户的交互体验也必然会随之增强。在实时互动的加持下,多模态、跨终端、人性化的感知、交互体验将会带来质的飞跃,而 Metaverse 也不再是一个遥不可及的梦。此外,随着全球线上化趋势的加快,移动应用也在发生着翻天覆地的变革,随时随地,不受距离、空间和时间限制的实时音视频技术将成为构建众多应用场景的基础,而实时互动也会像人类需要空气和水一样,成为大众日常所需,无处不在。

声网实时音视频技术打造低延时、高稳定、高流畅的沉浸式体验

在 VR/AR/MR 应用场景中,用户往往会遇到跨区域、跨国协作的情况,因而网络情况会更为复杂。声网Agora 软件定义全球实时网络 SD-RTN™覆盖全球 200+ 国家和地区, 全球端到端网络优质传输率超过99%,可在全球各区域就近网络接入和最优网络路径传输,为全球任意国家/区域用户提供高速网络服务。

在远程协作、远程指导等场景中,声网Agora 的解决方案可以提供最高 1080P 60fps 超清视频画质,让双方可以清楚看到正在协同的事项并给予及时的反馈。在通话的过程中,声网全球领先的 Agora SOLO™、NOVA™ 两大语音引擎兼顾声音高保真度、高性能和流畅弱网体验,能够为用户带来高音质的互动体验。

虚拟场景对于音频的“空间感”要求很高,举例来说,在竞技游戏或虚拟办公场景中,你需要通过脚步声感知其他用户的距离和方位,而空间音效可以让用户更有身临其境的沉浸感。声网Agora 的解决方案支持 360° 环绕立体声,声音具有完美的方位感、距离感、空间感,能够在具体场景中为用户提供“听声辨位”、“听声识距”等功能,进一步提升内容带给用户的沉浸体验。

目前,全球领先的信息技术、咨询和商业流程服务公司 Wipro 、AR 产品和服务提供商亮风台旗下 HiLeia 通讯平台、AR+AI 企业级服务商亮亮视野发布的 AR 眼镜 GLXSS ME(Multi-Edition),睿悦 Nibiru 的远程协助产品均采用了声网Agora 提供的实时音视频解决方案,广泛应用于协同办公、智能制造、远程医疗、远程电力检修等诸多场景。