中信建投证券在研究报告中指出,虚拟活动有较大商业化空间,伴随后疫情时代及元宇宙概念发酵,大量企业商家有线上活动的需求。为了更好的赋能虚拟活动,帮助开发者、企业打造更多针对用户的线上沉浸式体验,声网给出了升级版的全新解决方案。
针对如何在听觉方面打造沉浸式体验这一行业难点,声网 3D 空间音频通过纯软件算法方案,模拟头部球面区域立体声场,使用户在音频听感上具有空间感。当用户操作虚拟人物在虚拟空间里移动时,可以实现根据虚拟人物的面部朝向、音源朝向、远近距离与上下高度,呈现不同的空间效果,完美模拟现实听觉感受。目前,火遍拉美和北美地区的元宇宙社交平台 Oasis 就正在通过声网的3D空间音频技术,为元宇宙“原住民们”搭建起沟通的桥梁。
此外,针对虚拟活动实时互动中可能出现的背景噪音问题,声网AI降噪迄今已完成多次升级,可高精度抑制家庭噪声、街道噪声、机器噪声、办公室噪声等在内的100+噪声类型,技术成熟度高。目前声网 Web SDK AI 降噪插件和 Native SDK AI 降噪动态库已跟多个客户进行了集成,得到了客户的高度认可。
在虚拟会议、线上培训等场景中,经常遇到参会人员使用虚拟背景加入会议的情况,这就对平台方的背景分割、抠图能力有较高要求,需要较完整地呈现出镜头前参会人的人像。
声网采用自研的基于视频连续帧推理的抠图算法,在端上可以实现音视频场景下的抠图,并采用自研高性能计算框架,在 Native 和 Web 端都能实现流畅运行。此外,声网背景分割支持多人、站姿、手势等多种模式,不论在简单或复杂的场景下都具备人像完整度高、边缘平滑融合度好、背景残留低、人像边缘稳定性强的特点,实际效果业内领先。
声网除了在支持 3D 空间音频、AI 降噪、背景分割等能力上面能够为用户沉浸式的体验保驾护航之外,声网还能提供128人超级互动频道,单个频道可支持多达128位用户同时发送音视频流,观众人数无限制,让房间内任何用户都可以随时开麦进行发言交流,目前虚拟活动提供商Vland云现场已上线128人超级互动频道功能。
在各种虚拟活动场景层出不穷的大趋势下,如何科学借力,搭建玩法多样的虚拟活动场景,探索更多可能性,将成为企业业务增长的下一个密钥。
声网的实时互动技术服务覆盖全球200多个国家和地区,并在当地提供技术和运营支持,同时声网遵循国际认可的信息安全和隐私保护标准以及行业要求,致力于采用国际最佳实践来建设隐私和安全管理体系。截止目前,使用声网服务的企业包括小米、陌陌、斗鱼、哔哩哔哩、新东方、小红书、HTC VIVE 、The Meet Group、Bunch、Yalla等遍布全球的巨头、独角兽及创业企业。