网易云信联手“瑶台”，赋能会议元宇宙新玩法

2021-11-12 16:58:48 来源：壹点网

在软硬件技术空间发展的背景下，人们对于互联网玩法的畅想逐步由创造虚拟空间向现实世界与虚拟空间融合迈进。

甚至在刚刚过去的 10 月，Facebook 创始人马克·扎克伯格将“脸书”改名为“ Meta ”，这使得“元宇宙”在整个科技圈、投资圈内风头一时无两。

说到“元宇宙”，按照目前的发展形态来看，它是一种现实空间复制与再造的过程，即人们在互联网上再造一个具备高沉浸感、体验感、互动感的虚拟世界，甚至人们可以基于各个互联网大厂创造的虚拟世界重新塑造自己的人生。

当然，如果说真的要实现这样的终极目标，其实还需要很长的路要走，不过新冠疫情的爆发无疑为“元宇宙”的商业化用例提供了更多的市场化需求。

比如我们常见的会议场景，新冠疫情之前的会议多以线下会议为主，在线下时，参会者可以随时选择与其他人进行 1 对 1 、 1 对多甚至多对多的实时交流，甚至在会议中可以临时预约一个“小型会议包间”结识挚友，而这样具备极强场景感的体验在传统视频会议中却无法获得。

目前主流的传统视频会议在呈现方式上较为单一，缺乏空间场景，从而使得用户层在会议过程中现场感缺失，容易出现精神疲劳、注意力不集中等问题。

专注应用体验，打造沉浸式会议“新世界”

为了解决这一难题，网易伏羲率先发布了一款沉浸式会议活动系统——“瑶台”，以方便疫情期间人们在线上举办各类会议活动。

（“瑶台”官网登录界面）

“瑶台”本身是创造了一个全新的古风沉浸式虚拟会议世界，在“瑶台”中，活动方可以按照自己实际需求在场景中设置多种风格的活动场地，高精度复刻真实的会议场景。

同时，为了增强会议的互动性和体验感，“瑶台”不仅同步实现了 PPT 嵌入式播放、文字和语音聊天、同声翻译、多个分会场自由切换等数十项会议功能，而且为了满足了会议社交需求，无需加群，虚拟人见面就能开启群聊。

（虚拟人走近，开启“群聊模式”）

考虑到虚拟会议世界更加贴近现实会议场景，会议主办方可以在“瑶台”中自由选择活动场地内展板数量、布局与内容；活动场地座位数量与布局；场地加载广告；大屏幕、展板宣传广告；活动场地冠名等，同时“瑶台”还支持后台自主管理会议和会议数据分析等功

（为 DAI 2020量身打造服装。图片来源：网易）

值得一提的是，为了增加用户体验的真实性和参与感，参会者可以通过上传个性化照片打造专属的个人虚拟形象。

依托于网易伏羲行业首创的 AI 智能捏脸技术，平台会对肖像照片和人脸特征进行精准还原，并通过肖像网络分析人脸特征，重建人脸三维信息，结合风格化网络学习数据，生成特定风格的容颜，如发型、肤色、五官。

与此同时，虚拟人的表情、动作会实时随着真实表情、动作的改变而改变，让所有参会者仿佛置身于现实会议中，直观感受对方的喜怒哀乐。

（专属虚拟形象与真人驱动虚拟人示例）

目前，“瑶台”已经可以应用到国际学术会议、签约仪式、线上展会、招聘会、新产品发布会、品牌推介会、公司年会、颁奖仪式、圆桌会议、校园宣讲会等众多场景，并且最多可以同时容纳 500 人同时在主会场参会。

此外，考虑到参会者参与此类活动的频率，最大化提升参会者体验，“瑶台”选择了最简单的方式，即通过浏览器登录平台，输入参会码就可以进入会议场景，免去了下载客户端、注册账号等一系列繁琐流程。

深耕底层技术，打造“瑶台”极致互动体验

作为集网易 24 年 IM 以及音视频技术打造的融合通信云服务专家，网易云信提供融合通信与音视频的核心能力与组件。在与网易伏羲的合作中，“瑶台”就深度融合了网易云信音视频、屏幕共享等能力。

“瑶台”作为一款沉浸式会议系统，在为用户提供高沉浸感、高互动性的会议活动体验的同时，也需要做好用户方体验的视听与活动方的分享质量。

1.自研 AI 算法，保障用户享受高质量视听体验

网易云信自研的 AI 音视频引擎，支持单、双声道，音频采样率 16 kHz - 48 kHz，码率最高支持 128 kbps 立体声高清音质；视频通话中，支持 1080P 高清画质。同时为了避免通话中可能存在的噪音问题，网易云信通过自研的音频 3A 算法处理和 AI 音频降噪算法，帮助用户消除通话中的回声和啸叫，并对嘈杂人声、键盘声等非稳态噪声进行定向降噪，从而保障“瑶台”用户享受纯净的通话与互动体验。

（参会者就墙板内容进行实时互动交流）

另外，网易云信音视频技术支持用户在“瑶台”中同时加入到多房间，实现同时订阅到多个会议房间的音视频流，同时也可以将本地的音频流、视频流推送到某一个会议房间中，且支持会议场景内近距离 16 人畅聊。

考虑到用户分享与互动中可能存在的网络延迟问题，网易云信依托领先的精准带宽侦测、智能拥塞控制、前向纠错、编码优化等技术，实测抗丢包率达 80% ，从而保证“瑶台”用户即使在复杂的网络环境下仍能享受高稳定、低延时的视听体验。

2.高可用网络，全面保障瑶台全球互动

当前，“瑶台”在应用场景上已经涉及到多类国际性学术大会，这就需要保证在长距离、高复杂网络条件下，各种数据实时传输质量。网易云信发布的首个独立于业务逻辑的传输层基座——全球智能路由网络 WE-CAN ，完美支持媒体流、 IM 消息、信令以及通用数据传输，为“瑶台” 99.9% 的通话提供无卡顿音视频服务。

（ WE-CAN 全球智能路由网络分层图）

目前， WE-CAN 已在印度、中东、欧洲、北美、北非等全球 200+主要地区实现节点部署。广泛节点覆盖、完善运营机制、灵活调度策略以及智能路由策略，这 4 大特点赋予 WE-CAN “传送门”一般的属性，不论用户身处何处，只要数据进入系统，就能快速到达目的地。

3.实时共享，打造简单易用的分享环境

网易云信通过为“瑶台”提供简单易用的 NERTC SDK ，通过简单集成后，演讲嘉宾在会议中只需要将自己的屏幕内容如文件、数据、网页、PPT 等画面以屏幕共享的方式分享给参会听众，从而让其他与会者更加直观的了解讨论的内容和主题，提升沟通效率。

（实时会议分享）

此外，考虑到接入成本问题，网易云信通过 Unity SDK 封装技术，帮助“瑶台”节省接入成本。

随着虚拟现实技术与音视频通话技术的逐步普及，高需求、多场景、低门槛的应用将推动“瑶台”的加速爆发，很多“ AI +会议”的玩法创新也在持续进化中。

下一步，“瑶台”将进一步开发如虚拟社群、虚拟接待、 VR 虚拟现实等功能，而网易云信也将持续拓展服务边界，为会议元宇宙、游戏元宇宙、社交元宇宙、教育元宇宙等场景持续提供稳定、移动、可靠的融合通信云服务。

近期，网易云信联合网易伏羲实验室推出业界首个「虚拟形象+RTC」融合 SDK，并且基于该融合 SDK 形成网易云信虚拟形象实时互动解决方案。该解决方案不仅可以生动还原虚拟人形象，同时结合了网易云信 WE-CAN（Communications Acceleration Network）实时传输能力，可以实现虚拟人实时互动，帮助企业客户0 门槛也可实现虚拟形象实时互动场景，迈出元宇宙的第一步。

点击https://survey.163.com/htmls/fg23e7/paper.html，立即免费试用>>>

免责声明：市场有风险，选择需谨慎！此文仅供参考，不作买卖依据。