虚拟会场赛博朋克化,向沉浸式游戏靠近

竞核

竞核

· 2021.07.12

未来近在眼前

未来近在眼前

时代的年轮总是往前推进,科技的发展亦是厚积薄发。 

又是一年一度的世界人工智能大会(WAIC)。7月8日-10日,2021WAIC于上海如期拉开未来的序幕,大会以“智联世界 众智成城”为主题,围绕“AI赋能城市数字化转型”方向,共探人工智能技术创新与产业落地的前沿进展。 

本届大会邀请了60多位中外院士、10多位世界名校校长,李彦宏、马化腾、周鸿祎等超过150位业内大咖,以及超300家参展企业。可谓是精英汇聚,盛况空前。 

作为全球智能领域最有影响力的行业盛会之一,今年的WAIC也有了不一样的风景。 

由上海东方传媒技术有限公司(简称:SMT)提供的“云端会议”一体化技术整体解决方案迭代升级,带来全新体验。针对全球疫情常态化的特殊背景,在Unity实时3D技术赋能的基础上,SMT结合自身创意和科技创新前沿力量,打造了全球“云端虚拟会场”,将虚拟与现实完美结合。 

2021WAIC“虚拟会场”也由2020年的WebGL网页版本,升级成移动App客户端。不变的是,虚拟会场突破地域壁垒,使得世界各国前沿AI技术得以实现“云端相会”;升华的是,更为细致精良的画面呈现,“游戏式”的操控体验,以及“沉浸式”的功能应用等。 

这才有了“全球同播、亿人同观”,共有超过3.52亿人次观看的空前盛会——2021WAIC。

游戏式操控,沉浸式体验

“更有仪式感、参与感,更具沉浸式体验”,SMT活动业务部(壹会展)副总监王海强坦言,“这就是2021WAIC虚拟会场最初的设计理念”。 

 

点开2021WAIC虚拟会场App——壹会展,想必很多人都和竞核一样,脑海中会不自觉地浮现“科幻”“赛博朋克”等形容未来世界的词语。 

“空中之城”与“星空宇宙”的创意结合,不仅烘托出横越现实之上的未来感,同时也为线上参会人员营造了“空中飞船”般的深度场景。 

创意虽好,但要具体落实并最终给用户带来沉浸式体验,这并不容易。 

据SMT Unity技术总监朱名一透露:“WebGL转向APP,这是两套完全不同的系统,技术难点跳跃是比较大的。相比去年,2021WAIC虚拟会场开发周期多了两个月左右。” 

 

值得提出的是,不仅是整个系统架构要比去年复杂,今年的虚拟会场更强调“沉浸感”与“交互体验”。 

首先是在参会形式上,去年WebGL虚拟会场中,用户更多是直接入座线上会场,观看会议视频。 

而在2021WAIC虚拟会场中,用户可以创建自己的虚拟角色(特指捏脸部分),可以采用3D MMORPG游戏的操作方式,在基于线下大会实景开发的全景式虚拟会场中,360度操控自己的角色。 

用户能够像真人一样,走进虚拟会场然后入座,可以观看会议视频、招贴广告以及各种信息。甚至可以实现相互打招呼、留言等丰富多样的交互行为。 

“SMT为2021WAIC提供的虚拟会场整套体系,都是为了给用户带来沉浸式体验,虚拟会场中的角色就如同用户自己一般。这有点像一款沉浸式的游戏,这种体验比去年的WebGL直观很多。”朱名一有些兴奋的说到。 

当然,虚拟会场要想媲美线下体验,必须得有前沿技术的加持。

自研2.5代混合同步技术

在游戏圈,一些大型MMO产品上线前,常以“千人同屏竞技”作为卖点。

据竞核了解,为保证虚拟会场既能够承载大体量用户访问,同时保证复杂交互指令实现的流畅性,SMT采用旗下独立自主开发2.5代混合同步技术,实现了帧同步和状态同步合二为一。

而这也是2021WAIC虚拟会场最大亮点之一。

为了更好的理解帧同步和状态同步,朱名一以游戏作为参照,展开阐释SMT这一自研核心技术。

首先是帧同步技术,早期在《星际争霸》(1997年)就有应用,这类即时战略游戏对操作同步要求极高。在行业中,这一时期的帧同步技术被称为“1代帧同步”。

直到手游时代,帧同步技术慢慢迭代、进化到“2代帧同步”,包括《皇室战争》《王者荣耀》等都采用了这一技术。主要表现为,游戏不会随着单个玩家掉线变得不流畅或卡死。

不过,朱名一也表示:“帧同步主要针对要求低时延高操作的游戏,传统意义上来讲,同屏的人不能显现特别多。《和平精英》《PUBG》这类吃鸡游戏上限就在百人左右,这在帧同步游戏中已经算很多了。”

如果在一个服务器里要上百人、千人同时在线,帧同步就很难实现。而像《魔兽世界》这类大型MMORPG游戏,采用的则是状态同步。它的优点就是支持大体量用户访问服务器,而且支持中途加入。

同样,状态同步也有自身的缺点,即难以进行像《星际争霸》那样复杂的低时延高操作。

正是基于帧同步和状态同步优缺点的思考,SMT致力于将两种技术混合起来应用到虚拟会场。既要承载的人多,又要可以实现一些复杂指令。

为此,SMT自研2.5代混合同步技术,实现帧同步和状态同步的合二为一。

如前文所述,2021WAIC虚拟会场不仅支持同场景多人、半途中增加或删减人,同时也支持操控角色行走、打招呼、点赞、发言等多样交互行为。

这主要就得益于SMT自研的2.5代混合同步技术。

应用端向前一步

掌握核心技术固然可贵,但如何将核心技术落地到实际应用上,亦是十分重要。

早在去年,Unity就凭借实时3D技术赋能2020WAIC。今年WAIC由WebGL转向App,也进一步将Unity在移动应用开发领域的优势充分展现出来。

 

Unity大中华区解决方案开发高级经理孙志鹏表示:“本次WAIC的虚拟云会场正是基于Unity引擎开发的,Unity官方技术支持团队主要针对云会场的性能优化与移动端适配提供了支持。”

这主要体现在“协同工作”和“创作优势”两个层面。

具体到项目过程中,Unity与SMT共同开发了高速拉流解码功能,支持正常网络条件下1080P分辨率硬件加速解码,并且做了整体的应用性能优化,使其在手机端流畅运行无卡顿。

同时,Unity官方团队也提供了开发过程中的技术支持,帮助云会场适配各种高中低端的手机设备,帮助定位解决网络同步Bug。

 

“因为这次是移动端,我个人认为通过Unity开发比较便捷,相对更轻量化。”同时朱名一也表示,“Unity的API系统设计较为人性化,这有效提升了团队开发效率”。

有数据显示,目前市场使用Unity开发的游戏和应用平均每月的下载量在50亿次,全球前1000最受欢迎手游中有71%是用Unity创作的。

聚焦到虚拟应用创作上,Unity也有着“广泛的跨平台支持”、“轻量化引擎”和“强大的实时交互功能”三大优势。

此外,Unity在“虚拟人”领域也有深厚积累。包括去年Unity发布的数字人Demo《异教徒》,今年年初的韩国虚拟偶像《SUA》等,都是通过Unity引擎渲染而来。

 

据孙志鹏透露,Unity即将在国内推出一套虚拟偶像生产流程。这是在使用扫描FACS数据的数字人制作流程基础上,结合游戏行业常用的各种捏脸算法,以及额外修型BS做风格化的一套生产流程。

 

结语:

随着5G降低延迟、4K提升画面品质以及其它技术高速迭代,人类探索“Oassis绿洲世界”的步伐越来越快。

此外,考虑到全球疫情大环境影响,很多企业提倡线上办公,各种大型会议强调在线举行,这也推进了“虚拟会场”等虚拟应用的发展。

目前,国内疫情基本稳定,一些线下活动也逐渐复苏,但线上会议仍不可取缔,也不可能被取缔。7月6日举行的中国共产党与世界政党领导人峰会,也是线上线下相结合的概念。

正如王海强所说,世界是大同的,也是流通的。线上线下相结合的方式,基本定调为长期发展趋势。

或许虚拟会场代表的只是会议的一部分,但2021WAIC虚拟会场,希望通过这种新颖的线上参会形式,给全球用户带来最前沿的科技发展动态和更深度层次的沉浸体验。

--------创新不止--------

点击阅下方链接,报名了解2021竞核*HTC VIVE X*HTC VIVEPORT Meta· X 超新星创业路演详情

http://ooz8x18e960bys35.mikecrm.com/DDkjbeo

本文系作者竞核授权竞核发表,并经竞核编辑,转载请注明出处、作者和本文链接
想和千万竞核用户分享你的新奇观点和发现,点击这里投稿

注册邮箱未验证

我们已向下方邮箱发送了验证邮件,请查收并按提示验证您的邮箱。

如果您没有收到邮件,请留意垃圾邮件箱。

更换邮箱

您当前使用的邮箱可能无法接收验证邮件,建议您更换邮箱

账号合并

经检测,你是“竞核”和“商业价值”的注册用户。现在,我们对两个产品因进行整合,需要您选择一个账号用来登录。无论您选择哪个账号,两个账号的原有信息都会合并在一起。对于给您造成的不便,我们深感歉意。