星岛日报

【创科广场】身处云端全息实境 时空穿梭变阿凡达

2021-03-09 11:00
Ignite大会上,Microsoft行政总裁Satya Nadella介绍虚拟实境技术,HoloLens 2正用于多种工业用途,包括远程医疗手术、技术训练、远程维修、工业设计,配合语音辨别、眼球追踪以及手势控制,加上视野广阔,即时传送至影像远端协作。

香港应科院与中信国际电讯CPC 合作开发「DataHOUSE AR千里眼」远程维护服务(「AR Remote Hand」),以可穿戴式AR扩增实境,为客户作远程数据中心维护,亦正是采用HoloLens 2作穿戴,以支援影像传送至远端。

HoloLens 2混合实境,原则上与扩增实境差不多,但全靠HoloLens实现。Nadella在Ignite 2021 大会介绍的Microsoft Mesh,则利用了Azure云端性能来实现,由开发Hololens和Kinect的Microsoft技术院士Alex Kipman,首次以沉浸式的演讲,介绍全新混合实境平台Microsoft Mesh,展示了如何将混合实境,融入了遥距协作。

Microsoft Mesh能透过混合实境营造临场感,即使人们身处在不同地方,亦能感觉像在同一空间内。与会者可以与 3D 内容互动,或透过任何平台或装置上 Mesh 应用程式与彼此进行交流。这项技术的应用潜力甚大,尤其在教育、设计、科学研究上,与会者可见到真实的个人影像,或者是参与者的「化身」(Avatar)。

例如旅行社可为客户设计游览名胜虚拟体验,又或者建筑公司可以让其员工不管身在何地,透过参与虚拟模型创作,一齐看到3D立体的建筑设计。

全息传送海底演说

除了HoloLens 2, Mesh亦支援其他的扩增实境VR眼镜、个人电脑甚至手机,透过混合实境,分享一位参与者现场视觉,其他参与者恍如到达另一空间,感觉可说相当科幻。Alex Kipman全场演说,站在完全虚拟海底背景,纯粹以「全息传送」(Holoportation)技术将自己融入海底背景,效果有如拍戏,光影全没破锭,利用云运算作光綫追踪。Microsoft没公布技术细节,但相信采用低时延网络,以及Azure云端作高速图像处理。

全息传送技术将人的影像,全息传送至另一地点,效果就有如电影「阿凡达」情节,「化身」即时在另一时空出现,虽然只能参与讨论;未来的视像会议就可能以Microsoft Teams启动,再利用 Mesh跨越空间到达另一地区,参观虚拟设计或在实境一同协作讨论业务。

全息会议指日可待

以全息传送真人影响,可能仍待特殊器材出现;类似网龙(0777.HK)旗下的ARTH Media,就是通过其ARHT引擎传送真人的影像,但被「传送者」要到专用的摄影棚撷取影像,才能全息传送至其他地点,初期Microsoft相信只集中传送「化身」,不是真人的影像。

Microsoft Mesh可融合实境,让参与者化身在同一环境,甚至参与3D模型设计,确为全息传送带来了新用途,室内设计师可带客户,参观虚拟落成设计单位。

Microsoft Mesh更将会与 Microsoft Teams和 Microsoft Dynamics 365 整合,Microsoft 合作夥伴可在Mesh开发各种体验。Microsoft公布了HoloLens的Microsoft Mesh新应用,而 AltspaceVR应用亦推出了新版本,以支援Mesh,可通过HoloLens举行会议,其他AR/VR设备亦能支援Microsoft Mesh。

Kipman介绍了Microsoft Mesh合作计画,更多人参与海洋探索计画,包括去年荷兰Damen Shiprepair Rotterdam厂商交付,全长87.1米,耗资达2亿美元改造,号称全球最先进的深海考察船OceanXplorer。

全息海洋实验室

2018年,对冲基金Bridgewater Associates创办人Ray Dalio与「铁达尼号」大导演卡梅隆(James Cameron)合作,提出深海探索计画OceanX,在荷兰经两年改造,打造了OceanXplorer,除了海底探索,也可拍摄海底电影,船上设有乾湿海洋研究实验室、电影制作中心和媒体中心,有多部载人和无人深海潜水器、直升机及无人机等,还有一部深达6000米海底,亦可拍摄影像的钛金属深海机器人。

OceanXplorer由多位电影工程师参与设计,配备媒体制作室,正与BBC的《蓝色星球2》系列团队,以及OceanX Media合作,由全球顶尖的记录片团队负责拍摄。

Kipman表示,卡梅隆利用了Microsoft Mesh打造OceanXplorer上的深海「全息实验室」,海洋科学家可虚拟访问船上,参与实验探险,即时分享3D全息影像。

OceanX 副总裁Vincent Pieribone说,OceanXplorer从海洋收集的科学数据,可全面导入全息显示环境内,科学家从远端实时指导探索任务。任何穿载HoloLens 2 或相容AR眼镜的科研人员,以化身形式参与船上会议,亲身观察指点全息海底影像特定区域,与其他科学家即时展开讨论。

而设计PokémonGo游戏的Niantic,亦正研究新游戏平台,玩家可透过 Microsoft Mesh在同一环境下捕捉3D的精灵。

最新回应

關鍵字

热门文章