【创科广场】身处云端全息实境 时空穿梭变阿凡达

Ignite大会上，Microsoft行政总裁Satya Nadella介绍虚拟实境技术，HoloLens 2正用于多种工业用途，包括远程医疗手术、技术训练、远程维修、工业设计，配合语音辨别、眼球追踪以及手势控制，加上视野广阔，即时传送至影像远端协作。

香港应科院与中信国际电讯CPC 合作开发「DataHOUSE AR千里眼」远程维护服务（「AR Remote Hand」），以可穿戴式AR扩增实境，为客户作远程数据中心维护，亦正是采用HoloLens 2作穿戴，以支援影像传送至远端。

HoloLens 2混合实境，原则上与扩增实境差不多，但全靠HoloLens实现。Nadella在Ignite 2021 大会介绍的Microsoft Mesh，则利用了Azure云端性能来实现，由开发Hololens和Kinect的Microsoft技术院士Alex Kipman，首次以沉浸式的演讲，介绍全新混合实境平台Microsoft Mesh，展示了如何将混合实境，融入了遥距协作。

Microsoft Mesh能透过混合实境营造临场感，即使人们身处在不同地方，亦能感觉像在同一空间内。与会者可以与 3D 内容互动，或透过任何平台或装置上 Mesh 应用程式与彼此进行交流。这项技术的应用潜力甚大，尤其在教育、设计、科学研究上，与会者可见到真实的个人影像，或者是参与者的「化身」（Avatar）。

例如旅行社可为客户设计游览名胜虚拟体验，又或者建筑公司可以让其员工不管身在何地，透过参与虚拟模型创作，一齐看到3D立体的建筑设计。

全息传送海底演说

除了HoloLens 2， Mesh亦支援其他的扩增实境VR眼镜、个人电脑甚至手机，透过混合实境，分享一位参与者现场视觉，其他参与者恍如到达另一空间，感觉可说相当科幻。Alex Kipman全场演说，站在完全虚拟海底背景，纯粹以「全息传送」（Holoportation）技术将自己融入海底背景，效果有如拍戏，光影全没破锭，利用云运算作光綫追踪。Microsoft没公布技术细节，但相信采用低时延网络，以及Azure云端作高速图像处理。

全息传送技术将人的影像，全息传送至另一地点，效果就有如电影「阿凡达」情节，「化身」即时在另一时空出现，虽然只能参与讨论；未来的视像会议就可能以Microsoft Teams启动，再利用 Mesh跨越空间到达另一地区，参观虚拟设计或在实境一同协作讨论业务。

全息会议指日可待

以全息传送真人影响，可能仍待特殊器材出现；类似网龙（0777.HK）旗下的ARTH Media，就是通过其ARHT引擎传送真人的影像，但被「传送者」要到专用的摄影棚撷取影像，才能全息传送至其他地点，初期Microsoft相信只集中传送「化身」，不是真人的影像。

Microsoft Mesh可融合实境，让参与者化身在同一环境，甚至参与3D模型设计，确为全息传送带来了新用途，室内设计师可带客户，参观虚拟落成设计单位。

Microsoft Mesh更将会与 Microsoft Teams和 Microsoft Dynamics 365 整合，Microsoft 合作夥伴可在Mesh开发各种体验。Microsoft公布了HoloLens的Microsoft Mesh新应用，而 AltspaceVR应用亦推出了新版本，以支援Mesh，可通过HoloLens举行会议，其他AR/VR设备亦能支援Microsoft Mesh。

Kipman介绍了Microsoft Mesh合作计画，更多人参与海洋探索计画，包括去年荷兰Damen Shiprepair Rotterdam厂商交付，全长87.1米，耗资达2亿美元改造，号称全球最先进的深海考察船OceanXplorer。

全息海洋实验室

2018年，对冲基金Bridgewater Associates创办人Ray Dalio与「铁达尼号」大导演卡梅隆（James Cameron）合作，提出深海探索计画OceanX，在荷兰经两年改造，打造了OceanXplorer，除了海底探索，也可拍摄海底电影，船上设有乾湿海洋研究实验室、电影制作中心和媒体中心，有多部载人和无人深海潜水器、直升机及无人机等，还有一部深达6000米海底，亦可拍摄影像的钛金属深海机器人。

OceanXplorer由多位电影工程师参与设计，配备媒体制作室，正与BBC的《蓝色星球2》系列团队，以及OceanX Media合作，由全球顶尖的记录片团队负责拍摄。

Kipman表示，卡梅隆利用了Microsoft Mesh打造OceanXplorer上的深海「全息实验室」，海洋科学家可虚拟访问船上，参与实验探险，即时分享3D全息影像。

OceanX 副总裁Vincent Pieribone说，OceanXplorer从海洋收集的科学数据，可全面导入全息显示环境内，科学家从远端实时指导探索任务。任何穿载HoloLens 2 或相容AR眼镜的科研人员，以化身形式参与船上会议，亲身观察指点全息海底影像特定区域，与其他科学家即时展开讨论。

而设计PokémonGo游戏的Niantic，亦正研究新游戏平台，玩家可透过 Microsoft Mesh在同一环境下捕捉3D的精灵。