【創科廣場】身處雲端全息實境 時空穿梭變阿凡達

Ignite大會上，Microsoft行政總裁Satya Nadella介紹虛擬實境技術，HoloLens 2正用於多種工業用途，包括遠程醫療手術、技術訓練、遠程維修、工業設計，配合語音辨別、眼球追蹤以及手勢控制，加上視野廣闊，即時傳送至影像遠端協作。

香港應科院與中信國際電訊CPC 合作開發「DataHOUSE AR千里眼」遠程維護服務（「AR Remote Hand」），以可穿戴式AR擴增實境，為客戶作遠程數據中心維護，亦正是採用HoloLens 2作穿戴，以支援影像傳送至遠端。

HoloLens 2混合實境，原則上與擴增實境差不多，但全靠HoloLens實現。Nadella在Ignite 2021 大會介紹的Microsoft Mesh，則利用了Azure雲端性能來實現，由開發Hololens和Kinect的Microsoft技術院士Alex Kipman，首次以沉浸式的演講，介紹全新混合實境平台Microsoft Mesh，展示了如何將混合實境，融入了遙距協作。

Microsoft Mesh能透過混合實境營造臨場感，即使人們身處在不同地方，亦能感覺像在同一空間內。與會者可以與 3D 內容互動，或透過任何平台或裝置上 Mesh 應用程式與彼此進行交流。這項技術的應用潛力甚大，尤其在教育、設計、科學研究上，與會者可見到真實的個人影像，或者是參與者的「化身」（Avatar）。

例如旅行社可為客戶設計遊覽名勝虛擬體驗，又或者建築公司可以讓其員工不管身在何地，透過參與虛擬模型創作，一齊看到3D立體的建築設計。

全息傳送海底演說

除了HoloLens 2， Mesh亦支援其他的擴增實境VR眼鏡、個人電腦甚至手機，透過混合實境，分享一位參與者現場視覺，其他參與者恍如到達另一空間，感覺可說相當科幻。Alex Kipman全場演說，站在完全虛擬海底背景，純粹以「全息傳送」（Holoportation）技術將自己融入海底背景，效果有如拍戲，光影全沒破錠，利用雲運算作光綫追蹤。Microsoft沒公布技術細節，但相信採用低時延網絡，以及Azure雲端作高速圖像處理。

全息傳送技術將人的影像，全息傳送至另一地點，效果就有如電影「阿凡達」情節，「化身」即時在另一時空出現，雖然只能參與討論；未來的視像會議就可能以Microsoft Teams啟動，再利用 Mesh跨越空間到達另一地區，參觀虛擬設計或在實境一同協作討論業務。

全息會議指日可待

以全息傳送真人影響，可能仍待特殊器材出現；類似網龍（0777.HK）旗下的ARTH Media，就是通過其ARHT引擎傳送真人的影像，但被「傳送者」要到專用的攝影棚擷取影像，才能全息傳送至其他地點，初期Microsoft相信只集中傳送「化身」，不是真人的影像。

Microsoft Mesh可融合實境，讓參與者化身在同一環境，甚至參與3D模型設計，確為全息傳送帶來了新用途，室內設計師可帶客戶，參觀虛擬落成設計單位。

Microsoft Mesh更將會與 Microsoft Teams和 Microsoft Dynamics 365 整合，Microsoft 合作夥伴可在Mesh開發各種體驗。Microsoft公布了HoloLens的Microsoft Mesh新應用，而 AltspaceVR應用亦推出了新版本，以支援Mesh，可通過HoloLens舉行會議，其他AR/VR設備亦能支援Microsoft Mesh。

Kipman介紹了Microsoft Mesh合作計畫，更多人參與海洋探索計畫，包括去年荷蘭Damen Shiprepair Rotterdam廠商交付，全長87.1米，耗資達2億美元改造，號稱全球最先進的深海考察船OceanXplorer。

全息海洋實驗室

2018年，對沖基金Bridgewater Associates創辦人Ray Dalio與「鐵達尼號」大導演卡梅隆（James Cameron）合作，提出深海探索計畫OceanX，在荷蘭經兩年改造，打造了OceanXplorer，除了海底探索，也可拍攝海底電影，船上設有乾濕海洋研究實驗室、電影製作中心和媒體中心，有多部載人和無人深海潛水器、直升機及無人機等，還有一部深達6000米海底，亦可拍攝影像的鈦金屬深海機器人。

OceanXplorer由多位電影工程師參與設計，配備媒體製作室，正與BBC的《藍色星球2》系列團隊，以及OceanX Media合作，由全球頂尖的記錄片團隊負責拍攝。

Kipman表示，卡梅隆利用了Microsoft Mesh打造OceanXplorer上的深海「全息實驗室」，海洋科學家可虛擬訪問船上，參與實驗探險，即時分享3D全息影像。

OceanX 副總裁Vincent Pieribone說，OceanXplorer從海洋收集的科學數據，可全面導入全息顯示環境內，科學家從遠端實時指導探索任務。任何穿載HoloLens 2 或相容AR眼鏡的科研人員，以化身形式參與船上會議，親身觀察指點全息海底影像特定區域，與其他科學家即時展開討論。

而設計PokémonGo遊戲的Niantic，亦正研究新遊戲平台，玩家可透過 Microsoft Mesh在同一環境下捕捉3D的精靈。