星島日報

【創科廣場】身處雲端全息實境 時空穿梭變阿凡達

2021-03-09 11:00
Ignite大會上,Microsoft行政總裁Satya Nadella介紹虛擬實境技術,HoloLens 2正用於多種工業用途,包括遠程醫療手術、技術訓練、遠程維修、工業設計,配合語音辨別、眼球追蹤以及手勢控制,加上視野廣闊,即時傳送至影像遠端協作。

香港應科院與中信國際電訊CPC 合作開發「DataHOUSE AR千里眼」遠程維護服務(「AR Remote Hand」),以可穿戴式AR擴增實境,為客戶作遠程數據中心維護,亦正是採用HoloLens 2作穿戴,以支援影像傳送至遠端。

HoloLens 2混合實境,原則上與擴增實境差不多,但全靠HoloLens實現。Nadella在Ignite 2021 大會介紹的Microsoft Mesh,則利用了Azure雲端性能來實現,由開發Hololens和Kinect的Microsoft技術院士Alex Kipman,首次以沉浸式的演講,介紹全新混合實境平台Microsoft Mesh,展示了如何將混合實境,融入了遙距協作。

Microsoft Mesh能透過混合實境營造臨場感,即使人們身處在不同地方,亦能感覺像在同一空間內。與會者可以與 3D 內容互動,或透過任何平台或裝置上 Mesh 應用程式與彼此進行交流。這項技術的應用潛力甚大,尤其在教育、設計、科學研究上,與會者可見到真實的個人影像,或者是參與者的「化身」(Avatar)。

例如旅行社可為客戶設計遊覽名勝虛擬體驗,又或者建築公司可以讓其員工不管身在何地,透過參與虛擬模型創作,一齊看到3D立體的建築設計。

全息傳送海底演說

除了HoloLens 2, Mesh亦支援其他的擴增實境VR眼鏡、個人電腦甚至手機,透過混合實境,分享一位參與者現場視覺,其他參與者恍如到達另一空間,感覺可說相當科幻。Alex Kipman全場演說,站在完全虛擬海底背景,純粹以「全息傳送」(Holoportation)技術將自己融入海底背景,效果有如拍戲,光影全沒破錠,利用雲運算作光綫追蹤。Microsoft沒公布技術細節,但相信採用低時延網絡,以及Azure雲端作高速圖像處理。

全息傳送技術將人的影像,全息傳送至另一地點,效果就有如電影「阿凡達」情節,「化身」即時在另一時空出現,雖然只能參與討論;未來的視像會議就可能以Microsoft Teams啟動,再利用 Mesh跨越空間到達另一地區,參觀虛擬設計或在實境一同協作討論業務。

全息會議指日可待

以全息傳送真人影響,可能仍待特殊器材出現;類似網龍(0777.HK)旗下的ARTH Media,就是通過其ARHT引擎傳送真人的影像,但被「傳送者」要到專用的攝影棚擷取影像,才能全息傳送至其他地點,初期Microsoft相信只集中傳送「化身」,不是真人的影像。

Microsoft Mesh可融合實境,讓參與者化身在同一環境,甚至參與3D模型設計,確為全息傳送帶來了新用途,室內設計師可帶客戶,參觀虛擬落成設計單位。

Microsoft Mesh更將會與 Microsoft Teams和 Microsoft Dynamics 365 整合,Microsoft 合作夥伴可在Mesh開發各種體驗。Microsoft公布了HoloLens的Microsoft Mesh新應用,而 AltspaceVR應用亦推出了新版本,以支援Mesh,可通過HoloLens舉行會議,其他AR/VR設備亦能支援Microsoft Mesh。

Kipman介紹了Microsoft Mesh合作計畫,更多人參與海洋探索計畫,包括去年荷蘭Damen Shiprepair Rotterdam廠商交付,全長87.1米,耗資達2億美元改造,號稱全球最先進的深海考察船OceanXplorer。

全息海洋實驗室

2018年,對沖基金Bridgewater Associates創辦人Ray Dalio與「鐵達尼號」大導演卡梅隆(James Cameron)合作,提出深海探索計畫OceanX,在荷蘭經兩年改造,打造了OceanXplorer,除了海底探索,也可拍攝海底電影,船上設有乾濕海洋研究實驗室、電影製作中心和媒體中心,有多部載人和無人深海潛水器、直升機及無人機等,還有一部深達6000米海底,亦可拍攝影像的鈦金屬深海機器人。

OceanXplorer由多位電影工程師參與設計,配備媒體製作室,正與BBC的《藍色星球2》系列團隊,以及OceanX Media合作,由全球頂尖的記錄片團隊負責拍攝。

Kipman表示,卡梅隆利用了Microsoft Mesh打造OceanXplorer上的深海「全息實驗室」,海洋科學家可虛擬訪問船上,參與實驗探險,即時分享3D全息影像。

OceanX 副總裁Vincent Pieribone說,OceanXplorer從海洋收集的科學數據,可全面導入全息顯示環境內,科學家從遠端實時指導探索任務。任何穿載HoloLens 2 或相容AR眼鏡的科研人員,以化身形式參與船上會議,親身觀察指點全息海底影像特定區域,與其他科學家即時展開討論。

而設計PokémonGo遊戲的Niantic,亦正研究新遊戲平台,玩家可透過 Microsoft Mesh在同一環境下捕捉3D的精靈。

最新回應

關鍵字

熱門文章