淺談元宇宙科技於導覽應用之可能情境

文／佐臻股份有限公司 鄭育鎔

元宇宙發展現況

　　元宇宙(Metaverse)一詞存在已久，因為臉書(Facebook)宣示把元宇宙當成公司未來發展的重心並更改公司名稱為Meta，將元宇宙的熱度推上高峰成為2021年最紅的商業名詞(Buzz word)。而2022年至2023年因Meta營收不如預期再加上生成式AI在今年成為當紅炸子雞，讓元宇宙頓失媒體目光。然而，各國際大廠與新創公司仍一直持續投入推進元宇宙相關技術創新，讓元宇宙已經不在是個夢想，而是有很高的實現可行性。以下簡要列出今年元宇宙相關之重大進展:

•　硬體運算能力持續提升 – 晶片大廠Qualcomm持續優化其XR系列晶片推出提升GPU繪圖效能2.5倍與AI運算效能8倍之Snapdragon® XR2 Gen 2產品，並運用於 Meta最新的Quest 3頭盔產品。Qualcomm亦發表跨裝置分散式運算與Dual Render等架構，進一步提升行動式XR體驗。

•　廣域空間虛實融合技術漸趨成熟 – 廣域空間虛實融合技術能夠讓使用者在城市或遊樂園等大範圍空間中隨時體驗虛實融合XR服務。包括Google、Niantic、Snap等大廠在其相關服務都有新的進展。例如:Google ARCore GeoSpatial API提供開發者在Google StreetView服務所及之空間中建立AR服務，讓AR服務更容易普及到周遭生活空間中。

•　元宇宙相關標準收斂聚合 – 元宇宙一詞尚未有嚴謹的學術定義或是廣為產業所共通接受的標準說法，常與web 3、spatial computing、spatial Internet等名詞交互提及，儼然是集各家大成的上位名詞。因此XR或web3等領域廠商便於去年組成Metaverse Standard Forum，來試圖替產業找出需要共同定義標準的部分，例如:虛實融合的介面規範或是場景串流格式等。此外， Pixar、Adobe、Apple、Autodesk 和 NVIDIA 以及 Linux 基金會附屬的 Joint Development Foundation (JDF)宣佈成立 OpenUSD 聯盟，推動以 Pixar所制定之通用場景描述格式 (USD, Universal Scene Description)的標準化，來解決3D內容製作工具數十年來彼此資料交換不相容或轉換沒效率等的問題。

•　體驗方式重新定義與創新 – 今年元宇宙產業最大的新聞就是Apple 推出Visio Pro產品宣示進入空間運算(Spatial Computing)市場，值得注意的是，今年Meta亦推出新一代VR頭盔Quest 3，且Apple與Meta不約而同的都主推混合實境(Mixed Reality)應用。特別的是，與過去大家熟悉Hololens所提供之混合實境功能不同之處是，Apple與Meta都採用video passthrough架構，簡單的說，就是在封閉式VR頭盔架構上透過攝影機代替人眼去獲得真實世界的影像再進一步做成虛實場景融合繪製與成像。藉由適當的攝影機校正與效能優化，video passthrough能提供更寬廣(FoV)的混合實境成像效果且無過往被詬病的延遲問題。再加上同時具備VR的功能，讓video passthrough可能將成為未來混合實境的主流架構，成為VR頭盔的標準配備功能。佐臻公司代理之Varjo頭盔支援8K video passthrough混合實境功能，則為目前市場上最擬真之VR/MR裝置。

•　另一個重新定義元宇宙之體驗方式，則是佐臻公司在今年Computex發表之MetaSpace。透過投影機或LED顯示屏建構之沉浸體驗，已經成為互動體驗的主流方式之一，最有名的案例就是日本的teamLab。teamLab在東京的兩個美術館：teamLab Borderless 和teamLab Planets TOKYO開業的2018一年間，共接待350萬名參觀者。僅teamLab Borderless在開業一年內便迎來230名萬參觀者，超過荷蘭梵古美術館(Van Gogh Museum)的參觀人數。佐臻MetaSpace結合了沉浸投影、毫米波雷達、以及支援眼球追蹤與手勢互動的AR眼鏡等裝置，形成一個能提供觀賞者多重視覺與體感互動體驗的AIoT智慧空間，開創新一代的多人共享沉浸互動空間體驗。

圖、元宇宙體驗方式重新定義 (圖片來源:佐臻公司整理)

•　生成式AI技術進入元宇宙 – 生成式AI (Generative AI)可說是近兩年科技界最紅的詞彙，亦將影響到元宇宙的發展。雖然目前生成式AI在元宇宙主要的應用，如:貼圖生成、模型生成、場景生成、Avatar生成，Avatar互動等仍有很多進步的空間，但諸如Meta、NVIDIA、Adobe、Unity等大廠以及相關學術界的持續投入，可以預料未來幾年在實用性將有很大的進展，進而推進元宇宙應用的蓬勃發展與普及。

元宇宙科技於導覽應用之可能情境

　　元宇宙具有無窮的應用情境，在此以佐臻MetaSpace方案為基礎描繪於博物館或觀光等場域之導覽應用的可能情境。

　　佐臻公司積極整合國內外相關技術與內容合作夥伴，打造一個能快速滿足場域端需求的共創生態系。下圖為佐臻公司整合生態系相關夥伴建構之線上線上融合元宇宙方案。在此方案中，可透過空間掃描技術建構實體空間之數位空間版本，讓活動策展者可在此數位空間中進行規劃與設計。此數位空間更可以用來進行於實體世界展現AR體驗所需的廣域空間虛實融合計算，讓觀賞者可以在實體空間任何地點看到對應之數位空間地點中所擺設的數位展品、解說圖文、甚至是出現在附近的線上旅客之Avatar等。在此方案架構下，在實體空間的線下觀賞者可透過手機或AR眼鏡來體驗與實體空間精準疊合的數位內容；在數位空間的線上觀賞者則可透過MetaSpace或VR頭盔或手機於世界各角落與其他的線上線下觀賞者互動。佐臻MetaSpace方案可擷取使用者之眼球注視點、使用者之移動軌跡與觀賞方向、使用者互動之數位內容、以及使用者群體聚集狀況等不同層次(granularity)的數據，讓策展單位或是在此空間中提供廣告服務等業者，可即時根據數據分析結果調整內容達到效益優化之效果。

圖、佐臻MetaSpace線上線下融合元宇宙方案示意圖 (圖片來源:佐臻公司整理)

　　以下透過假設案例說明佐臻MetaSpace線上線下融合元宇宙方案可達成的情境。佐臻公司目前與TAVAR合作於花博建置了MetaSpace實體展示場域，假設未來佐臻公司進一步建置了與實體為1:1大小之虛擬花博園區，則佐臻生態系中的內容創作者便可在此虛擬花博園區空間中進行創作。若佐臻進一步在花博周遭其他地方也建置了實體MetaSpace展示場域，則體驗者配戴AR眼鏡由一個實體MetaSpace移動至另一個MetaSpace時，過程中可透過AR眼鏡體驗到創作者所建置的數位內容，這些內容可能是某個特展主題或是與線上民眾一同合作的解謎遊戲。在整個體驗空間更可擴展到花博周邊商圈，透過類似AR尋寶等支線活動，讓民眾透過手機進行AR元宇宙體驗，將民眾導引到特定店家搭配類似獎勵卷或收集虛擬金幣兌換等活動來帶動商圈之商機。

圖、佐臻MetaSpace元宇宙示意圖 (圖片來源:佐臻公司整理)

結語

　　本文簡單分享近期元宇宙技術的發展狀況以及佐臻公司在元宇宙的布局與可支援的導覽應用情境。本文所介紹之應用情境僅為元宇宙可能發展應用的其中之一，相信隨著元宇宙科技的持續創新演進，明年將有更多的應用情境被推出。我們佐臻公司也會持續推出創新方案與服務，協助我國的場域業者打造與眾不同的元宇宙體驗。