容積擷取(Volumetric Capture)技術拍攝完成後,還需經過後製編輯處理,才能將影像資料轉換成能夠實際應用的3D檔案格式。本篇情報誌將介紹Arcturus專為容積擷取影像打造的HoloSuite後製處理平台,平台提供能夠編輯容積擷取影像資料的HoloEdit,以及用於串流傳輸的HoloStream,這兩種軟體同時減化了複雜的操作過程,讓容積擷取技術更能貼近人們的生活,擴增容積影像的應用領域。
HoloEdit為非線性的容積擷取編輯器,可以支援4DViews、Tetavi及OBJ+PNG等格式的容積擷取影像檔案,能夠進行網格清理、減少面數、多軌編輯等處理,並輸出成OMS(可透過HoloStream串流的檔案格式)與MP4檔,讓使用者透過影格,精細地編輯容積擷取影片,還能夠建立骨架修改模型動態,既能自由調整動作,又能符合真實人體姿態的功能,讓經過處理後模型動態變得非常順暢,也不太會有抖動和跳動情形,可將龐大的動態模型檔案壓縮至百倍以下容量,匯入3D軟體例如3ds Max、Maya等;另一個軟體HoloStream,則是容積擷取影像的播放器,可以整合串流Unity、Unreal、本機App及網頁,即便是在行動裝置例如手機、平板等,都可以輕鬆開啟,且能支援5G技術,並依據當下網路環境,自動切換成最好的顯示畫質。
Arcturus在推出HoloSuite平台前,曾和株式會社新月(Crescent,inc.)建立長期合作關係,共同在日本建立了第一台商業分派伺服器系統,提供容積擷取領域的客戶協作使用。新月主要使用HoloSuite平台處理容積擷取影片,在拍攝容積擷取的過程中,也會協助Arcturus進行測試,實際應用案例包含新月社長的寵物狗「月餅」、日本女裝品牌《ANAYI》電商網站等。
今(2023)年06月,Arcturus和新月還共同舉辦研討會介紹新版HoloSuite,以及全新的AVV格式(Accelerated Volumetric Video,能夠保存高品質的網格、貼圖資訊,適合在大場景中呈現更多不同的虛擬演員)。2023新版的HoloSuite,主要針對運算速度、即時人物動態表現流暢度,以及模型細節保留程度進行最佳化。展示會中,Arcturus以AVV格式,在遊戲引擎置入70多個容積擷取的虛擬人物,營造遊客如織的熱鬧街景。這項新技術能簡化許多數位內容產製流程,讓影視或遊戲相關產業期待後續研發成果。
參考資料:
1. Arcturus:https://arcturus.studio/
2. 株式會社新月(Crescent,inc.):https://www.crescentinc.co.jp/
圖一、透過HoloEdit,容積擷取影像檔案可壓縮近百倍,卻沒有明顯失真。
圖二、將AVV格式套用到遊戲引擎中,可置入多位虛擬演員,且能流暢播放。