「多重宇宙」演唱會也能玩 北科大師生作品獲SIGGRAPH大賞

北科大SIGGRAPH獲獎作品「跨境現實」，觀衆戴上VR頭盔即能以虛擬分身參與數位版演唱會。（北科大提供／林志成臺北傳真）

北科大互動設計系師生開發延展實境（XR）作品「跨境現實」（Actualities），透過現場樂器彈奏振動，即時打造與觀衆互動的多重宇宙演唱會，榮獲2023年ACM SIGGRAPH電腦動畫展「沉浸體驗區」大賞。

「跨境現實」由北科大互動設計系碩士生林可凡、周育稚、翁毓翔、互動設計與創新國際專班學生陳怡璇、林靜瑩及助理教授韓秉軒共同設計，在團隊歷經一年的激盪下，吉他手一彈奏，觀衆眼前花兒朵朵綻放、蝴蝶翩翩起舞；木箱鼓一拍敲，煙火即刻施放，隨着節奏而變化。

而觀衆一踏入搖滾區，在背幕中即化身爲「小鬼」，線上觀衆也能選擇不同的虛擬分身，對錶演者發送愛心、星星等符號。

周育稚指出：「我們透過光學、電容等感測器來抓取現場的表演資訊，觸發不同的特效，即時轉化後，在虛擬世界裡生成另一個數位的版本，讓觀衆在看現場演出時，也能透過不同載體去欣賞不同維度的表演。參加演唱會，變成一場共同創作的盛宴。」

SIGGRAPH展期間，「跨境現實」作品吸引許多國際訪賓體驗，評審團指出：「此作品融合高度複雜的互動，而且使用者不需要學習就能輕易體驗，帶來樂趣，完全體現了沉浸體驗區的核心概念，爲沉浸式互動帶來十足的創新。」

韓秉軒表示，作品源自去年與廠商的產學合作案，他所帶領的XR Lab負責開發音樂視覺化的軟體套件，後續加入XR串流技術，並與好樂團合作，「我們想要塑造一個全新的體驗，有沒有一種全新的形式，讓遠距跟現場的觀衆可以共同參與這場演出？如同一場『平行時空』交錯的多重宇宙演唱會。」