臺大開發Stiller系統 60秒擷取劇照
臺大電機工程系特聘教授陳宏銘(右)、臺大資訊工程系學生曹峻寧(左)合影。(KKStream提供)
KKBOX旗下影音串流服務技術公司KKStream,與臺大電機工程系特聘教授陳宏銘研究團隊合作,開發智慧劇照挑選系統「Stiller」,以線上影音服務KKTV支援劇庫資料,以AI技術60秒擷取劇照,不只可提升影片點擊播放率,更能減少美術人員逐格截圖作業時間,團隊師生獲國際電機電子工程師學會邀請,赴美髮表研究成果。
參與系統設計的臺大資訊工程系畢業生曹峻寧表示,開發「Stiller」智慧劇照挑選系統,主要是結合關鍵影格擷取、影像美感評估兩大技術,可從影片中挑選兼備代表性、具吸引力的劇照。
曹峻寧提到,透過AI人工智慧系統,「Stiller」只需3集的影片量,就能用演算法判斷出男女主角是誰,並且自動擷取精彩影集劇照,未來希望能有機會延續這項研究,開發出自動剪輯預告,甚至做出濃縮影片成果,讓AI不只看見畫面、還能看懂影片。
曹峻寧指出,這次研究成果的技術是「視訊理解」,透過KKStream和影片管理團隊訪談,聚焦影片劇照挑選實務應用,從臉部表情到動作場景,透過不同面向強化AI對視訊理解的能力,現階段能判讀重要影片情境並挑選劇照,每集影片均花60秒就能擷取劇照,大幅縮減美術人員逐格截圖作業時間,並藉由劇照達成吸睛效果,提升影迷點擊播放意願。未來「Stiller」除了運用在偶像劇,技術也將持續朝不同類型影片發展。
陳宏銘說,臺大和KKBOX集團已經有多年產學合作經驗,樂見KKStream提供先進影音串流平臺給研究團隊實習,適時結合學術理論於產業實作中,才能獲得成功。而多媒體科技在影音串流時代的重要性,絕對有目共睹,學術研發促進產業發展,正是產學交流的初衷。