(台北內科週報第603期/2023年11月6日-2023年11月12日)
【產學政研連線】台灣當代指標性與知名管風琴演奏家余曉怡,以獨奏家身份活躍於樂壇,受邀演出足跡包括維也納、加州、德國、波蘭、捷克等國際知名藝術節。從經典曲目到跨界、從巴洛克到現代,建構極具個人風格的演奏美學。曾出版3張管風琴演奏專輯的她,獲傳藝金曲獎與市場肯定,更致力於跨領域的藝術美學推廣,2021-2024年受國家音樂廳之邀,擔任國家管風琴推廣音樂會總策劃與演出。
顛覆古典音樂會的體驗!工研院宣布與余曉怡合作,運用生成式AI技術(Generative AI;GAI)讓演奏家化身為虛擬人像,在11月1日登場的「2023福爾摩沙國際管風琴藝術節閉幕音樂會」,管風琴演奏家余曉怡的虛擬偶像造型將首度亮相外,在亞洲最大管風琴音樂廳衛武營的舞台上,透過GAI隨樂曲變換生成不同動畫,打造與古典音樂高度融合的影像體驗,帶來視覺與聽覺的雙重享受,跳脫傳統音樂會的模式與框架。
隨著AI人工智慧的普及與Covid-19疫情期間的催化,工研院產業科技國際策略發展所林昭憲所長表示,消費者在虛擬世界花費時間愈來愈長,數位原生虛擬作品也愈來愈受大眾歡迎。而虛擬世界的創作,已不再只是文化產業的陪襯。如何透過AI化簡馭繁,讓數位藝術家專心創作,這是1個不可忽略的產業趨勢,甚至刺激文化及創新科技發展。

以虛擬偶像為例,不僅數位原生的虛擬偶像受歡迎,真人偶像如足球明星Neymar、NBA明星球員Luka Doncic、美國歌手小賈斯汀,及Ariana Grande、韓國女團aespa都打造了虛擬化身,在MV、虛擬演唱會、社群網站、時裝展及NFT中亮相,更在虛擬世界替代本身,擴大與粉絲的互動。
當前,隨著虛擬產製生態更為成熟,虛擬世界服務體驗平台將大幅擴展。根據自主移動機器人全球市場研究報告(AMR)顯示,預期虛擬人的市值規模,將從2022年的113億美元成長到2030年的2,951億美元,年複合成長率(CAGR)超過4成。總之,虛擬人可作為虛擬偶像、虛擬助手、虛擬教師、虛擬客服等場景,主要應用在遊戲、零售、教育及汽車產業。
工研院服務系統科技中心鄭仁傑執行長表示,工研院持續以科技力支持藝術文化產業前進,搭上現在當紅的生成式AI,再次讓科技與藝術有不一樣的結合。這次工研院與余曉怡合作,將GAI文生圖(Text to Image)實際應用到音樂表演現場,主要可分為兩個部分,1是在前台設置透明投影螢幕,讓她的虛擬分身,透過大量照片訓練後,由AI生成專屬於她且像她的虛擬模型,搭配GAI語音轉動畫自動生成與工研院前瞻計畫的語音風格轉化技術,只要提供文稿或1段語音,虛擬偶像便會以各種不同的造型和聲音,呈現多樣的風貌,提供觀眾更豐富的視覺享受。
另1亮點在舞台上,過去演奏家表演時,舞台背景顯示的音景通常是與畫家配合,針對演奏曲目去挑選或創作合適意境的畫,而這次工研院針對古典樂特性,去對GAI下指令(Prompt)生成相對應的景象,並顯示在管風琴的後上方,讓觀眾享受樂曲的同時可以看到更具意象的畫面,進而提升沈浸感。