工研院與Arm 強化AIoT產業鏈結

(台北內科週報第622期/2024年3月18日-2024年3月24日)

【產學政研連線】時代在進步,全球產業受到5G、生成式AI(GAI)以及大型語言模型(LLM)等新一代AI科技帶來創新轉型,工研院於3月20日與半導體晶片核心矽智財大廠Arm攜手,成立「ITRI.Arm SystemReady驗證中心」,成為繼美國、歐洲與印度後第4個驗證中心,以工研院深厚的研發能量與Arm全球生態系統認證平台,提供AIoT世界級系統標準驗證服務,推升國內軟體在多元的硬體生態系中領先全球水準,促使產業AI人工智慧與IOT物聯網的運用結合,接軌國際趨勢,實在深具意義!

根據國際數據資訊公司(IDC)估計,2026年全球物聯網產值將達到1.145兆美元,商機龐大,AIoT廣泛應用於車用、醫療、工業、運輸等領域,當前也積極開拓車載與衛星的新興應用,尤其在全球及政府加速推動電動車、新能源車科技浪潮上,結合5G AIoT的科技發展便至關重要。

▲工研院與半導體晶片核心矽智財大廠Arm攜手,成立繼美國、歐洲與印度後第4個驗證中心;圖為宣示儀式後與會雙方合影(照片係工業技術研究院提供)。

工研院執行副總、張培仁副院長表示,工研院在經濟部產業發展署補助下,2021年與Arm攜手合作構建了新創IC設計平臺,不僅有助於新創公司結合關鍵IP,加速推出具國際競爭力的產品,更提升台灣IC設計產業的全球市場佔有率。這次再度攜手Arm成立東亞首座「ITRI.Arm SystemReady驗證中心」,並透過工研院的營運,將密切串聯台灣半導體供應鏈與Arm的全球生態系統,使台灣的設備製造商能確保其硬軟體的流暢運作,並符合標準,從而提升了在全球市場上的信任度與能見度。

Arm台灣曾志光總裁說,Arm在全球物聯網產業擁有6成以上的市佔率,代表全球多數的物聯網應用運行在Arm架構之上。Arm過去已在全球包括美國、歐洲與印度打造Arm SystemReady驗證中心,並獲得超過全球業界100項認證。著眼工研院為國際級研發機構、並與產業深厚鏈結,這次攜手工研院於台灣成立Arm全球佈局的第4個驗證中心,將協助台灣設備製造業升級AIoT環境,透過裝置和系統的標準化,加速和擴展軟體開發人員專注於產品的創新與附加價值,持續提升裝置與聯網的安全防護力以及有效降低總擁有成本等,更重要的是能串接全球廣大的生態系夥伴掌握萬物連網的商機。


顛覆想像 演奏家化身虛擬人像

(台北內科週報第603期/2023年11月6日-2023年11月12日)

【產學政研連線】台灣當代指標性與知名管風琴演奏家余曉怡,以獨奏家身份活躍於樂壇,受邀演出足跡包括維也納、加州、德國、波蘭、捷克等國際知名藝術節。從經典曲目到跨界、從巴洛克到現代,建構極具個人風格的演奏美學。曾出版3張管風琴演奏專輯的她,獲傳藝金曲獎與市場肯定,更致力於跨領域的藝術美學推廣,2021-2024年受國家音樂廳之邀,擔任國家管風琴推廣音樂會總策劃與演出。

顛覆古典音樂會的體驗!工研院宣布與余曉怡合作,運用生成式AI技術(Generative AI;GAI)讓演奏家化身為虛擬人像,在11月1日登場的「2023福爾摩沙國際管風琴藝術節閉幕音樂會」,管風琴演奏家余曉怡的虛擬偶像造型將首度亮相外,在亞洲最大管風琴音樂廳衛武營的舞台上,透過GAI隨樂曲變換生成不同動畫,打造與古典音樂高度融合的影像體驗,帶來視覺與聽覺的雙重享受,跳脫傳統音樂會的模式與框架。

隨著AI人工智慧的普及與Covid-19疫情期間的催化,工研院產業科技國際策略發展所林昭憲所長表示,消費者在虛擬世界花費時間愈來愈長,數位原生虛擬作品也愈來愈受大眾歡迎。而虛擬世界的創作,已不再只是文化產業的陪襯。如何透過AI化簡馭繁,讓數位藝術家專心創作,這是1個不可忽略的產業趨勢,甚至刺激文化及創新科技發展。

▲運用生成式AI技術,讓管風琴演奏家余曉怡化身為虛擬人像,搭配GAI語音轉動畫自動生成與工研院語音風格轉化技術,只要提供文稿或1段語音,虛擬偶像便會以各種不同的造型與聲音,呈現多樣的風貌(照片係工業技術研究院提供)。

以虛擬偶像為例,不僅數位原生的虛擬偶像受歡迎,真人偶像如足球明星Neymar、NBA明星球員Luka Doncic、美國歌手小賈斯汀,及Ariana Grande、韓國女團aespa都打造了虛擬化身,在MV、虛擬演唱會、社群網站、時裝展及NFT中亮相,更在虛擬世界替代本身,擴大與粉絲的互動。

當前,隨著虛擬產製生態更為成熟,虛擬世界服務體驗平台將大幅擴展。根據自主移動機器人全球市場研究報告(AMR)顯示,預期虛擬人的市值規模,將從2022年的113億美元成長到2030年的2,951億美元,年複合成長率(CAGR)超過4成。總之,虛擬人可作為虛擬偶像、虛擬助手、虛擬教師、虛擬客服等場景,主要應用在遊戲、零售、教育及汽車產業。

工研院服務系統科技中心鄭仁傑執行長表示,工研院持續以科技力支持藝術文化產業前進,搭上現在當紅的生成式AI,再次讓科技與藝術有不一樣的結合。這次工研院與余曉怡合作,將GAI文生圖(Text to Image)實際應用到音樂表演現場,主要可分為兩個部分,1是在前台設置透明投影螢幕,讓她的虛擬分身,透過大量照片訓練後,由AI生成專屬於她且像她的虛擬模型,搭配GAI語音轉動畫自動生成與工研院前瞻計畫的語音風格轉化技術,只要提供文稿或1段語音,虛擬偶像便會以各種不同的造型和聲音,呈現多樣的風貌,提供觀眾更豐富的視覺享受。

另1亮點在舞台上,過去演奏家表演時,舞台背景顯示的音景通常是與畫家配合,針對演奏曲目去挑選或創作合適意境的畫,而這次工研院針對古典樂特性,去對GAI下指令(Prompt)生成相對應的景象,並顯示在管風琴的後上方,讓觀眾享受樂曲的同時可以看到更具意象的畫面,進而提升沈浸感。