即時新聞:
地方新聞
分享:     列印此頁
管風琴演奏會結合生成式AI 工研院打造音樂展演新潮流
2023/11/02

【記者戴欣怡/新竹報導】工研院宣布與知名福爾摩沙管風琴演奏家余曉怡合作,運用生成式AI技術(Generative AI;GAI)讓演奏家化身虛擬人像,在11月1日登場的「2023福爾摩沙國際管風琴藝術節閉幕音樂會」,管風琴演奏家余曉怡的虛擬偶像造型將首度亮相外,在亞洲最大管風琴音樂廳衛武營的舞台上,透過GAI隨樂曲變換生成不同動畫,打造與古典音樂高度融合的影像體驗,帶來視覺與聽覺的雙重享受。

工研院產科國際所所長林昭憲表示,隨著AI人工智慧普及與疫情催化,消費者在虛擬世界花費時間愈來愈長、數位原生虛擬作品愈來愈受大眾歡迎。如何透過AI化簡馭繁,讓數位藝術家專心創作,這是不可忽略的產業趨勢,甚至刺激文化及創新科技發展。以虛擬偶像為例,不僅數位原生的虛擬偶像受歡迎,真人偶像如足球明星Neymar、NBA明星球員Luka Dončić、美國歌手小賈斯汀和Ariana Grande都打造了虛擬化身,在MV、虛擬演唱會、社群網站、時裝展等亮相,替代本身擴大與粉絲互動。

工研院服科中心執行長鄭仁傑表示,這次與福爾摩沙管風琴演奏家余曉怡合作,將 GAI文生圖(Text to Image)應用到音樂表演現場,可分為兩部分,一是在前台設置透明投影螢幕,讓演奏家余曉怡虛擬分身,透過大量照片訓練後,由AI生成專屬的虛擬模型,搭配GAI語音轉動畫自動生成與工研院的語音風格轉化技術,只要提供文稿或一段語音,虛擬偶像便會以各種不同的造型及聲音,呈現多樣的風貌,提供觀眾更豐富的視覺享受。另一亮點在舞台上,工研院針對古典樂特性,去對GAI下指令(prompt)生成相對應的景象,並顯示在管風琴的後上方,讓觀眾享受樂曲的同時可看到更具意象的畫面,提升沈浸感。