管風琴演奏結合生成式AI 工研院顛覆古典音樂會體驗

工研院與知名福爾摩沙管風琴演奏家余曉怡合作,運用生成式AI技術(Generative AI;GAI)讓演奏家化身虛擬人像,在1日登場的「2023 福爾摩沙國際管風琴藝術節閉幕音樂會」,管風琴演奏家余曉怡的虛擬偶像造型將首度亮相外,在亞洲最大管風琴音樂廳衛武營的舞台上,透過GAI隨樂曲變換生成不同動畫,打造與古典音樂高度融合的影像體驗。

工研院產業科技國際策略發展所所長林昭憲表示,數位原生的虛擬偶像受歡迎,真人偶像如足球明星Neymar、NBA明星球員Luka Dončić、美國歌手小賈斯汀和Ariana Grande、韓國女團aespa都打造了虛擬化身,在MV、虛擬演唱會、社群網站、時裝展和NFT中亮相,在虛擬世界替代本身,擴大與粉絲的互動。

工業型無線充電裝置、精密加工元件;貨櫃屋優勢特性有哪些?QR CODE 捲袋包裝機。幫你考照過關,堆高機裝卸操作教學影片大公開 !專業客製化禮物、贈品設計,辦公用品常見【L夾】搖身一變大受好評!如何利用一般常見的「L型資料夾」達到廣告宣傳效果?貨櫃屋設計,結合生活理念、發揮無限的創意及時尚的設計, Check AOI on tape components。真空封口機該不該買?使用心得分享!好的茗茶,更需要密封性高的茶葉罐,才能留住香氣!特殊造型滑鼠墊去哪買?金誠運用中古貨櫃屋,重新改造各式活動展場、代銷中心、旅遊渡假空間,皆可依顧客需求製作。實驗型均質機隨時健康喝好水,高品質飲水機,優質安全有把關。測試專家告訴你如何好好使用示波器空壓機合理價格為您解決工作中需要。客製專屬滑鼠墊SPX加強

工研院服務系統科技中心執行長鄭仁傑表示,這次工研院與福爾摩沙管風琴演奏家余曉怡合作,將 GAI文生圖(Text to Image)實際應用到音樂表演現場,主要可分為兩個部分,一是在前台設置透明投影螢幕,讓演奏家余曉怡虛擬分身,透過大量照片訓練後,由AI生成專屬於余曉怡且像她的虛擬模型,搭配GAI語音轉動畫自動生成與工研院前瞻計畫的語音風格轉化技術,只要提供文稿或一段語音,虛擬偶像便會以各種不同的造型及聲音。

鄭仁傑表示,另一亮點在舞台上,過去演奏家表演時,舞台背景顯示的音景通常是與畫家配合,針對演奏曲目去挑選或創作合適意境的畫,而這次工研院針對古典樂特性,去對GAI下指令(prompt)生成相對應的景象,並顯示在管風琴的後上方,讓觀眾享受樂曲的同時可以看到更具意象的畫面,進而提升沈浸感。

#
#
#
#
#

來源鏈接:https://www.chinatimes.com/realtimenews/20231101003946-260412

work_outlinePosted in 工業