人工智慧在音樂分析與創作的應用—2018臺北數位藝術節紀實

更新於 發佈於 閱讀時間約 4 分鐘
臺北數位藝術節 數位國際研討會側記|講者:蘇黎
「人工智慧(AI)」發展至今早已逐漸擴及到各個層面,Pepper機器人、統一超商的無人便利商店、萬芳醫院的醫療機器人、無人小巴士、自動駕駛、華碩的Zenbo…等等,我們的工作、生活已逐漸佈滿這項科技的蹤跡。
「人工智慧」從識別圖像、語音,再來與圍棋手進行比賽,近年Google也讓AI踏入藝術領域,開始作畫、寫詩、譜曲。關於AI的討論越來越多,我們也常在報章雜誌上看到相關報導,但往往因為太過片段的內容,讓人誤以為它是憑空出現的技術,不少人也因為不瞭解而產生過度的想像,甚至帶來焦慮,認為AI即將取代人類。11/24這天,由來自中研院資訊科學研究所,專長為訊號處理、機器學習與音樂資訊檢索的蘇黎博士,聚焦音樂層面,與我們分享關於AI的研究成果,以及他對於AI的觀點。
蘇黎博士

人工智慧與創造力

AI不是一夕之間,源頭也是人工的。
其實AI並不是最近幾年才出現,早在2001年就開始應用在音樂上,當時主要運用於模擬及創造音樂,即讓AI作為音樂聆聽者的「自動採譜」技術及演唱者的「自動跟譜」技術。
「自動採譜」是讓電腦在聽到音樂家的現場演奏後,能夠用樂譜重現;「自動跟譜」技術則是讓電腦在理解樂譜之後,能夠與人互動。而第三階段則是讓電腦作為教育者的「評論修正」技術,像是調整初學者演奏的錯音,或是預測歌唱比賽的優勝者,甚至與大數據一同運用,分析受眾喜好、讓行銷更精準。而近幾年最讓人津津樂道的,則是不少科技龍頭開始讓AI作為創作者,進行編曲和作曲。
到底人工智慧怎麼突然間就擁有了創作的能力?其實這一切都是來自於「機器學習」。
「簡單來說就是不斷地餵給電腦很多跟音樂有關的資料X及樂譜Y,再透過一連串的數學運算去做出對應的模型。」蘇黎博士接著說。
「創作對機器來說,就類似從Y到X的過程。」他開玩笑說,「人工智慧聽起來很玄,但其實源頭還是來自於人工,某種程度上來說,其實只是一個很重複性的工作。」

音樂上應用AI的三個面向-自動採譜?自動對譜?評論修正?

同樣是透過電腦理解後轉化的過程,「自動採譜」與手機語音辨識類似,卻因為音樂的組成複雜,在加入AI技術時也相對困難。蘇黎博士說:「音樂的情緒、曲風等等都會因為時間的長短而有影響。」目前的技術能將聲音訊號轉為Midi讓機器學習,但因為機器還沒辦法理解人類的「音樂語言」,也因此無法呈現音樂的情緒變化。
現階段「自動採譜」最常被運用的地方是在於文化的保存,像是布農族的八部合音,這些口耳相傳的民族音樂,經由AI紀錄下來,與民族音樂學家人工採譜的相似度極高,可省下學者的時間,讓音樂研究能有更多的可能。
而「自動對譜」技術則是人機互動演奏音樂的基礎。目前的運用是AI能即時呈現演奏家的演奏進度,以及細微的速度變化,讓演奏會的演出形式有更多可能。另一個運用則是作為走音救星,透過將不專業的人聲與專業人聲交叉,自動調整速度及音高。
第三個面向「評論修正」最有趣的地方,就是可以透過AI將伴奏轉換,使原本的音樂風格轉變為另一種曲風。但若是要轉換為爵士曲風,對AI來說就不容易,因為爵士的核心是隨性,缺乏規則,這也是人工智慧的盲點:「長時間的相關性」。現階段的AI在音樂上可以理解片段的音樂,判斷下一小節的情況,但無法理解音樂的章法,進而做出全面性的預測。其次則是可以改變音色,直接套用素材庫的樂器音色,在做鋼琴轉換為吉他時,還能夠呈現吉他撥弦時音高出現的時間差。

AI能生成音樂樣板,卻不及人類原生的創作

人工智慧雖然能夠做出我們以往無法想像的事情,但在創作這方面,是無法透過訓練就學會的。呼應蘇黎博士開頭提到,人工智慧始終還是「人工」,機器需要透過人類的訓練,像人類一樣經過學習才能夠進行反饋。但它與人不同的地方則是不會疲憊、可以不斷的進行學習,這也進而加快了應用的時間。而牽涉到聯想及整合的時候,它依舊無法取代人類;人類在聽音樂時產生的觀點,也是人工智慧無法想到的。
人工智慧在音樂上後續的發展重點為何?是否真的會取代人類?蘇黎博士以工業革命做為比喻:「當時機器的出現讓手工轉為自動,現在的AI就好比機器,是用來節省人類在製造音樂上所花費的時間。」AI始終是個工具,而懂得使用工具的人就不會被取代。
「未來最低階的勞工可能會變成替機器做教材的標記員吧!」蘇黎博士打趣地提出關於未來世界的預測。

臺北數位藝術節參展資訊

時間:2018 / 11 / 22 ~ 12 / 01
地點:松菸文創園區5號倉庫、北向製菸工廠(免費入場)
  • 即日在方格子發表臺北數位藝術節的相關文章,就有機會參加抽獎哦!
    詳情請見:點我
2018第十三屆臺北數位藝術節於11/22-12/1於松山文創園區舉辦,命名為「超機體」(trans-robotics),意謂著機器人科技結合藝術創作而產生的演繹進化及超越,試圖探討在機器人、人工智慧(AI)有著突破性發展的近未來,人們如何與具有智慧或創意能力的機器人共生或互斥的議題。
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
在現今社會,因為機器人的勞動能力高於人類,智慧低於人類,所以由機器人擔任生產者,而人類擔任觀測者。但當機器人的智慧超越人類時,人類可能要面臨「普羅米修斯的窘境」。後人類時代的到來是一種「毒」亦是一種「機會」,在面對人機關係改變下的巨大震撼的同時,人與機械的關係亦得到拓展的可能。
2018臺北數位藝術節所舉辦的其中一場數位藝術國際研討會,主題是目前常被熱烈討論的議題—機器人與創意要如何並存?主講者是英國導演奧斯卡‧夏普(Oscar Sharp),他在2016年首度創造了第一位能賺寫電影劇本的人工智能,名為班傑明(Benjamin)。
臺北數位藝術節此次邀請了居住在德國的日本藝術家:ACCI BABA 來談談關於他的作品及想要傳達的意念——人類與科技之間的關係。ACCI BABA擅長以眾所皆知的物理變化和不符合科學的觀點,衝擊人們視覺體驗,並將這種藝術表現與電影及各種裝置結合,以超現實的形式,展現出跨越自然現象與人類意識的藝術。
以《超機體》為主題探討科技與人工智慧和未來藝術與人類互動的第十三屆臺北數位藝術節,邀請韓國白南準藝術中心館長徐真錫(Jinsuk Suh)以《後數位時代,當代藝術的趨勢與可能性》為題,與在場的二十多位來賓深度探討當今處於後網路時代的新生代數位原住民其創作、散佈與欣賞藝術的方式,與類比世代有何不同。
來自ZKM德國新媒體藝術中心的機器人實驗室之所以成立,起因於原本機器、機械主要用於工業生產,但他們將其帶入表演藝術中,讓機器人的角色有自主及創意的可能。「我們不創造新的機器人,而是運用現成的機器人進行創作。」
這場英文演講現場口譯的內容我聽得霧煞煞,錄音效果也不好,回家後腦袋一片空白,心裡很挫這下怎麼交稿!我抓太太來幫忙聽錄音,再趕緊上網查相關資料,交稿後收到滿意的回覆,真是一個小小的震撼教育。
在現今社會,因為機器人的勞動能力高於人類,智慧低於人類,所以由機器人擔任生產者,而人類擔任觀測者。但當機器人的智慧超越人類時,人類可能要面臨「普羅米修斯的窘境」。後人類時代的到來是一種「毒」亦是一種「機會」,在面對人機關係改變下的巨大震撼的同時,人與機械的關係亦得到拓展的可能。
2018臺北數位藝術節所舉辦的其中一場數位藝術國際研討會,主題是目前常被熱烈討論的議題—機器人與創意要如何並存?主講者是英國導演奧斯卡‧夏普(Oscar Sharp),他在2016年首度創造了第一位能賺寫電影劇本的人工智能,名為班傑明(Benjamin)。
臺北數位藝術節此次邀請了居住在德國的日本藝術家:ACCI BABA 來談談關於他的作品及想要傳達的意念——人類與科技之間的關係。ACCI BABA擅長以眾所皆知的物理變化和不符合科學的觀點,衝擊人們視覺體驗,並將這種藝術表現與電影及各種裝置結合,以超現實的形式,展現出跨越自然現象與人類意識的藝術。
以《超機體》為主題探討科技與人工智慧和未來藝術與人類互動的第十三屆臺北數位藝術節,邀請韓國白南準藝術中心館長徐真錫(Jinsuk Suh)以《後數位時代,當代藝術的趨勢與可能性》為題,與在場的二十多位來賓深度探討當今處於後網路時代的新生代數位原住民其創作、散佈與欣賞藝術的方式,與類比世代有何不同。
來自ZKM德國新媒體藝術中心的機器人實驗室之所以成立,起因於原本機器、機械主要用於工業生產,但他們將其帶入表演藝術中,讓機器人的角色有自主及創意的可能。「我們不創造新的機器人,而是運用現成的機器人進行創作。」
這場英文演講現場口譯的內容我聽得霧煞煞,錄音效果也不好,回家後腦袋一片空白,心裡很挫這下怎麼交稿!我抓太太來幫忙聽錄音,再趕緊上網查相關資料,交稿後收到滿意的回覆,真是一個小小的震撼教育。
你可能也想看
Google News 追蹤
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
想像一下,你正在聆聽一首優美動人的音樂。旋律起伏跌宕,和聲豐富多彩,情感表達細膩入微。你陶醉其中,不禁讚歎作曲家的才華橫溢。然而,當有人告訴你這首曲子其實是由人工智能創作時,你的感受會有什麼變化? 近年來,AI音樂創作技術突飛猛進,已經能夠產出媲美人類作曲家水平的作品。比如說,你可以親自體驗一
Thumbnail
從蕭邦與安海瑟薇,談到AI無法取代的生命共感與被理解
Thumbnail
人工智慧是什麼? 人工智慧(Artificial Intelligence, AI) 簡單來說,就是讓機器模仿人類的思考、學習和決策的能力。它就像是一個聰明的電腦程序,可以執行許多原本需要人類智慧才能完成的工作,例如: 語音辨識: 讓電腦聽懂人類的語言,像是 Siri、Google As
Thumbnail
在格友丘筆兔那看到關於AI作曲討論。 也發現一個還不錯的AI生曲的網站: 玩票性質地弄了幾首,AI作曲會稍微更改歌詞的內容,甚至連歌名都改掉,這還挺有趣的😂😂😂
Thumbnail
使用AI寫歌確實是一個新興的創作方法。 以下是使用AI寫歌的基本步驟和所需能力: 步驟: 1. 選擇AI工具:挑選適合的AI歌曲創作工具或平台。 2. 輸入初始參數:設定風格、情感、主題等基本參數。 3. 生成初稿:讓AI生成歌曲的初始版本,包括旋律和歌詞。 4. 審核和編輯:檢查AI生
Thumbnail
Suno AI(簡稱Suno)是一款生成式人工智能音樂創作程序,旨在產生結合人聲和樂器的逼真歌曲,或純粹的樂器音樂。無需深厚的音樂理論知識,只需幾個簡單的步驟,就能實現旋律創作、和弦編排和節奏設計。Suno致力於降低音樂創作的門檻,讓每個人都能享受到音樂創作的樂趣。
Thumbnail
Suno AI 是一款基於人工智能的音樂生成工具,使用深度學習技術訓練出的人工神經網絡模型,能讓任何人免費使用文字描述生成對應的音樂作品。本文介紹了Suno AI的特點、用法、影響和用途,並展望了人工智能在音樂創作中的潛在作用。
Thumbnail
這篇文章探討了人工智慧合成器在音樂、歌唱和攝影比賽中的作用,並分享瞭如何運用系統來創作、表演和拍攝。透過分析和篩選,人工智慧合成器能夠幫助藝術家和創作者取得比賽勝利。
Thumbnail
AI音樂工具 我對創作者的音樂工具了解不多,只使用過一種格友介紹的AI軟體:suno。是一款可以自動生成音樂的軟體,其生成的音樂非常豐富多變。不過,對一般使用者而言,suno可能只是用來玩玩而已,並沒有什麼實用的價值。 激發創意 suvo的真正價值在於激發創意。使用者可以通過輸入文字描述或歌詞
Thumbnail
微軟攜手音樂創作領域的人工智慧新創Suno AI,微軟把Suno AI的音樂創作技術整合到自家大熱聊天機器人Copilot中,只要在輸入框中輸入想要生成的音樂主題或風格,Copilot就能為你創作一首帶有歌詞、人聲及伴奏的音樂。
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
想像一下,你正在聆聽一首優美動人的音樂。旋律起伏跌宕,和聲豐富多彩,情感表達細膩入微。你陶醉其中,不禁讚歎作曲家的才華橫溢。然而,當有人告訴你這首曲子其實是由人工智能創作時,你的感受會有什麼變化? 近年來,AI音樂創作技術突飛猛進,已經能夠產出媲美人類作曲家水平的作品。比如說,你可以親自體驗一
Thumbnail
從蕭邦與安海瑟薇,談到AI無法取代的生命共感與被理解
Thumbnail
人工智慧是什麼? 人工智慧(Artificial Intelligence, AI) 簡單來說,就是讓機器模仿人類的思考、學習和決策的能力。它就像是一個聰明的電腦程序,可以執行許多原本需要人類智慧才能完成的工作,例如: 語音辨識: 讓電腦聽懂人類的語言,像是 Siri、Google As
Thumbnail
在格友丘筆兔那看到關於AI作曲討論。 也發現一個還不錯的AI生曲的網站: 玩票性質地弄了幾首,AI作曲會稍微更改歌詞的內容,甚至連歌名都改掉,這還挺有趣的😂😂😂
Thumbnail
使用AI寫歌確實是一個新興的創作方法。 以下是使用AI寫歌的基本步驟和所需能力: 步驟: 1. 選擇AI工具:挑選適合的AI歌曲創作工具或平台。 2. 輸入初始參數:設定風格、情感、主題等基本參數。 3. 生成初稿:讓AI生成歌曲的初始版本,包括旋律和歌詞。 4. 審核和編輯:檢查AI生
Thumbnail
Suno AI(簡稱Suno)是一款生成式人工智能音樂創作程序,旨在產生結合人聲和樂器的逼真歌曲,或純粹的樂器音樂。無需深厚的音樂理論知識,只需幾個簡單的步驟,就能實現旋律創作、和弦編排和節奏設計。Suno致力於降低音樂創作的門檻,讓每個人都能享受到音樂創作的樂趣。
Thumbnail
Suno AI 是一款基於人工智能的音樂生成工具,使用深度學習技術訓練出的人工神經網絡模型,能讓任何人免費使用文字描述生成對應的音樂作品。本文介紹了Suno AI的特點、用法、影響和用途,並展望了人工智能在音樂創作中的潛在作用。
Thumbnail
這篇文章探討了人工智慧合成器在音樂、歌唱和攝影比賽中的作用,並分享瞭如何運用系統來創作、表演和拍攝。透過分析和篩選,人工智慧合成器能夠幫助藝術家和創作者取得比賽勝利。
Thumbnail
AI音樂工具 我對創作者的音樂工具了解不多,只使用過一種格友介紹的AI軟體:suno。是一款可以自動生成音樂的軟體,其生成的音樂非常豐富多變。不過,對一般使用者而言,suno可能只是用來玩玩而已,並沒有什麼實用的價值。 激發創意 suvo的真正價值在於激發創意。使用者可以通過輸入文字描述或歌詞
Thumbnail
微軟攜手音樂創作領域的人工智慧新創Suno AI,微軟把Suno AI的音樂創作技術整合到自家大熱聊天機器人Copilot中,只要在輸入框中輸入想要生成的音樂主題或風格,Copilot就能為你創作一首帶有歌詞、人聲及伴奏的音樂。