不只是 AI 生成樂譜,更是與人類共創的情感表達

隨著人工智慧生成式技術的發展,相關創作應用也日漸增加,臺灣富瑜文教基金會與盧森堡 AIVA 科技公司合作,運用大量的臺灣傳統、流行以及民謠音樂資料,讓神經網路模型進行深度學習和分析,以及樂手的演奏反饋,經過六個月的模型訓練,最後生成出極具台灣特色的《臺灣AI組曲》。

藉由人類反饋,與 AI 共創屬於台灣特色的樂章

林怡君提到,此次選擇與 AIVA 合作,主要在於其擁有龐大的音樂資料庫與完整的製作團隊。由於樂團演出需要的除了音樂總譜,還需要針對不同樂器或是聲部製作配譜,而 AIVA 在這一塊,提供了十分專業的協助。

她表示,在邀請AIVA 合作前,便已經先對 AIVA 的資料庫進行了解,構思樂曲發展的可能性,以及各樂章的呈現內容,並依照古典樂曲的樂章呈現方式,提出以三個樂章為分段的想法,以及設計各個樂章重點呈現,如速度要求、主題等。林怡君補充, AIVA 在提出第一版音檔後,基金會成員們包括創辦人、董事長、執行長乃至發表會的行政人員都需要聆聽音檔,提出還有哪些地方需要調整或加入其他台灣元素;並依照音樂領域專家對音樂譜寫的建議提供修正,之後修改的版本,同樣也再校對音檔與譜的正確性。

富瑜室內樂團團員謝介豪認為,過往與真人作曲家合作時,可以針對曲子內容與作曲家進行討論或理解作曲家的實際想法,但 AI 作曲,就需要仰賴指揮的詮釋與統整。這次 AI 創作的曲子已經很貼近真人所創作的曲子,但有一些細節的表現需要調整,例如各個樂器的分配或組合,或是不同樂器會有適合演奏的音域。指揮張致遠也提到,在這次的曲子中,有些段落的表現便沒有顧及到整體演奏的和諧,這時候就會需要指揮統整實際狀況,並進行調整或修正。

林怡君認為,機器本身產出來的作品,加上基金會音樂領域專家對於音樂的要求,才是結合科技與人類智慧的作品核心。

台灣音樂的特色為何?宮商角徵羽五音為底

台灣音樂包括台灣民謠、客家山歌、原住民古調等,此次的《臺灣AI組曲》便是集結了上述音樂的特色,再交由 AI 譜寫出新的樂曲。林怡君分析。要將這些音樂結合在一起,需要分階段進行,例如台灣民謠多以宮商角徵羽五音為基底,這次的作品便是擷取出特徵,以五音為基底創作。同時,也利用前文建會主委、資深鋼琴家陳郁秀所整理的台灣音樂資料,基金會再找出相關音檔提供給 AIVA,藉以擷取出音樂特徵使用。而在音樂的配器上,則選擇以西洋的管弦樂器為主,運用天黑黑、丟丟銅仔、四季紅、月夜愁、望春風、雨夜花、牛犁歌、補破網、燒肉粽等台灣人熟悉的曲目,作為曲目資料,以便生成台灣風味的曲子。

林怡君說,考量到這首台灣 AI 組曲後續可能會搭配歌詞,因此在旋律上的每句長度也僅可能搭配演唱的長度,例如一首 3 分鐘左右的曲子,會在較能合理換氣的地方以短樂句呈現。她相信, AIVA 也藉由這個機會,學習到台灣音樂的特徵,相信將有助於該公司理解台灣的音樂特色,並提升相關曲目創作的效率。

音樂演奏的本質在於情感傳遞

林怡君認為,透過雙方創作過程的溝通,不僅展示出人工智慧與人類在音樂創作上共同協作的成熟度;另一方面,藉由人類樂團的演奏,其中包括人類指揮家對音樂的詮釋,結合專業器樂演奏家對作品的情感表現,凸顯出音樂演奏的本質,就是藉由音樂、情感的傳達,展現專業音樂家對於音樂美感的雕塑。