全球首部AI交響變奏曲問世，AI技術(shù)應(yīng)用再拓邊界
郭一璞 發(fā)自 凹非寺
量子位 報(bào)道 | 公眾號(hào) QbitAI
人工智能技術(shù)，史上第一次升級(jí)到了復(fù)雜音樂的創(chuàng)作領(lǐng)域：交響曲。
全球首部AI交響變奏曲《我和我的祖國》，昨晚已由深圳交響樂團(tuán)全球首演，它的出品方是中國平安人工智能研究院。
此前，你可能了解過Google的Magenta、OpenAI的MuseNet這些音樂創(chuàng)作AI，它們主要是在有限的聲部范圍內(nèi)，模仿莫扎特、Lady Gaga這些音樂家或歌手的風(fēng)格，創(chuàng)作出簡短的音樂Demo。
但這次，平安將AI創(chuàng)作音樂的能力，從單旋律的流行樂，突破到了交響曲的范圍，原先只能寫一小段Demo旋律，這次一下子能寫7個(gè)樂章了，而且是可以直接拿來演出的成熟作品。
整部交響曲時(shí)長12分鐘，你可以聽到風(fēng)琴、小提琴等多種音色，還有主旋律、伴奏、鼓點(diǎn)節(jié)拍多個(gè)不同的聲部，整體非常豐富，一般人根本聽不出來是AI作的曲，就好像專業(yè)的人類音樂家作品一樣。
深圳交響樂團(tuán)音樂總監(jiān)兼首席指揮林大葉在音樂會(huì)演出前，激昂地表示，將為現(xiàn)場觀眾帶來一首特殊的作品作為本季音樂會(huì)的開場，該首管弦樂作品《我和我的祖國》由AI編曲創(chuàng)作，并于今日世界首演。中國平安開拓了一個(gè)完全嶄新的領(lǐng)域，開創(chuàng)了一個(gè)時(shí)代。
“過去10年甚至20年前的時(shí)候，3D動(dòng)畫剛剛進(jìn)入人們的視野，或許存在多樣缺點(diǎn)。但是經(jīng)過短暫的發(fā)展，如今3D動(dòng)畫已經(jīng)非常超前和逼真?！绷执笕~進(jìn)一步表示，由人工智能技術(shù)進(jìn)行編曲的音樂，今天也是一個(gè)起點(diǎn)。“期待未來5—10年，AI可以創(chuàng)作出傳世的交響樂作品?！?/p>
在這部交響曲面世前，平安已經(jīng)在AI音樂方面探索了兩年，早已熟悉了流行音樂的創(chuàng)作，這次選擇了交響樂這個(gè)復(fù)雜的音樂流域，也是AI在藝術(shù)創(chuàng)作方面的技術(shù)突破。
而除了音樂之外，在繪畫、作詩等各個(gè)藝術(shù)領(lǐng)域，平安的人工智能技術(shù)也有不少積累。
相比重在產(chǎn)業(yè)落地的AI公司們，平安這家金融科技公司倒是與眾不同，偏愛在人類的精神世界下功夫。
AI敘述：交響變奏曲講述中國百年近現(xiàn)代史
作為變奏曲，這部曲子是在《我和我的祖國》原本的曲調(diào)上，加以變幻演繹而創(chuàng)作的。
或許對樂章樂理不熟悉，你不太能感受到AI應(yīng)用厲害之處。
先說說內(nèi)容吧。
開頭是《我和我的祖國》旋律，以此引出從近代到我們現(xiàn)在的輝煌歷史。
第一段變奏帶我們回到了百余年前，從鴉片戰(zhàn)爭開始，中華民族進(jìn)入了一段艱難歲月，旋律變得緩慢悲愴，讓你覺得仿佛那些在壓迫下艱難謀生老百姓們就在眼前，日復(fù)一日地重復(fù)著艱苦的歲月。
不久之后，曲調(diào)變得昂揚(yáng)向上、充滿希望，仿佛星星之火燎原，被壓迫的先輩們團(tuán)結(jié)起來，謀求翻身做主人。
第二段變奏伊始，一段嗩吶聲劃破天際，音樂也變成了信天游的味道。
這里是延安的故事。一陣富有節(jié)奏感的歡快音樂，展示出男女老師齊上陣，一同勞作奮斗的景象。
之后的節(jié)奏忽然變得雄壯激昂，軍鼓點(diǎn)密集的敲響，勝利來臨了，新中國成立了。
轉(zhuǎn)入第三段變奏，是低沉的進(jìn)行曲，配合堅(jiān)韌的步伐，吹響了抗戰(zhàn)的號(hào)角。
當(dāng)一系列風(fēng)風(fēng)雨雨終于過去，改革開放的春天到來，交響曲也走入了第四段變奏。悠揚(yáng)的提琴聲如春風(fēng)拂面，多個(gè)聲部一唱一和，迸發(fā)出希望和生機(jī)。
隨后便是第五段變奏，節(jié)奏鏗鏘有力，曲調(diào)逐漸高昂，呼應(yīng)著中華民族偉大復(fù)興的腳步。
五段變奏曲，講述了中華民族的百年大國崛起歷史。之后回顧過往，當(dāng)《我和我的祖國》旋律再次響起，整部交響曲也取得了圓滿。
整體聽下來，仿佛看了一部革命史詩，讓人不由得感嘆奮斗的艱辛和成就的喜悅。如果不是音樂專家，一般人根本聽不出來這是由AI譜寫的曲子，和音樂家憑借經(jīng)驗(yàn)和專業(yè)能力創(chuàng)作的樂曲內(nèi)容相似度極高。
AI創(chuàng)作：八個(gè)維度自研模型，比生成語言更難
那么，這樣一首曲子，是怎么由AI創(chuàng)造出來的呢？
據(jù)AI交響變奏曲《我和我的祖國》曲目團(tuán)隊(duì)技術(shù)負(fù)責(zé)人介紹，AI作曲技術(shù)背后是平安首創(chuàng)的AVM自動(dòng)變奏模型，其中用到了VAE，Transformer，GPT-2等語言模型。
首先在節(jié)奏、和聲、織體、配器等方面構(gòu)建專家變奏規(guī)則庫進(jìn)行基礎(chǔ)模型的訓(xùn)練。而后采用深度學(xué)習(xí)和強(qiáng)化學(xué)習(xí)聯(lián)合方案，根據(jù)音樂創(chuàng)作理論描述規(guī)則進(jìn)行基礎(chǔ)模型訓(xùn)練，利用深度學(xué)習(xí)技術(shù)對音樂作品實(shí)現(xiàn)多維度的特征學(xué)習(xí)與提取，再結(jié)合強(qiáng)化學(xué)習(xí)技術(shù)讓機(jī)器初步掌握人類作曲的思考邏輯，學(xué)習(xí)樂曲變奏手法。
不過，雖然用到的都是語言模型，但生成音樂和生成語言還是大不相同的。
團(tuán)隊(duì)負(fù)責(zé)人說：“說話都是我一個(gè)人在說，但音樂尤其交響樂就像一群人在說，大家七嘴八舌，誰先誰后，你是什么聲域，我出什么音色，這是非常復(fù)雜的一件事?！?/p>
而且，AI創(chuàng)作交響曲，和創(chuàng)作簡單的一段旋律不同，需要考慮音樂的主題、發(fā)展手法、和聲、曲式等八個(gè)維度，技術(shù)難度更上一級(jí)。
而在數(shù)據(jù)方面，技術(shù)團(tuán)隊(duì)介紹，平安AI積累了六大數(shù)據(jù)庫，有囊括百萬首歌曲的樂曲庫，包含歌詞、詩詞、散文等各種文學(xué)作品的歌詞素材數(shù)據(jù)庫，包含各種作曲要素和元素的專家規(guī)則庫，樂器聲、人聲兩大聲源庫，以及用戶消費(fèi)行為跟蹤數(shù)據(jù)庫，用于分析用戶聽到音樂后的情緒反饋。而本首AI交響變奏曲的創(chuàng)作，運(yùn)用了其中70萬余首樂曲進(jìn)行結(jié)構(gòu)化訓(xùn)練。
有了這些做基礎(chǔ)，AI系統(tǒng)就可以按照你的需求自動(dòng)生成相應(yīng)的樂曲了。
整個(gè)生成過程的開始，需要輸入《我和我的祖國》原曲調(diào)，之后結(jié)合每個(gè)變奏部分需要表達(dá)的歷史事件，輸入相應(yīng)的情感表達(dá)需求，比如“悲憤”、“歡快”等，之后AI就可以自動(dòng)輸出可以直接聽的成品的變奏曲音樂。
由于AI生成的曲譜中有一些旋律是人類無法演奏的，比如人類的一只手無法同時(shí)按下鋼琴上離得很遠(yuǎn)的兩個(gè)按鍵，小號(hào)上有一些鍵不能同時(shí)按下，因此后期為了能夠?qū)崿F(xiàn)樂曲的實(shí)地演奏，平安人工智能研究院在創(chuàng)作的過程中，輔以部分專家規(guī)則，避免樂曲創(chuàng)作過度自由和無序。例如，融入了和聲約束、對位約束、曲式結(jié)構(gòu)約束等，讓AI作曲無限靠近原本體裁，讓樂曲具備可演奏性和傳承性。
AI探索：從AI作曲到商業(yè)化落地
其實(shí)，在AI音樂方面，平安已經(jīng)有兩年的積累，此前曾用AI創(chuàng)造流行音樂作品《青春記憶》，拿到了清華大學(xué)主辦的全球AI藝術(shù)大賽一等獎(jiǎng)；還研究過爵士樂，在瑞士聯(lián)邦理工學(xué)院舉辦的國際AI作曲大獎(jiǎng)賽上榮膺桂冠。
成績背后，是平安巨大的AI人才團(tuán)隊(duì)。
技術(shù)團(tuán)隊(duì)負(fù)責(zé)人介紹說，直接參與到交響曲創(chuàng)作的算法工程師就達(dá)到了三十多位，還有兩三百人的支持團(tuán)隊(duì)，其中大量主創(chuàng)團(tuán)隊(duì)成員既懂算法，也懂音樂。要知道，中央音樂學(xué)院的AI博士也是今年才剛剛開招，懂AI也懂音樂的人可以說少之又少，平安的人才儲(chǔ)備實(shí)屬難得。
任何競爭最后都是人才的競爭，人才的儲(chǔ)備、技術(shù)的積淀，為人工智能技術(shù)邊界在傳統(tǒng)認(rèn)知中大量應(yīng)用于產(chǎn)業(yè)制造領(lǐng)域之外，實(shí)現(xiàn)了多角度突圍，率先邁入人類意識(shí)形態(tài)領(lǐng)域，利用人工智能無形之手，實(shí)現(xiàn)精神世界的精彩紛呈。
巨大的人才團(tuán)隊(duì)，也在創(chuàng)造切實(shí)可用的商業(yè)價(jià)值。
最近，平安就將AI作曲技術(shù)應(yīng)用到了剛剛結(jié)束“平安920”金融生活消費(fèi)節(jié)的獲客層面，提供包括AI作曲在內(nèi)的各種互動(dòng)項(xiàng)目，通過趣味活動(dòng)豐富用戶的體驗(yàn)感，吸引用戶注意力，降低獲客門檻，強(qiáng)化獲客場景，從而提升核心主業(yè)的業(yè)務(wù)價(jià)值。
獲客僅僅是AI音樂輔助平安主業(yè)發(fā)展的角度之一。此外，在AI輔助音樂領(lǐng)域發(fā)展，突圍行業(yè)邊界層面未來或?qū)⒙涞赜谝魳穭?chuàng)作、音樂教育等范疇，全面打開了對于音樂這一情感語言表達(dá)方式的想象空間。
而下一步，技術(shù)團(tuán)隊(duì)介紹說，除了人類的音樂，平安還在考慮將將AI音樂延展到鯨魚、鳥類等生物音樂學(xué)方面，創(chuàng)作更豐富的成果。
而除了作曲之外，平安還將AI落地在了寫詩、繪畫等多個(gè)領(lǐng)域。比如借助“神筆小安”小程序，通過對于用戶上傳圖片的識(shí)別進(jìn)行情緒的判斷，結(jié)合背后海量的詩句數(shù)據(jù)庫，可自行生成現(xiàn)代詩和古代詩兩種符合圖片風(fēng)格的詩句。
比如這張夜晚路燈下的樹木，平安AI就賦詩一句：
“楊柳夾城東，金峰一徑通?！?/p>
AI突圍：從內(nèi)部賦能到外部輸出
需要刷新印象的，或許不止是AI最新技能的認(rèn)知。
也是時(shí)候重新認(rèn)知前沿AI技術(shù)開拓方，無論是全球科技巨頭，還是新晉的互聯(lián)網(wǎng)后期之秀，已越來越多的將觸角和目光聚焦在這一領(lǐng)域，人工智能+音樂已經(jīng)成為全球范圍內(nèi)不可逆的發(fā)展趨勢之一。
比如中國平安，是創(chuàng)辦于1988年的中國第一家股份制保險(xiǎn)公司，如今是全球金融領(lǐng)域市值最大的綜合金融服務(wù)集團(tuán)。
但傳統(tǒng)金融主業(yè)之外，此次賀新中國成立70周年專項(xiàng)打造的AI交響變奏曲，是其AI實(shí)力的冰山一角。
過去10年，平安在AI領(lǐng)域的投資可謂大手筆，不僅成立了AI研究院，而且在AI創(chuàng)新和研究方面已持續(xù)拓展也已持續(xù)拓展多年。，并且在不久前的世界人工智能大會(huì)上，中國平安被科技部授予普惠金融新一代人工智能開放創(chuàng)新平臺(tái)建設(shè)資質(zhì)，人工智能技術(shù)獲得了國家的認(rèn)可，成功晉級(jí)AI國家隊(duì)。
在底層技術(shù)研究方面，平安在語音語義、圖像識(shí)別、結(jié)構(gòu)化數(shù)據(jù)建模、知識(shí)圖譜技術(shù)上都有均有深厚積淀，目前已擁有各類科技專利累計(jì)達(dá)18050項(xiàng)，未來還將持續(xù)將營收的1%投入科技研發(fā)。
在海量數(shù)據(jù)積累層面，平安構(gòu)建了多領(lǐng)域知識(shí)圖譜，例如，金融知識(shí)圖譜層面，納合了超過9.1億的關(guān)系總數(shù)，1.21億+人物實(shí)體，2.3億+關(guān)系節(jié)點(diǎn)，還有超過3000萬的企業(yè)數(shù)據(jù)；而醫(yī)療知識(shí)圖譜包含了超過50萬的醫(yī)學(xué)術(shù)語、超過500萬的醫(yī)學(xué)關(guān)系，以及1000萬+的醫(yī)學(xué)證據(jù)。
這些豐富的技術(shù)基礎(chǔ)和資源，都為平安的業(yè)務(wù)提供了助力。
現(xiàn)在，平安已經(jīng)將AI應(yīng)用到了醫(yī)療健康、金融風(fēng)控、投資、宏觀經(jīng)濟(jì)分析等具體的業(yè)務(wù)層面。
一方面對于內(nèi)部業(yè)務(wù)推進(jìn)全方位賦能。
例如在科技賦能壽險(xiǎn)業(yè)務(wù)層面，在篩選保險(xiǎn)代理人時(shí)，起到輔助作用的AI面談官面試覆蓋率達(dá)100%，高仿真對話機(jī)器人“AskBob”對代理人咨詢的疑問解答準(zhǔn)確率高達(dá)95%，任務(wù)查詢和智能辦理功能覆蓋代理人90%常用需求。
平安產(chǎn)險(xiǎn)則運(yùn)用自主研發(fā)的AI圖片定損技術(shù)和精準(zhǔn)客戶畫像技術(shù)，針對安全駕駛行為良好的車主推出“信任賠”服務(wù)，開創(chuàng)性實(shí)現(xiàn)后臺(tái)零人工作業(yè)模式，案均賠付完成時(shí)間縮短至168秒。
平安銀行則建立了覆蓋貸前、貸中、貸后全流程的智慧風(fēng)控平臺(tái)，實(shí)現(xiàn)了智能決策、智能控制、智能預(yù)警、智慧管理、智能放款五大智能應(yīng)用。
最新數(shù)據(jù)顯示，平安銀行的AI語音客服替代率已達(dá)到80%以上，大幅提升了客服效率。
另一方面對外生態(tài)賦能輸出層面，也將AI技術(shù)全方位融入多領(lǐng)域端到端一體智能解決方案之中，依托這一形式將技術(shù)輸出給了中小銀行、中小保險(xiǎn)公司、金融機(jī)構(gòu)、醫(yī)保局和醫(yī)院等機(jī)構(gòu)，也借助智慧城市業(yè)務(wù)，為政府在優(yōu)政、興業(yè)、惠民三大領(lǐng)域提供智慧化服務(wù)。
智能營銷、智能貸款、智能風(fēng)控、智能客服、智能閃賠等海量智能解決方案受到中小金融機(jī)構(gòu)的廣泛青睞。財(cái)報(bào)數(shù)據(jù)顯示，平安旗下金融壹賬通對外賦能企業(yè)已達(dá)到3707家，其中包括615家銀行、81家保險(xiǎn)公司、3011家其他非銀金融機(jī)構(gòu)。
而在落地之外，這家金融科技公司也有拓展人類技術(shù)邊界的情懷一面，AI創(chuàng)作交響曲，正是如此。
當(dāng)然，這家綜合金融巨頭，也快速融入AI技術(shù)公司的“傳統(tǒng)”：
據(jù)技術(shù)團(tuán)隊(duì)透露，AI作曲運(yùn)用的平安首創(chuàng)AVM自動(dòng)變奏模型，將會(huì)在明年初開源。
感興趣的你，到時(shí)候也能站在前輩的肩膀上打造專屬于自己的AI交響樂曲了。
— 完 —
