【易科】當電子音樂與AI相撞，看沉浸聲如何編織出交響的火花

　　人工智能時代來了

　　藝術會消亡嗎？

　　當電子音樂進入人工智能的時代

　　你準備好了嗎？

　　5月29日，中(zhong)央音(yin)(yin)(yin)樂(le)(le)(le)(le)學院的(de)《面向未來：電子(zi)音(yin)(yin)(yin)樂(le)(le)(le)(le)與AI的(de)交響》音(yin)(yin)(yin)樂(le)(le)(le)(le)會(hui)在(zai)歌劇音(yin)(yin)(yin)樂(le)(le)(le)(le)廳順利開演(yan)，音(yin)(yin)(yin)樂(le)(le)(le)(le)會(hui)由俞(yu)峰校長擔(dan)任(ren)藝術總(zong)(zong)監(jian)，管曉宏(hong)院士擔(dan)任(ren)AI技術總(zong)(zong)監(jian)，音(yin)(yin)(yin)樂(le)(le)(le)(le)人工智能與音(yin)(yin)(yin)樂(le)(le)(le)(le)信息(xi)科技系主(zhu)任(ren)李小兵(bing)教(jiao)授擔(dan)任(ren)執行總(zong)(zong)監(jian)并主(zhu)持音(yin)(yin)(yin)樂(le)(le)(le)(le)會(hui)，是國內首場深度融合AIGC、3D音(yin)(yin)(yin)頻(pin)、腦科學等前沿科技的(de)音(yin)(yin)(yin)樂(le)(le)(le)(le)會(hui)。

　　易科為本次音樂會提供了全套的沉浸式擴聲系統、多媒體服務器及總控系統服務。這是一場青春無悔的實驗，也是一個驚心動魄的奇點，人類未來的藝術將站在AI巨人肩上前行!

　　《面向未(wei)來(lai)：電子音樂與AI的(de)(de)(de)(de)交響》音樂會的(de)(de)(de)(de)作品以基(ji)于(yu)“央(yang)音華為”實(shi)驗室制(zhi)定的(de)(de)(de)(de)3D音樂標準(zhun)制(zhi)式(shi)進行制(zhi)作，但現場的(de)(de)(de)(de)揚(yang)聲器布局不(bu)能滿(man)足標準(zhun)的(de)(de)(de)(de)回(hui)放要求，聽感會大打(da)折扣。另外9.1.4及立體(ti)聲等其(qi)他回(hui)放制(zhi)式(shi)也會穿插在演出(chu)中，這(zhe)就需要新的(de)(de)(de)(de)音頻技術(shu)，在非標準(zhun)回(hui)放場地實(shi)現基(ji)于(yu)聲道的(de)(de)(de)(de)標準(zhun)制(zhi)式(shi)回(hui)放效(xiao)果，借助(zhu)獨有的(de)(de)(de)(de)自適應波場合成算法，來(lai)自荷蘭的(de)(de)(de)(de)Astro Spatial Audio沉浸式(shi)系統可以完(wan)全解(jie)決上述問題。

　　在視(shi)頻(pin)的(de)需求中，除(chu)了常規的(de)4K視(shi)頻(pin)播放外，還需要(yao)對現場的(de)人機(ji)交互和其(qi)他視(shi)頻(pin)源(yuan)進(jin)行采(cai)集(ji)，以畫(hua)中畫(hua)的(de)方式(shi)播放，這就(jiu)需要(yao)多媒體服務器對采(cai)集(ji)和回(hui)放的(de)視(shi)頻(pin)進(jin)行相應的(de)結合，并且對音視(shi)頻(pin)同步播放也(ye)有相對較高的(de)要(yao)求。

　　來自(zi)法國(guo)的(de)Modulo Pi具有視(shi)頻(pin)(pin)播放、采(cai)集、拼接(jie)融合、演藝(yi)總控及(ji)追蹤互(hu)動(dong)(dong)等多種功能于一身。通(tong)過視(shi)頻(pin)(pin)采(cai)集卡，對實時播放的(de)互(hu)動(dong)(dong)系統(tong)畫(hua)面(mian)進行(xing)采(cai)集，同時利(li)用NDI網絡采(cai)集的(de)形式，對導(dao)賞PPT和自(zi)動(dong)(dong)AI作(zuo)曲(qu)軟件等畫(hua)面(mian)進行(xing)采(cai)集。利(li)用雙圖層加分辨率坐標移動(dong)(dong)的(de)原理(li)，將兩(liang)個視(shi)頻(pin)(pin)源進行(xing)疊加，實現(xian)雙視(shi)頻(pin)(pin)輸(shu)入畫(hua)中(zhong)畫(hua)的(de)播放。

　　在網絡(luo)(luo)規劃(hua)方面(mian)，借助(zhu)Modulo Pi多(duo)媒體服(fu)務器雙網卡(ka)的(de)特性，讓(rang)視(shi)頻(pin)網絡(luo)(luo)與音頻(pin)網絡(luo)(luo)及總控網絡(luo)(luo)徹底隔絕。避免了由(you)于視(shi)頻(pin)流占(zhan)用了多(duo)數帶寬導致其他(ta)網絡(luo)(luo)帶寬不(bu)夠而產生卡(ka)頓的(de)情況。

　　總控(kong)方面，視頻(pin)多服務器的控(kong)制(zhi)網絡與(yu)Dante和音頻(pin)控(kong)制(zhi)網絡相結合(he)，通過OSC控(kong)制(zhi)協議，對Qlab播放器發送(song)指令，保(bao)證了音視頻(pin)同(tong)步播放。

　　主擴系統方面，此(ci)次采用(yong)了(le)LCR的(de)系統配(pei)置(zhi)，使(shi)(shi)用(yong)了(le)3組(zu)EAW ANNA自(zi)適(shi)應揚(yang)(yang)聲(sheng)(sheng)器。其中左右(you)聲(sheng)(sheng)道(dao)(dao)為(wei)各6只ANNA落(luo)地堆疊擺放(fang)，中置(zhi)聲(sheng)(sheng)道(dao)(dao)使(shi)(shi)用(yong)一組(zu)4只ANNA吊(diao)掛在臺口上方的(de)中央。3組(zu)ANNA自(zi)適(shi)應揚(yang)(yang)聲(sheng)(sheng)器采用(yong)先進的(de)電子控向(xiang)技術，可根據使(shi)(shi)用(yong)需求靈活調(diao)整(zheng)覆(fu)(fu)蓋范圍，最終(zhong)在音樂(le)廳內實現一層觀眾區均勻的(de)聲(sheng)(sheng)場覆(fu)(fu)蓋，完美滿足沉浸(jin)聲(sheng)(sheng)系統的(de)覆(fu)(fu)蓋需求。超低系統則使(shi)(shi)用(yong)EAW SBX218 雙18寸超低音揚(yang)(yang)聲(sheng)(sheng)器，擴展系統的(de)低頻下限，適(shi)當(dang)補充音樂(le)的(de)低頻能(neng)量(liang)。

　　除此之(zhi)外，易科專(zhuan)為(wei)沉浸式系統研發的ezacoustics IMC8同軸點聲源揚聲器(qi)作為(wei)沉浸聲的左、右、后環(huan)繞各4只揚聲器(qi)，分別(bie)采用支架(jia)安裝。頂部(bu)4只的前方兩(liang)只與中(zhong)置(zhi)主擴(kuo)揚聲器(qi)一同吊掛在臺口上方，后方頂部(bu)兩(liang)只揚聲器(qi)則以一定(ding)(ding)角(jiao)度固定(ding)(ding)在劇場二樓觀(guan)眾席前側。

　　沉浸(jin)(jin)式系(xi)統的左、右、后、頂部揚聲(sheng)器均(jun)使(shi)用Powersoft X8+Dante進行驅動(dong)，每一只揚聲(sheng)器都(dou)對應X8功放的單獨通道，真(zhen)正做到在演出現(xian)場(chang)讓更多的觀眾享受7.1.4聲(sheng)道重現(xian)監(jian)聽室內(nei)沉浸(jin)(jin)式的體驗(yan)。

　　調音(yin)臺則采用Allen&Heath旗艦dLive系列(lie)S7000+DM64的組合，現場使(shi)用Qlab軟件播放節目音(yin)源(yuan)，并通過S7000后(hou)面板的Dante擴(kuo)(kuo)(kuo)展(zhan)卡將(jiang)(jiang)多軌(gui)音(yin)頻傳輸(shu)到調音(yin)臺系統(tong)，此外我們還在S7000臺面上加裝了一張Super MADI擴(kuo)(kuo)(kuo)展(zhan)卡，該擴(kuo)(kuo)(kuo)展(zhan)卡和(he)Dante擴(kuo)(kuo)(kuo)展(zhan)卡都支持128X128路的音(yin)頻信號傳輸(shu)，通過Super MADI擴(kuo)(kuo)(kuo)展(zhan)卡可以將(jiang)(jiang)調音(yin)臺內部的Direct out以及Group信號直接送(song)到沉浸式引擎進(jin)行處理。

　　演出中(zhong)(zhong)的鋼(gang)琴使用(yong)了(le)Audix話筒(tong)SCX25A進行拾音(yin)，古箏則使用(yong)了(le)SCX1。其中(zhong)(zhong)SCX25A可(ke)用(yong)于各類(lei)立體(ti)聲現(xian)(xian)場錄音(yin)，話筒(tong)外觀優(you)雅，能顯著(zhu)減少聲學反射(she)和(he)衍射(she)，呈現(xian)(xian)充滿細節感(gan)和(he)真(zhen)實感(gan)的純凈聲音(yin)。SCX1靈敏度高、精(jing)確性(xing)強，軸向聲能和(he)偏軸向聲能表現(xian)(xian)一致，并(bing)具有出色的相位一致性(xing)和(he)極(ji)弱的近講效應(ying)。是鼓、樂(le)(le)器、管弦樂(le)(le)、弦樂(le)(le)器、鋼(gang)琴、手風琴等(deng)擴聲和(he)錄制(zhi)的理(li)想選擇(ze)。

　　本場音樂會現場座無虛席，掌聲(sheng)、喝(he)彩聲(sheng)不絕于耳。音樂會以時(shi)代(dai)賦予藝術工作(zuo)者的(de)(de)(de)責(ze)任感和(he)(he)使命感，探索了電子(zi)音樂在(zai)AI時(shi)代(dai)的(de)(de)(de)發(fa)展路徑，體現出中央音樂學(xue)院(yuan)“5•23”藝術節高(gao)度的(de)(de)(de)政治性、深(shen)刻(ke)的(de)(de)(de)思想性、鮮明的(de)(de)(de)時(shi)代(dai)性和(he)(he)精湛的(de)(de)(de)藝術性。

　　系統評價

李小兵

著(zhu)名作曲家、中央音樂學院教授、博(bo)士生導師(shi)

音樂人工智能與音樂科技系系主任

　　“本場(chang)沉浸式交互音(yin)樂會(hui)的(de)(de)視聽，實現了(le)多層次相融合(he)的(de)(de)完(wan)美(mei)效果(guo)(guo)(guo)。不論是清澈且潤的(de)(de)獨奏，自(zi)然平順的(de)(de)點聲源(yuan)軌跡移動效果(guo)(guo)(guo)，還是全沉浸時聲場(chang)均勻的(de)(de)表現力與動態效果(guo)(guo)(guo)，都使人身臨其境。易科團隊專業(ye)、認(ren)真，現場(chang)的(de)(de)音(yin)響充分展示(shi)了(le)3D音(yin)樂的(de)(de)藝術魅(mei)力，震撼!”