AI再現(xiàn)姚貝娜《金沙》名場面，如何看待這場“重逢”？

每經(jīng)記者｜石普寧    每經(jīng)編輯｜唐元    

“撥開塵污和泥土，我會讓她復(fù)活”……

在成都城市音樂廳上演的“致敬音樂劇《金沙》20年音樂劇場”中，當(dāng)男主角“沙”的扮演者沙寶亮唱起劇中經(jīng)典的《總有一天》，舞臺大屏幕上出現(xiàn)了一位身著劇中服飾的“女主角”——“金”的形象，與他對望、合唱。那是姚貝娜，通過AI數(shù)字人的形態(tài)，實現(xiàn)了一次特殊的“回歸”。

20年前，《金沙》作為中國首部大型原創(chuàng)音樂劇問世，當(dāng)時還是學(xué)生的姚貝娜被相中，隨之成為女主角“金”的首位扮演者。她的故事，與《金沙》緊密相連。

這次由AI技術(shù)支持的舞臺“重逢”，在引發(fā)觀眾復(fù)雜情感的同時，也將項目本身置于“AI復(fù)活”這一話題討論中。

這類應(yīng)用的背后，涉及怎樣的技術(shù)過程與倫理考量？通過“揭秘”由行者AI提供技術(shù)支持的“成都樣本”，或可一窺該領(lǐng)域當(dāng)前的技術(shù)現(xiàn)實與待解難題。

合唱背后的技術(shù)路徑拆解

實現(xiàn)一場舞臺級的數(shù)字表演，并非簡單依靠自動化程序。行者AI聯(lián)合創(chuàng)始人、技術(shù)副總裁江天宇在接受《每日經(jīng)濟新聞》記者采訪時，還原了這次合作中聲音與視覺部分的技術(shù)實現(xiàn)路徑。

先看聲音的還原。其首要面對的，是數(shù)據(jù)源的難題。

江天宇表示，團隊很難獲得姚貝娜純凈的干聲（即無伴奏人聲），“例如她演唱時的聲音，其實是混了各種各樣的環(huán)境音。”因此，團隊需要先通過技術(shù)手段，從現(xiàn)有的混合音源中“還原出一個她的干聲”，再用AI模型去生成最終的聲音。這并非簡單的聲音克隆，而是要讓AI能夠在舞臺上與真人“合唱”，且須遵循特定的旋律和節(jié)拍。

圖片來源：演出視頻截圖

江天宇表示，此次采用的技術(shù)路徑是為AI模型輸入“曲譜”，讓其能夠依據(jù)旋律進行演唱，“歌唱會比平常說話更難，因為它需要模擬包含換氣、音色起伏在內(nèi)的更多細節(jié)，這要求AI模型對音樂元素有更深度的處理能力。”

在視覺形象的構(gòu)建上，團隊面臨的是如何在大屏幕上呈現(xiàn)一個既真實又能被觀眾接受的形象。

一個業(yè)內(nèi)普遍存在的難點是數(shù)字人形象的逼真度問題，“如果你做得七八十分‘像’，那是最麻煩的，觀眾會產(chǎn)生所謂的‘恐怖谷效應(yīng)’。”

據(jù)江天宇介紹，為達到舞臺呈現(xiàn)所需的可信度，團隊首先利用AI技術(shù)對姚貝娜出演《金沙》時期的老舊照片進行高分辨率提升，再結(jié)合當(dāng)年她佩戴過的頭冠實物等素材，由人工進行精細化的三維建模，盡可能還原其當(dāng)年的舞臺形象和神態(tài)。

姚貝娜AI數(shù)字人 圖片來源：每經(jīng)記者 石普寧 攝

從接手到最終呈現(xiàn)，江天宇和團隊耗時約三個月。他坦言，在解決了聲音和視覺的基礎(chǔ)技術(shù)問題后，一個綜合性的挑戰(zhàn)隨之而來：如何讓一個AI“演員”真正融入一場高規(guī)格的現(xiàn)場音樂會？

他舉例說，此前團隊自評能做到80分的技術(shù)效果，但在合作的專業(yè)聲樂老師看來，“就只有60分”。而正是這種來自藝術(shù)領(lǐng)域的專業(yè)反饋，驅(qū)動團隊在專家指導(dǎo)下，對AI的換氣、情感注入等表演細節(jié)進行了更為精細的調(diào)校和打磨。

最終，這個被精細調(diào)校的數(shù)字表演，與沙寶亮的現(xiàn)場演唱、交響樂團的伴奏實現(xiàn)同步，完成了在技術(shù)穩(wěn)定性和藝術(shù)融合度上的一次綜合考驗。

數(shù)字記憶的倫理邊界 

記者注意到，當(dāng)前AI“復(fù)活”類技術(shù)大體落地呈現(xiàn)出兩條路徑。一是面向特定機構(gòu)和項目的高規(guī)格、定制化數(shù)字內(nèi)容創(chuàng)作。二是面向個人用戶（C端）的情感慰藉類服務(wù)。

不過，據(jù)公開報道，C端服務(wù)也引發(fā)了部分擔(dān)憂。有業(yè)內(nèi)人士指出，一來其涉及復(fù)雜的倫理悖論和法律風(fēng)險，二來技術(shù)對人性復(fù)雜性的簡化處理，也可能導(dǎo)致數(shù)字形象喪失真實意義。這些現(xiàn)象都顯示出，該領(lǐng)域的技術(shù)探索正與復(fù)雜的倫理規(guī)范問題并行。

面對這些復(fù)雜的背景，江天宇在采訪中談到，團隊在處理《金沙》這一項目時，從授權(quán)獲取到內(nèi)容使用，都有明確的邊界。此外，雙方也確定了生成內(nèi)容的使用范圍。“僅限于此次音樂劇使用，而不會用作其他項目，”江天宇表示，未來也不會主動進行二次開發(fā)。

圖片來源：成都交響樂團

將視線放至行業(yè)層面，該領(lǐng)域依然存在諸多待解的議題。

正如英國劍橋大學(xué)研究員Katarzyna Nowaczyk-Basinska在媒體采訪時指出，AI“復(fù)活”仍是一場“巨大的技術(shù)文化實驗”，其長短期心理影響尚不可知。

技術(shù)的進步與公眾的情感接受度之間也存在張力，如此次演出中，部分觀眾“寧愿看錄像也不愿看AI”的觀點，就反映出公眾對“原真性記憶”的堅守與技術(shù)“再創(chuàng)造”之間的潛在矛盾。

歸根結(jié)底，當(dāng)技術(shù)開始介入承載著復(fù)雜情感的個人記憶時，它所開啟的對話才剛剛開始。如何讓技術(shù)發(fā)展與社會倫理、公眾情感更好地協(xié)同，是整個行業(yè)需要持續(xù)面對和探索的課題。