這是一個關(guān)于人工智能如何成為出色音頻故事創(chuàng)作者的精彩研究。當(dāng)我們看電影或聽播客時，那些讓人身臨其境的音效和背景音樂往往讓我們忽略了它們的存在，但正是這些聲音元素讓故事變得栩栩如生。現(xiàn)在，一項由騰訊ARC實驗室的王騰博士領(lǐng)導(dǎo)的研究團(tuán)隊開發(fā)的全新AI系統(tǒng)AudioStory，正在改變我們對AI音頻創(chuàng)作能力的認(rèn)知。這項發(fā)表于2025年8月的研究成果，首次實現(xiàn)了讓AI根據(jù)復(fù)雜指令創(chuàng)作完整長篇音頻故事的能力。有興趣深入了解的讀者可以通過https://github.com/TencentARC/AudioStory訪問項目頁面，或查閱完整論文獲取更多技術(shù)細(xì)節(jié)。

要理解這項研究的革命性意義，我們需要先回到一個基本問題：為什么讓AI創(chuàng)作長篇音頻故事如此困難？如果把傳統(tǒng)的AI音頻生成比作一個只會做單道菜的廚師，那么AudioStory就像是一位能夠根據(jù)客人的復(fù)雜要求，精心設(shè)計并制作出一整套豐盛宴席的頂級廚師長。

傳統(tǒng)的AI音頻生成系統(tǒng)就像那個只會做單道菜的廚師，它們雖然能夠根據(jù)簡單描述制作出不錯的音頻片段，比如"雨聲"或"鳥鳴"，但當(dāng)你要求它們創(chuàng)作一個完整的音頻故事時，問題就來了。假設(shè)你想要一個"湯姆追逐杰瑞的完整場景音效"，包含杰瑞逃到老鼠洞、湯姆等待、杰瑞從電源插座巧妙出現(xiàn)等多個連續(xù)情節(jié)，傳統(tǒng)系統(tǒng)往往會產(chǎn)出一堆毫無關(guān)聯(lián)的音頻片段，就像把炒菜、湯品、甜點(diǎn)胡亂混在一起一樣，完全不成體系。

這個問題的根本原因在于兩個核心挑戰(zhàn)。第一個挑戰(zhàn)是"時間連貫性"——就像制作一桌宴席需要確保每道菜的口味能夠相互呼應(yīng)一樣，長篇音頻故事需要保持整體的音調(diào)、情感和主題一致性。第二個挑戰(zhàn)是"敘事推理能力"——這要求AI能夠像經(jīng)驗豐富的導(dǎo)演一樣，將復(fù)雜的故事指令分解成邏輯清晰的場景序列，每個場景都有合適的時長、情感基調(diào)和聲音元素。

AudioStory研究團(tuán)隊的解決方案可以比作培養(yǎng)了一位既懂劇本分析又精通音響制作的全能型音頻創(chuàng)作大師。這位"大師"的工作流程分為幾個巧妙設(shè)計的步驟：首先，它會像優(yōu)秀的編劇一樣仔細(xì)分析你給出的故事指令，理解其中包含的情節(jié)發(fā)展和情感脈絡(luò)；然后，它會制定詳細(xì)的創(chuàng)作計劃，確定需要多少個場景，每個場景持續(xù)多長時間，以及各場景之間如何自然過渡；最后，它會像專業(yè)配音師那樣，逐個場景地創(chuàng)作音頻內(nèi)容，確保每個部分既獨(dú)立成章又與整體故事完美融合。

一、大語言模型與音頻生成系統(tǒng)的巧妙聯(lián)姻

AudioStory的核心創(chuàng)新在于將兩種看似不同的AI技術(shù)進(jìn)行了天衣無縫的結(jié)合。如果把這個過程比作電影制作，那么大語言模型就像是負(fù)責(zé)劇本創(chuàng)作和導(dǎo)演工作的創(chuàng)意大腦，而音頻生成系統(tǒng)則像是負(fù)責(zé)具體拍攝和后期制作的技術(shù)團(tuán)隊。

在傳統(tǒng)方法中，這兩個部分往往是分離工作的，就像導(dǎo)演和攝影師各自為政，結(jié)果往往是理想與現(xiàn)實的巨大差距。AudioStory的突破在于讓這兩個系統(tǒng)能夠密切協(xié)作，形成一個統(tǒng)一的創(chuàng)作流程。

具體來說，當(dāng)你給AudioStory一個復(fù)雜指令，比如"創(chuàng)作一個湯姆和杰瑞風(fēng)格的音頻場景，包含湯姆困住杰瑞、杰瑞逃到老鼠洞、湯姆等待、杰瑞從電源插座出現(xiàn)的完整過程，總時長31.6秒"，系統(tǒng)首先會啟動它的"創(chuàng)意大腦"部分。

這個創(chuàng)意大腦會像經(jīng)驗豐富的動畫導(dǎo)演一樣，開始分析和規(guī)劃整個場景。它會思考：這個場景應(yīng)該分為幾個主要段落？每個段落的情感基調(diào)是什么？湯姆應(yīng)該表現(xiàn)出什么樣的情緒變化？杰瑞的行為邏輯是什么？各個音效如何配合營造緊張和幽默的氛圍？

通過這種深度分析，創(chuàng)意大腦會產(chǎn)生一個詳細(xì)的創(chuàng)作方案。比如，它可能會將整個場景分解為：第一段（0-1.1秒）湯姆發(fā)出威脅性的笑聲，營造緊張氛圍；第二段（1.1-10.8秒）杰瑞慌忙逃竄到老鼠洞的快節(jié)奏音效；第三段（10.8-22.1秒）湯姆耐心等待的音效，音樂節(jié)奏放緩；第四段（22.1-31.6秒）杰瑞從意想不到的地方出現(xiàn)，音效輕快而機(jī)智。

接下來，系統(tǒng)會將這個創(chuàng)作方案轉(zhuǎn)化為音頻生成系統(tǒng)能夠理解的"制作指令"。這個過程就像將導(dǎo)演的創(chuàng)意構(gòu)想轉(zhuǎn)化為具體的拍攝腳本一樣。每個場景都會獲得詳細(xì)的音頻描述、時長要求和情感指標(biāo)。

二、解耦橋接機(jī)制：語義與聲學(xué)細(xì)節(jié)的雙重把控

AudioStory的另一個重要創(chuàng)新是它獨(dú)特的"解耦橋接機(jī)制"。要理解這個概念，我們可以把音頻創(chuàng)作比作繪畫過程，其中既需要把握整體構(gòu)圖和色彩搭配（語義層面），也需要處理筆觸細(xì)節(jié)和材質(zhì)表現(xiàn)（聲學(xué)層面）。

在傳統(tǒng)的AI音頻生成中，系統(tǒng)往往只能處理其中一個層面，就像只會畫輪廓但不會上色，或者只會涂色但不懂構(gòu)圖。AudioStory通過巧妙的設(shè)計，讓系統(tǒng)能夠同時掌控這兩個層面。

具體來說，系統(tǒng)會為每個音頻場景生成兩種不同類型的"指導(dǎo)信息"。第一種叫做"語義標(biāo)記"，就像是給畫家的總體創(chuàng)作指導(dǎo)，告訴系統(tǒng)這個場景應(yīng)該表達(dá)什么情感、包含哪些主要元素、整體氛圍如何把握。比如，對于湯姆等待杰瑞的場景，語義標(biāo)記會指出這是一個"緊張而耐心的等待時刻，音樂應(yīng)該營造懸疑氛圍"。

第二種叫做"殘差標(biāo)記"，就像是給畫家的具體技法指導(dǎo)，涵蓋音色變化、節(jié)奏細(xì)節(jié)、音量起伏等精微之處。它會告訴系統(tǒng)具體如何表現(xiàn)湯姆腳步聲的材質(zhì)感，杰瑞移動時的速度變化，背景音樂的樂器搭配等等。

這種雙重指導(dǎo)機(jī)制的妙處在于，它讓系統(tǒng)既不會丟失故事的整體脈絡(luò)，也不會忽視讓音頻生動逼真的細(xì)節(jié)元素。就像一位既懂得故事講述又精通技術(shù)執(zhí)行的全能創(chuàng)作者。

更重要的是，AudioStory通過端到端的訓(xùn)練方式，讓這兩個指導(dǎo)系統(tǒng)能夠在創(chuàng)作過程中相互學(xué)習(xí)和調(diào)整。這就像讓導(dǎo)演和技術(shù)團(tuán)隊在長期合作中形成默契，最終達(dá)到珠聯(lián)璧合的效果。

三、漸進(jìn)式訓(xùn)練策略：從學(xué)步到跑步的成長過程

AudioStory的訓(xùn)練過程就像培養(yǎng)一位音頻創(chuàng)作新手逐漸成長為大師的過程。研究團(tuán)隊設(shè)計了一個三階段的漸進(jìn)式學(xué)習(xí)計劃，讓系統(tǒng)從最基礎(chǔ)的技能開始，逐步掌握越來越復(fù)雜的創(chuàng)作能力。

第一階段可以比作"學(xué)會走路"的過程。在這個階段，系統(tǒng)專注于掌握單個音頻片段的創(chuàng)作技能。就像學(xué)畫畫的人首先要學(xué)會畫好一個蘋果一樣，AudioStory需要先學(xué)會根據(jù)簡單描述創(chuàng)作出高質(zhì)量的短音頻。這個階段分為兩個小步驟：首先是"熱身訓(xùn)練"，系統(tǒng)學(xué)習(xí)如何根據(jù)文字描述產(chǎn)生合適的音頻創(chuàng)作指導(dǎo)信息；然后是"全面訓(xùn)練"，系統(tǒng)學(xué)習(xí)如何將這些指導(dǎo)信息轉(zhuǎn)化為具體的音頻內(nèi)容。

第二階段像是"學(xué)會跑步"的過程。系統(tǒng)在保持單音頻創(chuàng)作能力的基礎(chǔ)上，開始學(xué)習(xí)理解和分析音頻內(nèi)容的能力。這就像讓一個會畫畫的人同時學(xué)會欣賞和評價藝術(shù)作品一樣。通過這種雙向能力的培養(yǎng)，系統(tǒng)對音頻創(chuàng)作的理解變得更加深入和全面。

第三階段是"學(xué)會馬拉松"的過程，也就是掌握長篇音頻故事創(chuàng)作的終極技能。在這個階段，系統(tǒng)學(xué)會了前面提到的復(fù)雜敘事推理能力，能夠?qū)?fù)雜指令分解為連續(xù)的音頻場景，并確保各場景之間的邏輯關(guān)系和情感連貫性。

這種漸進(jìn)式學(xué)習(xí)的好處在于，每個階段的能力都為下一階段奠定了堅實基礎(chǔ)。就像建房子需要先打好地基一樣，AudioStory通過這種方式確保了最終系統(tǒng)的穩(wěn)定性和可靠性。

四、AudioStory-10K基準(zhǔn)測試：建立評價標(biāo)準(zhǔn)

為了客觀評價AudioStory的能力并為后續(xù)研究提供標(biāo)準(zhǔn)，研究團(tuán)隊創(chuàng)建了一個名為AudioStory-10K的大規(guī)模測試數(shù)據(jù)集。這就像為考核廚師技藝建立了一套包含一萬道不同難度菜品的綜合考試題庫。

這個數(shù)據(jù)集的構(gòu)建過程本身就是一項巨大工程。研究團(tuán)隊從兩個主要來源收集了素材：一部分來自真實世界的環(huán)境錄音，包含雨聲、動物叫聲、人類活動等自然聲音場景；另一部分來自湯姆和杰瑞動畫片的157集內(nèi)容，涵蓋了豐富的卡通音效和背景音樂。

更令人印象深刻的是，團(tuán)隊為每個音頻場景都進(jìn)行了詳細(xì)標(biāo)注。這個過程就像為每道考試題目編寫標(biāo)準(zhǔn)答案和評分細(xì)則一樣精細(xì)。每個音頻場景都被分解為若干個關(guān)鍵事件，每個事件都有準(zhǔn)確的時間標(biāo)記、詳細(xì)的內(nèi)容描述，以及相應(yīng)的視覺場景說明。

基于這些詳細(xì)標(biāo)注，團(tuán)隊又設(shè)計了多樣化的創(chuàng)作指令格式。有些指令只包含文字描述，要求系統(tǒng)從零開始創(chuàng)作；有些指令包含音頻和文字，要求系統(tǒng)進(jìn)行音頻續(xù)寫；還有些指令包含視頻和文字，要求系統(tǒng)為視頻配音。這種多樣性確保了測試的全面性和挑戰(zhàn)性。

在評價標(biāo)準(zhǔn)方面，團(tuán)隊建立了一套包含三個維度的綜合評價體系。第一個維度是"指令跟隨能力"，評估系統(tǒng)是否準(zhǔn)確理解并執(zhí)行了用戶的創(chuàng)作要求；第二個維度是"一致性表現(xiàn)"，評估生成的音頻在音色、風(fēng)格和情感方面是否保持連貫；第三個維度是"生成質(zhì)量"，評估音頻的整體品質(zhì)和真實感。

五、實驗結(jié)果：超越傳統(tǒng)方法的顯著進(jìn)步

通過在AudioStory-10K基準(zhǔn)測試上的全面評估，AudioStory展現(xiàn)出了遠(yuǎn)超傳統(tǒng)方法的卓越性能。這種性能提升可以用一個生動的比喻來理解：如果傳統(tǒng)方法像是會幾句外語的游客，那么AudioStory就像是在當(dāng)?shù)厣疃嗄甑谋镜厝?，對語言的掌握已經(jīng)達(dá)到了自然流暢的程度。

在指令跟隨能力方面，AudioStory的表現(xiàn)尤為出色。當(dāng)給定復(fù)雜的創(chuàng)作指令時，傳統(tǒng)系統(tǒng)往往會遺漏重要細(xì)節(jié)或產(chǎn)生與指令不符的內(nèi)容，就像聽錯了菜譜導(dǎo)致做出完全不同的菜品。相比之下，AudioStory能夠準(zhǔn)確理解指令中的每個要素，并在最終作品中完整體現(xiàn)，就像經(jīng)驗豐富的廚師能夠根據(jù)客人的復(fù)雜要求制作出完全符合期望的菜品。

在音頻質(zhì)量方面，AudioStory生成的音頻在真實感和豐富度上都有顯著提升。傳統(tǒng)方法生成的音頻往往聽起來比較"塑料感"，缺乏真實世界聲音的細(xì)膩?zhàn)兓?。AudioStory則能夠產(chǎn)生更加自然和富有層次的音效，就像從罐頭食品升級到了新鮮烹制的美食。

最令人印象深刻的是AudioStory在長篇創(chuàng)作方面的表現(xiàn)。傳統(tǒng)系統(tǒng)在處理長音頻時往往會出現(xiàn)前后不一致的問題，就像一個健忘的故事講述者，前面說的情節(jié)到后面就忘記了。AudioStory則能夠在整個創(chuàng)作過程中保持故事邏輯的清晰和情感基調(diào)的一致，生成的音頻聽起來像是由同一位專業(yè)創(chuàng)作者完成的完整作品。

特別值得注意的是，AudioStory在處理不同類型音頻內(nèi)容時都表現(xiàn)出了良好的適應(yīng)性。無論是自然環(huán)境聲音還是卡通音效，無論是嚴(yán)肅的紀(jì)錄片配音還是輕松的動畫背景音樂，系統(tǒng)都能夠生成相應(yīng)風(fēng)格和質(zhì)量的作品。這種通用性使得AudioStory具有了廣泛的應(yīng)用潛力。

六、深入分析：關(guān)鍵技術(shù)組件的重要作用

為了更好地理解AudioStory成功的原因，研究團(tuán)隊進(jìn)行了詳細(xì)的技術(shù)分析，就像拆解一臺精密機(jī)器來研究每個零件的作用一樣。這些分析揭示了幾個關(guān)鍵發(fā)現(xiàn)。

首先，交錯式推理生成機(jī)制被證明是系統(tǒng)成功的關(guān)鍵因素。當(dāng)研究團(tuán)隊移除這個機(jī)制時，系統(tǒng)的表現(xiàn)急劇下降，生成的音頻變得支離破碎，缺乏邏輯連貫性。這就像移除了交響樂指揮，雖然每個樂器還能發(fā)聲，但整體演出變得混亂無序。

其次，雙重橋接機(jī)制（語義標(biāo)記和殘差標(biāo)記）的重要性也得到了驗證。研究發(fā)現(xiàn)，僅使用其中一種標(biāo)記的系統(tǒng)性能都會顯著下降。語義標(biāo)記負(fù)責(zé)把握整體方向，殘差標(biāo)記負(fù)責(zé)細(xì)節(jié)完善，兩者缺一不可，就像汽車需要同時有方向盤和發(fā)動機(jī)才能正常行駛。

漸進(jìn)式訓(xùn)練策略的效果同樣顯著。當(dāng)研究團(tuán)隊嘗試跳過某些訓(xùn)練階段直接進(jìn)行高級訓(xùn)練時，系統(tǒng)的學(xué)習(xí)效果大打折扣。這證明了"循序漸進(jìn)"在AI學(xué)習(xí)中的重要性，就像學(xué)習(xí)樂器需要從基礎(chǔ)練習(xí)開始，不能一開始就演奏復(fù)雜樂曲。

另一個有趣的發(fā)現(xiàn)是，生成任務(wù)和理解任務(wù)的聯(lián)合訓(xùn)練產(chǎn)生了意想不到的協(xié)同效應(yīng)。單獨(dú)訓(xùn)練這兩種能力時，系統(tǒng)的整體表現(xiàn)反而不如聯(lián)合訓(xùn)練。這就像學(xué)習(xí)一門外語時，聽說讀寫能力相互促進(jìn)，綜合訓(xùn)練比單項訓(xùn)練更有效。

七、人工評價驗證：真實用戶的使用感受

除了客觀的技術(shù)指標(biāo)，研究團(tuán)隊還進(jìn)行了大規(guī)模的人工評價實驗，邀請30名測試者對不同系統(tǒng)生成的音頻進(jìn)行主觀評分。這就像舉辦一場盲品比賽，讓普通消費(fèi)者在不知道品牌的情況下品嘗不同廚師制作的菜品。

測試結(jié)果顯示，AudioStory在所有評價維度上都獲得了最高分?jǐn)?shù)。在指令跟隨方面，測試者普遍認(rèn)為AudioStory生成的音頻最準(zhǔn)確地體現(xiàn)了原始指令的要求。在一致性方面，測試者感受到AudioStory創(chuàng)作的長篇音頻具有更好的整體統(tǒng)一感，不像其他系統(tǒng)那樣聽起來像是幾段不相關(guān)音頻的簡單拼接。

在音頻質(zhì)量方面，測試者對AudioStory的評價同樣很高，認(rèn)為其生成的音效更加自然和富有表現(xiàn)力。許多測試者表示，AudioStory生成的湯姆和杰瑞風(fēng)格音效讓他們想起了童年觀看動畫片的快樂時光，這說明系統(tǒng)確實掌握了這類音效的精髓。

特別有意思的是，研究團(tuán)隊還驗證了人工評價與AI評價之間的一致性。結(jié)果顯示，兩種評價方式的相關(guān)性很高，這證明了研究團(tuán)隊設(shè)計的自動化評價指標(biāo)的有效性。這就像驗證了機(jī)器品酒師與人類品酒師的判斷基本一致，為未來的自動化評價奠定了基礎(chǔ)。

八、擴(kuò)展應(yīng)用：從實驗室走向?qū)嶋H應(yīng)用

AudioStory的價值不僅體現(xiàn)在技術(shù)突破上，更重要的是它展現(xiàn)出的廣闊應(yīng)用前景。研究團(tuán)隊展示了系統(tǒng)在幾個實際應(yīng)用場景中的表現(xiàn)，就像展示一把瑞士軍刀的多種功能。

第一個應(yīng)用是視頻配音。給定一段無聲視頻，AudioStory能夠分析視頻內(nèi)容，理解其中的動作序列和情感變化，然后創(chuàng)作出與視頻內(nèi)容完美匹配的音效和背景音樂。研究團(tuán)隊用史努比動畫片段進(jìn)行了測試，結(jié)果顯示系統(tǒng)生成的配音不僅在時間上精確同步，在風(fēng)格上也很好地模擬了湯姆和杰瑞的音效特色。

第二個應(yīng)用是音頻續(xù)寫。給定一段音頻的開頭部分和續(xù)寫指令，AudioStory能夠創(chuàng)作出邏輯連貫的后續(xù)內(nèi)容。比如，給系統(tǒng)一段籃球教練講解的音頻開頭，它能夠生成包含球鞋摩擦聲、籃球彈跳聲和教練繼續(xù)指導(dǎo)聲音的完整后續(xù)內(nèi)容。

這些應(yīng)用展示表明，AudioStory已經(jīng)具備了在多個實際場景中發(fā)揮作用的潛力。無論是為短視頻創(chuàng)作者提供配音服務(wù)，還是為播客制作者生成背景音效，或是為游戲開發(fā)者創(chuàng)作動態(tài)音景，這項技術(shù)都有著巨大的應(yīng)用價值。

九、技術(shù)局限與未來展望

盡管AudioStory取得了顯著進(jìn)展，但研究團(tuán)隊也坦誠地指出了當(dāng)前技術(shù)的一些局限性，就像一位優(yōu)秀的廚師會告訴你他的招牌菜還有哪些可以改進(jìn)的地方。

首先，系統(tǒng)目前主要擅長處理相對簡單的音頻場景，對于極其復(fù)雜的多聲源混合場景，處理能力還有提升空間。就像一位鋼琴家雖然能夠演奏復(fù)雜樂曲，但同時指揮交響樂團(tuán)可能還需要更多練習(xí)。

其次，系統(tǒng)生成的音頻在某些細(xì)節(jié)表現(xiàn)上還不夠完美。雖然整體質(zhì)量已經(jīng)很高，但在一些特定的音色細(xì)節(jié)和空間感表現(xiàn)上，與專業(yè)音頻制作的標(biāo)準(zhǔn)還有差距。這就像一位業(yè)余畫家的作品已經(jīng)很不錯，但與專業(yè)畫家相比還有精進(jìn)的空間。

研究團(tuán)隊對未來的改進(jìn)方向也有清晰的規(guī)劃。他們計劃引入更多樣化的音頻生成器來處理不同類型的聲音元素，這樣可以更好地處理聲音重疊的復(fù)雜場景。同時，他們也在探索將文字生成和音頻生成在同一個AI模型中統(tǒng)一實現(xiàn)，這將進(jìn)一步提高系統(tǒng)的整體協(xié)調(diào)性。

另一個重要的發(fā)展方向是深入研究音頻生成與音頻理解之間的協(xié)同關(guān)系。研究團(tuán)隊發(fā)現(xiàn)這兩種能力相互促進(jìn)，未來可能會在這個方向上取得更大突破，就像發(fā)現(xiàn)了學(xué)習(xí)的新規(guī)律一樣令人興奮。

說到底，AudioStory代表了AI音頻創(chuàng)作領(lǐng)域的一個重要里程碑。它不僅展示了當(dāng)前技術(shù)的巨大潛力，更為我們描繪了一個充滿想象力的未來圖景：在不久的將來，也許每個人都能擁有一位專業(yè)的AI音頻創(chuàng)作助手，幫助我們將創(chuàng)意轉(zhuǎn)化為動聽的音頻作品。

歸根結(jié)底，這項研究的價值不僅在于技術(shù)本身，更在于它讓我們看到了AI技術(shù)如何能夠增強(qiáng)人類的創(chuàng)造力，而不是簡單地替代人類。就像一把好的樂器能夠幫助音樂家更好地表達(dá)情感一樣，AudioStory這樣的工具可能會幫助更多人成為優(yōu)秀的音頻故事創(chuàng)作者。無論你是想為自己的短視頻添加專業(yè)配音，還是想創(chuàng)作一部音頻小說，或是想為孩子制作個性化的睡前故事，這樣的AI助手都可能在未來成為你創(chuàng)作路上的得力伙伴。有興趣了解更多技術(shù)細(xì)節(jié)的讀者，可以訪問團(tuán)隊的開源項目頁面或查閱完整論文，相信會有更多有趣的發(fā)現(xiàn)等著你。

Q&A

Q1：AudioStory和現(xiàn)在的AI音頻生成工具有什么不同？

A：現(xiàn)有的AI音頻生成工具只能根據(jù)簡單描述制作短音頻片段，就像只會做單道菜的廚師。而AudioStory能夠理解復(fù)雜故事指令，創(chuàng)作完整的長篇音頻故事，包含多個相互關(guān)聯(lián)的場景，保持整體的邏輯連貫性和情感一致性，就像能設(shè)計制作整套宴席的頂級廚師長。

Q2：普通人可以使用AudioStory來創(chuàng)作音頻內(nèi)容嗎？

A：目前AudioStory還處于研究階段，騰訊ARC實驗室團(tuán)隊已在GitHub上開源了相關(guān)代碼和模型。雖然現(xiàn)在還不是面向消費(fèi)者的產(chǎn)品，但這項技術(shù)展現(xiàn)出了巨大的應(yīng)用潛力，未來可能會被集成到各種音頻創(chuàng)作工具中，幫助短視頻創(chuàng)作者、播客制作者和游戲開發(fā)者等進(jìn)行專業(yè)音頻制作。

Q3：AudioStory在創(chuàng)作音頻故事時能達(dá)到什么樣的質(zhì)量水平？

A：根據(jù)測試結(jié)果，AudioStory生成的音頻在真實感、情感表達(dá)和邏輯連貫性方面都顯著超越了傳統(tǒng)方法。在人工評價中，測試者普遍認(rèn)為其創(chuàng)作的湯姆和杰瑞風(fēng)格音效能夠喚起童年觀看動畫片的回憶，說明系統(tǒng)確實掌握了這類音效的精髓。不過目前在某些細(xì)節(jié)表現(xiàn)上還有改進(jìn)空間。