豆包语音团队提出“AIWhatsApp%E3%80%90+86%2015855158769%E3%80%91harrington%20cf%20hand%20chain%20hoist多人有声剧”方案,效果媲美真人配音+后期
近日,豆包多人豆包语音团队发布了“AI多人有声剧”自动化方案。语音有声音后方案支持多角色、团队提出WhatsApp%E3%80%90+86%2015855158769%E3%80%91harrington%20cf%20hand%20chain%20hoist高表现力的剧方TTS(语音合成)演播,同时实现了全自动AI后期的案效链路,从小说文本到高质量的果媲多人有声剧成品,全部由AI端到端完成。人配
?据了解,豆包多人“AI多人有声剧”自动化方案基于高自然度的语音有声音后多角色智能朗读,配合AI后期自动添加音乐、团队提出音效、剧方WhatsApp%E3%80%90+86%2015855158769%E3%80%91harrington%20cf%20hand%20chain%20hoist特效,案效?并进行智能混音,果媲能够全自动生产媲美真人水准的人配有声剧作品。这套方案不仅使得听书自然度、豆包多人沉浸感显著提升,且生产链路全程无人工参与,可大幅降低制作成本、缩短制作周期,高效覆盖更多书籍。
?

?
“AI多人有声剧”自动化方案支持从小说文本到完整成品有声剧的全自动生产。该方案可以自动进行角色划分,准确率超过98%,同时其语音大模型通过对海量文本与语音的多模态预训练,原生地将文本和语音模态融合,引入思维链信息,具备强大的文本理解能力和语音演绎能力,多人演播效果发音自然、情感丰富。
?此外,方案中的畫本預測模型在多角色演播音頻基礎上,實現了從小說文本到帶有音效、人聲特效、環境音、配樂的畫本預測,在得到畫本信息之后進行音頻召回并合成、智能動態調整音頻參數,并結合多角色TTS最終合成“有聲劇”成品。
?目前,首批通過“AI多人有聲劇”方案端到端創作的作品已經在番茄小說APP上線,效果超出預期,并得到書友良好反饋,為聽書行業注入全新活力。未來,“AI多人有聲劇”方案仍將不斷升級,覆蓋更多有聲內容,小說更新即可讓用戶同步享受精品有聲劇。
?