設(shè)置
  • 日夜間
    隨系統(tǒng)
    淺色
    深色
  • 主題色

微軟推出語音合成模型 NaturalSpeech2:語音重構(gòu)“更準(zhǔn)確”,不會“棒讀”

2023/7/27 16:46:23 來源:IT之家 作者:漾仔(實習(xí)) 責(zé)編:汪淼

IT之家 7 月 27 日消息,微軟日前推出了一款名為 NaturalSpeech2 的語音模型,該模型采用“潛在擴散”式設(shè)計,在零樣本語音合成層面效果出,微軟宣稱該模型提供了“商業(yè)級”的語音 / 歌唱解決方案,能夠給予用戶高質(zhì)量、多樣化的語音合成體驗。

微軟對 NaturalSpeech2 進行了一系列演示,展示了其在零樣本情況下生成具有不同說話人身份、韻律和風(fēng)格(如唱歌)的語音的能力。

▲ 圖源 NaturalSpeech 2 論文

據(jù)悉,與傳統(tǒng)的語音轉(zhuǎn)文字(TTS)系統(tǒng)不同,微軟的 NaturalSpeech2 使用“連續(xù)向量”取代“離散標(biāo)記”來表示語音,從而生成更完整的語音片段,不會產(chǎn)生“缺乏感情”的“棒讀(一字一頓地講話)”現(xiàn)象。

▲ 圖源 NaturalSpeech 2 論文

實驗結(jié)果表明,NaturalSpeech2 在零樣本條件下生成的語音與語音提示和真實語音的韻律近乎一致,并且在 LibriTTS 和 VCTK 測試集上的自然度(以 CMOS 為度量)與真人語音難以區(qū)分。

該項目的論文目前已經(jīng)發(fā)布于 GitHub 中,感興趣的IT之家小伙伴們可以點此訪問。

廣告聲明:文內(nèi)含有的對外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。

相關(guān)文章

關(guān)鍵詞:微軟 AI,NatualSpeech2
  • 日榜
  • 周榜
  • 月榜

軟媒旗下網(wǎng)站: IT之家 最會買 - 返利返現(xiàn)優(yōu)惠券 iPhone之家 Win7之家 Win10之家 Win11之家

軟媒旗下軟件: 軟媒手機APP應(yīng)用 魔方 最會買 要知