
據(jù)悉,在這一項(xiàng)目中,研究人員結(jié)合了機(jī)器學(xué)習(xí)、自動(dòng)文本選擇和自然語(yǔ)音合成等多項(xiàng) AI 技術(shù),實(shí)現(xiàn)了電子書(shū)自動(dòng)轉(zhuǎn)化為語(yǔ)音的全流程。
經(jīng)過(guò)查詢(xún)得知,項(xiàng)目團(tuán)隊(duì)首先開(kāi)發(fā)出一種算法,可以自動(dòng)分析電子書(shū)的結(jié)構(gòu),區(qū)分正文和非關(guān)鍵部分的頁(yè)碼、表格等,然后使用 WaveNet、Tacotron 和 FastSpeech 等文本轉(zhuǎn)語(yǔ)音技術(shù),生成類(lèi)似真人的自然朗讀語(yǔ)音。此外,該團(tuán)隊(duì)還使系統(tǒng)能夠辨別書(shū)中敘述者、對(duì)話(huà)和不同角色,并相應(yīng)調(diào)整語(yǔ)音,實(shí)現(xiàn)故事情節(jié)的語(yǔ)音表達(dá)。
微軟表示,此次計(jì)劃已收集整理了超過(guò) 35000 小時(shí)的有聲書(shū)語(yǔ)音數(shù)據(jù),涵蓋了各類(lèi)經(jīng)典文學(xué)、戲劇、傳記等作品,這些語(yǔ)音數(shù)據(jù)都將以開(kāi)源方式免費(fèi)提供。用戶(hù)也可以用自己錄制的少量語(yǔ)音,生成“用自己的聲音朗讀整