2018年10月，微軟發(fā)布了基于深度神經(jīng)網(wǎng)絡(luò)的文本到語(yǔ)音(text-to-speech，以下簡(jiǎn)稱“TTS”)分析運(yùn)行系統(tǒng)。

該技術(shù)發(fā)布一年，在一些場(chǎng)景進(jìn)行了落地，其中幫助視障人群成為非常關(guān)鍵的應(yīng)用場(chǎng)景。

在過(guò)去，微軟和盲人公益組織紅丹丹視障文化服務(wù)中心(以下簡(jiǎn)稱“紅丹丹”)進(jìn)行了合作，紅丹丹將目前盲人群體所缺乏的資源書籍(百科知識(shí)、文學(xué)類、教材等)挑選出，微軟通過(guò)神經(jīng)網(wǎng)絡(luò)合成語(yǔ)音“曉曉”來(lái)合成有聲書。

10月15日是國(guó)際盲人節(jié)，上述合成的有聲書在這天上傳至心目圖書館——一個(gè)云端的圖書館——可以接觸到全國(guó)105所盲校的學(xué)生。

在此之前的10月9日，微軟亞洲互聯(lián)網(wǎng)工程院人工智能語(yǔ)音組資深產(chǎn)品總監(jiān)丁秉公在接受《中國(guó)經(jīng)營(yíng)報(bào)》在內(nèi)的媒體記者采訪時(shí)介紹稱，這樣的書原本需要人來(lái)錄音，要找到錄音的人和錄音棚，耗時(shí)耗力，如果要錄高質(zhì)量的聲音需要花費(fèi)更多的成本和時(shí)間。但是如果通過(guò)TTS合成方式，可以7乘24小時(shí)合成，只要有文本內(nèi)容，就可以源源不斷地輸出有聲內(nèi)容�！斑@打破了有聲內(nèi)容生產(chǎn)的壁壘。這個(gè)對(duì)視障人士群體來(lái)說(shuō)特別有意義，雖然他們可以在市面上聽到一些有聲書，但是數(shù)量遠(yuǎn)遠(yuǎn)少于文本數(shù)量，如果我們可以自動(dòng)地把文本轉(zhuǎn)化成有聲，可以極大地豐富視障朋友有聲閱讀的來(lái)源�！�

成本更低

在具體的成本上，據(jù)微軟方面介紹，一本100頁(yè)左右的紙質(zhì)書籍，譯成盲文書籍需要400~500頁(yè)，制作成本在80~100元左右，成本相對(duì)較高。而通過(guò)TTS合成的有聲書，平均一本的價(jià)格在9000元左右。但一本有聲書做出來(lái)之后進(jìn)行云端傳輸，覆蓋到全國(guó)的盲校1萬(wàn)多個(gè)學(xué)生，可能一本書成本平攤下來(lái)才不到1元錢，且可以做到無(wú)限量廣域傳播。

市面上充斥著各式各樣的有聲書，該項(xiàng)目合成的有聲書相比前者有什么區(qū)別?

對(duì)此，紅丹丹執(zhí)行主任曾鑫對(duì)記者解釋，這些有聲書根據(jù)盲校孩子和老師的需求來(lái)做，不是市面上已有的名著或者通俗小說(shuō)類，而更多聚焦在目前市面上缺少的針對(duì)視障學(xué)生學(xué)習(xí)類或者成長(zhǎng)類的有聲書籍。“這種書在市場(chǎng)上很難找到有聲版甚至是電子版，所以這方面很有需求。另外，我們也會(huì)根據(jù)青年人的學(xué)習(xí)需求，制作法律、公務(wù)員的考試教材等。市面上很難買到這類有聲教材，我們會(huì)通過(guò)這樣的技術(shù)手段幫學(xué)生以最快速度完成轉(zhuǎn)換，形成有聲書�！痹�鑫說(shuō)道。

據(jù)微軟人工智能女聲曉曉語(yǔ)音產(chǎn)品負(fù)責(zé)人劉越穎介紹，該技術(shù)目前可以提供兩種場(chǎng)景下的服務(wù)：一種是實(shí)時(shí)的合成，基本上是毫秒量級(jí)的，幾百毫秒就能夠反饋，一般用在智能對(duì)話、語(yǔ)音助理等場(chǎng)景。另一種是非實(shí)時(shí)的合成場(chǎng)景，比如一整本有聲書的長(zhǎng)文本合成，大概需要總音頻時(shí)長(zhǎng)的1/3。一個(gè)小時(shí)的音頻，可能十幾分鐘二十分鐘就能合成出來(lái)，如果是人工錄音，可能錄制一個(gè)小時(shí)的音頻，反復(fù)出錯(cuò)，需要不斷地去錄和重復(fù)，三個(gè)小時(shí)才能錄出來(lái)一個(gè)小時(shí)的音頻成品，而機(jī)器十幾分鐘就可以，這就將人力三個(gè)小時(shí)的錄音節(jié)省到十幾分鐘，效率大大提升。

曾鑫也進(jìn)行了補(bǔ)充：“做有聲書的成本上，我們作為一個(gè)公益機(jī)構(gòu)，可能不像商業(yè)機(jī)構(gòu)。需要?jiǎng)佑靡恍┲驹刚叩馁Y源來(lái)做，一本有聲書的錄制，對(duì)于我們而言最快的速度也需要花三個(gè)月才能完成。時(shí)間成本會(huì)很長(zhǎng)，還包括人員的協(xié)調(diào)成本，現(xiàn)在用的這個(gè)技術(shù)大概幾十秒鐘或幾分鐘就能完成一本有聲書的制作，這個(gè)成本肯定是沒(méi)法比的。”

聲音力圖更自然

微軟語(yǔ)音、自然語(yǔ)言與機(jī)器翻譯的技術(shù)負(fù)責(zé)人黃學(xué)東曾在其文章中指出，TTS系統(tǒng)使用了深度神經(jīng)網(wǎng)絡(luò)，來(lái)克服傳統(tǒng)“文本到語(yǔ)音”系統(tǒng)在匹配口語(yǔ)的重讀和語(yǔ)調(diào)(稱為韻律結(jié)構(gòu))，以及將語(yǔ)音單元合成為計(jì)算機(jī)音頻方面的局限性。這使得聲音更加自然。

這些有聲書的語(yǔ)音來(lái)自微軟的聲音品牌“曉曉”，據(jù)丁秉公介紹，曉曉是第一個(gè)基于深度神經(jīng)網(wǎng)絡(luò)做的聲音。他表示，微軟平臺(tái)上的聲音品牌很多，最初合成的聲音聽起來(lái)非常不自然，一聽就知道它是機(jī)器人，長(zhǎng)時(shí)間聽容易導(dǎo)致疲憊，經(jīng)過(guò)幾年發(fā)展，曉曉的聲音被研發(fā)出來(lái)，達(dá)到相對(duì)自然的程度。

10月15日，記者在“心目圖書館”小程序中試聽了上述利用曉曉的聲音合成的有聲書《德國(guó)少年兒童百科知識(shí)全書——嚙齒動(dòng)物》這一本的開頭部分，發(fā)現(xiàn)聲音相對(duì)一般的機(jī)器人聲音自然，但在一些斷句、停頓上仍然需要提升。

黃學(xué)東也指出，傳統(tǒng)的“文本到語(yǔ)音”系統(tǒng)將韻律結(jié)構(gòu)分解成由獨(dú)立模型控制的語(yǔ)言分析和聲學(xué)預(yù)測(cè)步驟。這將導(dǎo)致合成音頻變得沉悶無(wú)趣。而“文本到語(yǔ)音”系統(tǒng)可以同時(shí)執(zhí)行韻律預(yù)測(cè)和聲音合成，其結(jié)果更加流暢自然。

“讀文章時(shí)有自然的換氣和停頓，韻律自然，聽起來(lái)不會(huì)累。”在采訪現(xiàn)場(chǎng)，微軟語(yǔ)音團(tuán)隊(duì)播放了幾段曉曉合成的有聲書，劉越穎如此介紹道。

微軟希望通過(guò)技術(shù)讓有聲書快速生成，通過(guò)技術(shù)做不同聲音和不同風(fēng)格以匹配更多書籍的類型。丁秉公向記者透露，目前該系統(tǒng)支持新聞、情感故事、聲音助理、客服等場(chǎng)景，不同場(chǎng)景下的聲音力圖做到自然。

此外，丁秉公還表示，從去年11月到今年，微軟對(duì)該項(xiàng)技術(shù)進(jìn)行不斷改進(jìn)，調(diào)優(yōu)性能，提高計(jì)算力，從非實(shí)時(shí)轉(zhuǎn)化聲音到變?yōu)閷?shí)時(shí)，立足細(xì)節(jié)打磨聲音質(zhì)量，下了很大功夫�！叭ツ晡覀兺瞥鲞@個(gè)聲音時(shí)，聲音很好聽，但細(xì)節(jié)還有很多提升的潛力，比如當(dāng)時(shí)語(yǔ)音說(shuō)雙語(yǔ)不夠好，如今已經(jīng)很自然了。我們正在逐漸地拔高聲音的效果�！�