Merlin TTS 深度学习的语音合成

github

https://github.com/CSTR-Edinburgh/merlin

安装与训练

参考这个文档即可 在Mac上安装成功

http://jrmeyer.github.io/merlin/2017/02/14/Installing-Merlin.html

除非GPU内存够大 否则使用CPU训练

使用训练好的模型合成语音

#1 安装Festival

http://www.cstr.ed.ac.uk/projects/festival/

安装到merlin/tools

#2 编译需要合成的文字

创建这个文件

merlin/egs/slt_arctic/s1/experiments/slt_arctic_full/test_synthesis/utts.data

文件内容样例

( arctic_a0001 "This is what I can say" )

#3 合成

进入merlin/egs/slt_arctic/s1/

运行 ./merlin_synthesis.sh

#4 结果

wav在experiments/slt_arctic_full/test_synthesis/wav中

这里可以听到merlin合成的语音结果

https://soundcloud.com/user-178966783/merlin

外部资源

#1 论文

Zhizheng Wu, Oliver Watts, Simon King, "Merlin: An Open Source Neural Network Speech Synthesis System" in Proc. 9th ISCA Speech Synthesis Workshop (SSW9), September 2016, Sunnyvale, CA, USA.

#2 front end

Festival

#3 Vocoder

WORLD

SPTK

#4 更多的训练数据

http://www.festvox.org/cmu_arctic/