猪猪小说网

手机浏览器扫描二维码访问

第四十三章 语音通话模型的制作(第2页)

首先每个人都有一个自己的语音模型,训练这个模型需要有一个很优秀的训练好的模型,然后做迁移学习。

但是训练基础模型的时候,是需要很多数据的,程序林奇很快的就做好了,但是没有语音数据是硬伤。

最后林奇收集了很多的网络上公开的音频资料,来输入到模型中进行训练,刚开始的时候找来了很多的汉语的音频。包括从电视剧,电影还有广播,新闻等里面抽取的音频。

等训练好之后林奇测试之后发现针对标准的普通话,这个表现很好,但是如果是方言甚至是另一种少数民族,比如蒙古语,这个软件表现的就非常的不尽人意。

后来林奇换了一个思路,不把每个人的语音转换为文字。而是让机器自己发明一种能发音的文字,不需要人类能看懂,只需要这个软件自己能看懂就好,可以把听到的任何声音都转换为这种机器自己能识别的文字。

修改了核心的算法之后,林奇再次把数据输入进去,同时这次增加了很多的其他的数据,包括英语,德语,日语……几十种语言的数据。还有很多的大自然的声音,乐器的声音,等等。

电脑分析这些数据建立一个模型过程是很慢的,经过漫长的等待之后,终于重新生成了一个模型。

经过测试之后,效果出奇的好,林奇发现尤其是针对有规律的东西,包括语言,乐器这些东西,都能有很好的效果。

然后这些数据经过压缩之后,体积比文字的还小了很多,即使网络环境再不好,只要不是完全没有,通话的质量都是很完美的。

但是美中不足的是,针对不太规律的东西,这个模型处理的效果就不是很好,比如一些环境噪音或者大自然的风声雨声鸟叫等。

林奇接着又去修改了模型,但是训练后的结果都不是很好。

后来林奇想了想“环境噪音,在语音通话过程中,人们应该是不想要的,我干嘛还要费那么大的力气给加上。这不正是几千块钱的所谓的主动降噪耳机,或者是骨传导耳机追求的降噪的功能吗?”

想至此,林奇想抽自己两巴掌,白白浪费了那么多时间。

至于一些风声什么的,林奇也有了一个很好的解决方法,就是在算法里面判断这个声音,如果是没有规律的,但是和环境噪音又有些区别的,那么就保留原有的语音通话,只有这种有语言的才智能的运用自己这套系统。

这个系统的价值在于能让语言的传输大大减小体积,同时还能高度还原原声,甚至带有主动降噪功能。

而这个系统的难点在于:模型的训练。

训练的时候刚开始针对的是普通话,到了后来,林奇彻底的放开了自己的思维,让机器自己去生成一种能传输的自己认识的语言,这样效果大大的提升了,不用针对每一种语言来训练好一个模型,而是针对所有的声音,训练出了一套通用的模型。

在使用的时候,只需要把这个模型加载到用户的手机,用户只需要说几句话,模型就会自动生成对应的音色,还有对应的语言的机器翻译。

通过实际的使用,林奇测试发现,这完全秒杀了世面上所有的语音通话软件。

(大雁文学WwW.XiaoYanWenXue.CoM)

帝国重器  无限电影之科幻霸主  重生之聂小倩  极品仙师  月临:世纪录  永恒剑主  太玄战记  桃色小神医  国策  绝世天君  蜀山之天宪神君  网游之创世降临  超级大忽悠  奋斗在加拿大  侠道行  穿越成为近战法师  巫神纪  明末国色江山  学霸的微观世界  打个电话给大侠  

热门小说推荐
命锁阴阳

命锁阴阳

作者朱世豪的经典小说命锁阴阳最新章节全文阅读服务本站更新及时无弹窗广告小说命锁阴阳,以命为锁,贯穿阴阳。李琰由一个普通学生转变为灵异界的先生,遭遇冤孽,修罗煞鬼,这一切的一切究竟是命运的选择,还是有心人的安排。请看,命锁阴阳!...

超级奶爸

超级奶爸

一直在雪山中潜藏着的莫问某天忽然捡到了个小女孩,在寻亲之路上,他以这样的身份怎样撕破种种危险,重重阴谋,成为一名真正的奶爸。...

叩王庭

叩王庭

作者rounds的经典小说叩王庭最新章节全文阅读服务本站更新及时无弹窗广告小说自人间纵横,往天庭驰骋。以横刀环首,斩善恶乾坤。我,王满修,便来理一理这天道人事。...

女上司的兵王司机

女上司的兵王司机

李文龙给漂亮女领导做司机,深知女领导的底细有多深...

荒漠求生

荒漠求生

随着灵气的复苏,原本三分大陆七分海洋的蓝水星变成了一片沙漠。在沙漠中有种神奇的宝物叫做软木塞,只要找到它,把它拔掉,便能长出一片绿洲!新世纪九十九年,这是蓝星上灵气复苏之后的第一百个年头!一名被流放到南沙海的少年,在这里拔掉了属于自己的第一个软木塞,拥有了属于自己的一片绿洲。...

每日热搜小说推荐