5200小说网

手机浏览器扫描二维码访问

第四十三章 语音通话模型的制作(第2页)

首先每个人都有一个自己的语音模型,训练这个模型需要有一个很优秀的训练好的模型,然后做迁移学习。

但是训练基础模型的时候,是需要很多数据的,程序林奇很快的就做好了,但是没有语音数据是硬伤。

最后林奇收集了很多的网络上公开的音频资料,来输入到模型中进行训练,刚开始的时候找来了很多的汉语的音频。包括从电视剧,电影还有广播,新闻等里面抽取的音频。

等训练好之后林奇测试之后发现针对标准的普通话,这个表现很好,但是如果是方言甚至是另一种少数民族,比如蒙古语,这个软件表现的就非常的不尽人意。

后来林奇换了一个思路,不把每个人的语音转换为文字。而是让机器自己发明一种能发音的文字,不需要人类能看懂,只需要这个软件自己能看懂就好,可以把听到的任何声音都转换为这种机器自己能识别的文字。

修改了核心的算法之后,林奇再次把数据输入进去,同时这次增加了很多的其他的数据,包括英语,德语,日语……几十种语言的数据。还有很多的大自然的声音,乐器的声音,等等。

电脑分析这些数据建立一个模型过程是很慢的,经过漫长的等待之后,终于重新生成了一个模型。

经过测试之后,效果出奇的好,林奇发现尤其是针对有规律的东西,包括语言,乐器这些东西,都能有很好的效果。

然后这些数据经过压缩之后,体积比文字的还小了很多,即使网络环境再不好,只要不是完全没有,通话的质量都是很完美的。

但是美中不足的是,针对不太规律的东西,这个模型处理的效果就不是很好,比如一些环境噪音或者大自然的风声雨声鸟叫等。

林奇接着又去修改了模型,但是训练后的结果都不是很好。

后来林奇想了想“环境噪音,在语音通话过程中,人们应该是不想要的,我干嘛还要费那么大的力气给加上。这不正是几千块钱的所谓的主动降噪耳机,或者是骨传导耳机追求的降噪的功能吗?”

想至此,林奇想抽自己两巴掌,白白浪费了那么多时间。

至于一些风声什么的,林奇也有了一个很好的解决方法,就是在算法里面判断这个声音,如果是没有规律的,但是和环境噪音又有些区别的,那么就保留原有的语音通话,只有这种有语言的才智能的运用自己这套系统。

这个系统的价值在于能让语言的传输大大减小体积,同时还能高度还原原声,甚至带有主动降噪功能。

而这个系统的难点在于:模型的训练。

训练的时候刚开始针对的是普通话,到了后来,林奇彻底的放开了自己的思维,让机器自己去生成一种能传输的自己认识的语言,这样效果大大的提升了,不用针对每一种语言来训练好一个模型,而是针对所有的声音,训练出了一套通用的模型。

在使用的时候,只需要把这个模型加载到用户的手机,用户只需要说几句话,模型就会自动生成对应的音色,还有对应的语言的机器翻译。

通过实际的使用,林奇测试发现,这完全秒杀了世面上所有的语音通话软件。

(大雁文学WwW.XiaoYanWenXue.CoM)

月临:世纪录  重生之聂小倩  蜀山之天宪神君  太玄战记  学霸的微观世界  国策  无限电影之科幻霸主  侠道行  奋斗在加拿大  极品仙师  帝国重器  明末国色江山  打个电话给大侠  网游之创世降临  穿越成为近战法师  巫神纪  绝世天君  超级大忽悠  永恒剑主  桃色小神医  

热门小说推荐
星界新世界

星界新世界

在星人的压迫下,地球踏上了新的历程,和无数星球一样,加入了新世界。但新世界其实是另一个宇宙,它的名字,叫做星界。无数种族,无数文明汇聚在星界中,演绎着充满了未知和希望的战争与和平。无限的星界中,一个叫做夜蝶盗艺能团的古怪名字开始响亮起来。它的团员很少,有来自地球其实是却土拨鼠星人的陈啸鸣,有总是扛着重剑的无口腹黑萝莉,还有总是蒙面的怪盗魔术师在大部分星界居民看来,夜蝶盗是一个艺能团,总能上演最有趣的演出,带来无尽欢笑。但当不为人知的时刻,它却总是化身为夜蝶盗盗贼团,探索着星界的宝藏,用勇气和技艺,演绎着属于星界盗贼的传奇!他们搞笑,但他们更嗜血!战遍星界,偷遍新世界!群号128805271...

修仙奶爸的妖孽人生

修仙奶爸的妖孽人生

小朋友,千万别惹我,我老爸超凶的!小娜扎。九天之下大境,皆为我界!孟浪淡淡道想要嫁给我,那得看我女儿喜不喜欢你!...

极限兑换空间

极限兑换空间

神尊狼狈的看着易池道你怎么成长的如此之快?易池笑着说道只要有了兑换空间,你也可以。幸运的穿越后,易池带着逆天的兑换空间,在异界开始了新的征程。挡我者,死!!易池牛气冲天的说完,一道闪电顿时便轰了下来。新建扣扣群58778243(满)新建扣扣2群209758929新建扣扣3群210922885(PS弥煞新书,异界兑换流作品,一片崭新的幻想世界将展现在您的眼前。)...

从NPC开始升级

从NPC开始升级

跨时代网游天域战歌开服当日,江山满怀期待的登录游戏,没想到,竟成了一个无比普通的村民NPC从铲屎开始升级!村民升级铁匠!打造隐藏武器!奸商!从玩家身上榨取无尽财富!治安官!招兵买马!横行四方!研究分解野怪,获得能力强化!体力暴涨!力量暴涨!敏捷暴涨!一直升级一直爽,打压同行NPC,压榨顶级玩家!做最顶级的NPC,让玩家无路可走!某玩家NPC强买强卖,天域战歌能不能管一管?某工会NPC野外抢怪,血洗公会领地,我们要个说法!天域战歌经检测,游戏并未出现异常!请不要将自己垃圾的锅甩给我!...

每日热搜小说推荐