鸿蒙文学网

手机浏览器扫描二维码访问

第四十三章 语音通话模型的制作(第2页)

首先每个人都有一个自己的语音模型,训练这个模型需要有一个很优秀的训练好的模型,然后做迁移学习。

但是训练基础模型的时候,是需要很多数据的,程序林奇很快的就做好了,但是没有语音数据是硬伤。

最后林奇收集了很多的网络上公开的音频资料,来输入到模型中进行训练,刚开始的时候找来了很多的汉语的音频。

包括从电视剧,电影还有广播,新闻等里面抽取的音频。

等训练好之后林奇测试之后发现针对标准的普通话,这个表现很好,但是如果是方言甚至是另一种少数民族,比如蒙古语,这个软件表现的就非常的不尽人意。

后来林奇换了一个思路,不把每个人的语音转换为文字。

而是让机器自己发明一种能发音的文字,不需要人类能看懂,只需要这个软件自己能看懂就好,可以把听到的任何声音都转换为这种机器自己能识别的文字。

修改了核心的算法之后,林奇再次把数据输入进去,同时这次增加了很多的其他的数据,包括英语,德语,日语……几十种语言的数据。

还有很多的大自然的声音,乐器的声音,等等。

电脑分析这些数据建立一个模型过程是很慢的,经过漫长的等待之后,终于重新生成了一个模型。

经过测试之后,效果出奇的好,林奇发现尤其是针对有规律的东西,包括语言,乐器这些东西,都能有很好的效果。

然后这些数据经过压缩之后,体积比文字的还小了很多,即使网络环境再不好,只要不是完全没有,通话的质量都是很完美的。

但是美中不足的是,针对不太规律的东西,这个模型处理的效果就不是很好,比如一些环境噪音或者大自然的风声雨声鸟叫等。

林奇接着又去修改了模型,但是训练后的结果都不是很好。

后来林奇想了想“环境噪音,在语音通话过程中,人们应该是不想要的,我干嘛还要费那么大的力气给加上。

这不正是几千块钱的所谓的主动降噪耳机,或者是骨传导耳机追求的降噪的功能吗?”

想至此,林奇想抽自己两巴掌,白白浪费了那么多时间。

至于一些风声什么的,林奇也有了一个很好的解决方法,就是在算法里面判断这个声音,如果是没有规律的,但是和环境噪音又有些区别的,那么就保留原有的语音通话,只有这种有语言的才智能的运用自己这套系统。

这个系统的价值在于能让语言的传输大大减小体积,同时还能高度还原原声,甚至带有主动降噪功能。

而这个系统的难点在于:模型的训练。

训练的时候刚开始针对的是普通话,到了后来,林奇彻底的放开了自己的思维,让机器自己去生成一种能传输的自己认识的语言,这样效果大大的提升了,不用针对每一种语言来训练好一个模型,而是针对所有的声音,训练出了一套通用的模型。

在使用的时候,只需要把这个模型加载到用户的手机,用户只需要说几句话,模型就会自动生成对应的音色,还有对应的语言的机器翻译。

通过实际的使用,林奇测试发现,这完全秒杀了世面上所有的语音通话软件。

(大雁文学WwW.XiaoYanWenXue.CoM)

热门小说推荐
全京城都在盼着楚王妃失宠

全京城都在盼着楚王妃失宠

陆瑶重生后,嫁给了上一世的昏庸暴君,本以为小命不保,没想到被宠上了天。深受夫妻关系困扰的大臣向楚王求教王爷在家和王妃吵架吗?楚王腰杆一挺吵架?打架都是经常的。那王妃娘娘不哭吗?王妃娘娘看起来也不经打啊。她打我,她哭啥啊。大臣...

最强上门狂兵

最强上门狂兵

战神归来,前女友居然找上门来提出非分要求...

天坤

天坤

紫凰棺 ,让望龙山洛古剑派最卑微弟子开启几世记忆。  一句承诺,帮他开启修真大门,至尊灵叶,助他改善体质踏上修真之路。  另有目的收徒,改变了他的地位,也改变了他的命运。  逃离魔爪,发现天坤神器,成功联系器灵。  自强不息,一人杀出强者神话,厚德载物,名扬四海下自成蹊  手握残缺的天坤,灵魂多变的卑微小子,开启了逆天的妖孽之路!  (修炼等级观气境纳气境筑气境驭气境气丹境气婴境气元境气空境气鼎境。)  VIP书友群号251134850(老作者,完本保证!)...

一往情深:小叔吃上瘾

一往情深:小叔吃上瘾

结婚当晚老公出轨自己的异母妹妹,顾心柠守了一年多活寡。  不甘寂寞的她酒吧寻欢,却不想睡了最不该睡的人。  小叔叔,我可是你侄媳妇。  怕什么,反正不是亲的。  惹来的男人甩不掉,只能继续维持地下情。  可是  傅池渊,说好的不准告诉别人我们的关系呢?  男人邪魅一笑,凑近咬着她的耳垂,说别人‘不小心’发现,跟我有什么关系。  顾心柠咬牙切齿那你到底怎样才肯放过我?  等我睡腻了。  傅池渊把人压在床上,肆意侵入  看着身下人意乱情迷的模样,他轻笑,已经吃上瘾了怎么可能腻。...

重生小说反派公子哥

重生小说反派公子哥

某写手很烂俗的重生了,但他没有重生在过去或是平行世界,而是重生在了自己撰写的小说世界里!最让他蓝瘦香菇的是,重生的角色竟然是小说里被虐得死去活来的反派公子哥!为了能多活几章,史上最妖孽的反派,不得不在史上最坑爹的系统指引下,一步步完成史上最伟大的逆袭之路!书又名反派的自我修养猫我回来了!...

修真战神之斗苍天

修真战神之斗苍天

既然上天不公,我何不斗天?战神归来,修真之路,崛起!!...

每日热搜小说推荐