在ChatGPT的DAN模式火爆全网,无数网友为《dnf公益服发布网》
在ChatGPT的DAN模式火爆全网,无数网友为如何设置DAN四处寻求攻略的时候,AI就已经证明了逼真的人机语音交互所带来的巨大想象力。
而如今,真正摆脱“人机感”的国产语音大模型来了。
据硅星人独家获悉,豆包即将发布最新实时语音大模型,并将基于此模型全量上线豆包App实时语音通话功能。目前,豆包APP已小范围测试最新能力,部分用户在豆包App的实时通话界面已更新。
此前,业内就曾有传言称豆包将上线最新情感语音大模型,测试效果超过GPT-4o。据了解,该传言提及模型即为上述实时语音模型。最新模型通过面向语音生成和理解进行统一建模,区别于此前的ASR+LLM+TTS级联方式,在对话效果上有大幅提升,实时交互上不仅低延时,也能流畅打断。
硅星人在豆包上实测了该能力发现,在中文场景下,豆包最新语音模型体现出了相较于此前更强大和逼真的性能。
从底层的技术发展来看,声学特征的精确控制需要同时调控音高、语速、音量等多个参数,而这些参数与情感之间并不存在简单的对应关系,就像人类说话时的情感是由无数细微变化组成的,机器要精确捕捉和重现这种复杂的表达。
对此,当前语音对话的解决方案多采用分层设计,通过多个模型的协同来逐步实现从文本到情感,再到声音的转换,但在实时性和自然度上仍有相当大的提升空间。
而豆包最新的语音模型,便在这两个方面有了较大的性能提升。
在自然度上,首先是此次更新最重要的情感部分,相比大多数模型还在语气上粗线条上进行变化之外,豆包最新的语音模型在语音表现和智力的拟人性上有了质的提升。
比如这一段我们让豆包用老北京话说一段报菜名的贯口,这中间有非常多对节奏和儿化音的处理,豆包都绘声绘色地表述了出来,流利程度堪比初级相声演员。
在ChatGPT的DAN模式火爆全网,无数网友为( 2025-05-06 2025-05-06 19:38:38版)
热门排行
- 1开辟马克思主义中国化时代化新境界——各地干部群众掀起学习贯彻党的二十大精神热潮
- 2把未成年人保护这项“朝阳事业”做得更好
- 3陈文清主持召开中央政法委员会全体会议强调 认真学习贯彻习近平总书记重要讲话精神 深入推进政法机关全面从严治党工作
- 4公司员工年会醉酒身亡 法院判令死者担责95%
- 5降低关税 扩大市场 促进融合 RCEP为区域经济发展注入新动能
- 62022年检察机关起诉洗钱犯罪2585人 同比上升1倍
- 7依法惩治洗钱犯罪维护国家金融安全
- 8总书记的温暖牵挂|“在推动航空科技自立自强上奋勇攀登”
- 9台州出入境边防检查站与归纳小学举行线上捐赠仪式
- 10爱上中国风丨皮与线展百年艺术 光与影传中国文化