标题:语音界Deepseek!百度最新跨模态端到端语音交互,成本最高降90%
百度推出行业首个基于Cross-Attention的端到端语音语言大模型,大幅提升语音交互的真实性和情感表达,同时大幅降低语音问答场景的调用成本,最高降幅达90%。
该模型通过创新的跨模态架构,将语音识别和语言模型深度融合,显著减少KV cache计算,提升推理效率。具体创新包括:基于Cross-Attention的高效全查询注意力技术(EALLQA),大幅降低计算复杂度;Encoder与语音识别系统融合,减少KV计算;Decoder与语音合成模型结合,实现自然流畅的情感表达。
此外,该模型支持流式逐字合成,字节级输出确保语音合成更贴近人类发音习惯,同时提升交互响应速度。在情感控制方面,该模型可覆盖17种情绪,大幅提升语音交互的真实感。
百度语音首席架构师贾磊强调,这项技术不仅在性能上取得突破,更大幅降低了工业级应用的成本门槛。未来,百度希望将这一技术分享给行业,推动语音技术的广泛应用。
目前,该模型已在L20卡上实现部署,双卡并发支持数百以上语音交互任务。这一成果标志着百度在语音交互领域迈出了重要一步,也为大模型在更多应用场景的普及奠定了基础。
原文链接
本文链接:https://kx.umi6.com/article/16641.html
转载请注明文章出处
相关推荐
.png)
换一换
不做Sora背后:百度的多模态路线是什么?
2024-11-16 14:28:25
DeepSeek一夜把百度干回20年前,网友:还有这好事?
2025-02-24 15:25:01
百度旗下AI芯片昆仑芯支持单机部署DeepSeek满血版大模型
2025-02-20 11:13:16
一手实测文心X1/4.5:又强又全面!歪果网友疯求英文版
2025-03-17 13:38:09
Scaling Law百度最早提出!OpenAI/Claude受它启发,致谢中有Ilya
2024-11-28 09:19:46
文心大模型4.5Turbo发布
2025-04-25 10:05:49
UC伯克利5千美元造全开源人形机器人,网友:这作业抄定了
2025-05-20 18:43:16
直面 OpenAI,Anthropic 正筹备“最快本月”推出语音交互功能
2025-04-16 07:56:17
百度生成式AI和大模型专利中国第一,全栈创新驱动AI应用领先
2025-07-18 16:41:37
百度李彦宏:开源模型效率太差,未来中美 AI 大模型差距会越来越大
2024-09-11 17:30:24
真·罗永浩直播干不过假·罗永浩?网友:不是老罗在演AI吧?
2025-06-18 16:38:27
百度最早发现大模型中的scaling law?不用怀疑,对中国AI要有自信
2025-01-02 11:16:19
百度Al智能体“心响”iOS版本仍在审核中
2025-04-23 15:02:57
572 文章
273094 浏览
24小时热文
更多

-
2025-10-23 18:14:34
-
2025-10-23 18:13:26
-
2025-10-23 18:12:20