国内首个端到端语音大模型将上线,人工智能也要有“情商”

2024-09-04 22:06:00 - 上观新闻

摘要:不仅了解人类的需求,还能理解人的情绪。

国内首个端到端语音大模型将上线,人工智能也要有“情商”

未来的宠物医院应该是什么样子?通过摄像头就能为宠物建立“刷脸”系统,运用AI大模型结合健康体识别技术,还可以帮助医生快速定位宠物健康问题,协助医生制定更全面的治疗方案。

未来的理财服务又该如何?用户拿起手机就能用语音唤起AI金融管家,听取专属的定制理财简报和专业的投资分析,还能完成基金加自选等理财动作。

以上这些设想其实并不遥远。9月4日记者来到外滩大会提前探营时,这些场景已经落地,成为现场展示、体验的热点。在每个行业的展区里,人工智能都是最核心的关键词。各类垂直大模型百花齐放,AI呈现出千“人”千面,它可以是养宠助手、金融管家,也可以是政务客服、代码写手……人工智能正在深入各个产业赛道,为不同工种“打辅助”。

国内首个端到端语音大模型将上线,人工智能也要有“情商”

AI金融管家“蚂小财”体验现场。

在人工智能实验室展区,西湖心辰展出了两款自研垂类大模型。一款是小星销售服务大模型,相当于AI版的“金牌销售”,依托西湖心辰自研的“西湖大模型”基座,由消费心理专家团队支持,通过销售策略、成交对话数据深度训练等,可以进行超拟人电话外呼、产品个性化推荐、动态追踪回访等。其能力具备金牌销售话术表达体系、客户购买意向识别判断、客户情绪需求捕捉和金牌谈判策略,并且通过回应训练和客观信息非幻觉对抗训练,可以实现高精度、高情绪反馈的客户响应。

西湖心辰展出的另一款小天心理疏导大模型,则相当于一位“心理咨询师”,利用超100TB的多模态心理行为数据深度训练,同时与心理学专业博士、专业心理咨询师进行三维度交叉学科研究,围绕多方面心理疗法持续学习,确保其在心理咨询服务中的专业性。这款心理疏导大模型目前也已开发出多款产品,比如小程序“聊会小天”,它可以做到像朋友一样记忆对话、持续沟通,通过聊天陪伴对用户的负面情绪进行疏解。还有面向学校、企业和机构的“心辰AI心理服务平台”,通过AI聊天、量表测评等方式跟进用户与“聊会小天”的交互情况,主动识别用户意图和情绪状态,并建立预警系统及时跟进高危风险。

这些应用中的大模型本身也在持续迭代更新。西湖心辰在今年8月推出了国内首个端到端语音大模型“心辰Lingo”,该模型具备实时打断、实时控制能力,以超拟人的互动方式,让对话更加生动、直观。

所谓端到端语音大模型,与传统的语音交互系统最大的区别就在于,跳过了文字这一“中介”。“传统的语音交互系统就像一个复杂的翻译机器,先将你的话语转成文字,再理解文字,然后生成回复文字,最后再将文字转为语音。”西湖心辰副总经理陈燕玲解释道,端到端语音对话模型,则是输入语音后,直接分析语音,再回复语音。通过大模型的训练,它能够敏锐捕捉说话者的语气、节奏和情绪,“不仅能听懂你在说什么,更能懂得你在表达什么”。

陈燕玲说,端到端语音大模型不仅能提高对话的自然度,还能赋予AI“倾听”、“引导”和“共情”的能力。未来,端到端语音大模型就将应用到前文提到的销售服务大模型、心理疏导大模型等产品中,提升它们的工作能力。比如在心理疗愈中,可以根据用户的情感状态,模拟“朋友”以及“亲人”的沟通方式,提供安慰和鼓励;在销售中,提高与客户互动的自然度和情感共鸣,为企业提供高效、智能且具备情感温度的电销解决方案。

据悉,心辰Lingo端到端语音大模型将在9月5日外滩大会开幕当天正式上线,届时将开放试用申请。

栏目主编:宰飞

今日热搜