AI读懂“话外之音”？杭产大模型实现全国首创，背后是85后博士

2024 inclusion·外滩大会，国内首个端到端通用语音大模型发布上线。作为国内领先的端到端语音大模型，它开创了人机交互新方式。

“你好，我是Lingo，有什么可以帮你？”

9月5日，由西湖心辰（杭州）科技有限公司（以下简称“西湖心辰”）打造的心辰Lingo端到端通用语音大模型在外滩大会上正式发布。《浙商》杂志记者也在第一时间体验了这个号称“高情商”的大模型。

抛出生活中的鸡毛蒜皮但又剪不断理还乱的琐碎事，都能得到心辰Lingo触及内心的回复。哪怕是说到激动处，情不自禁打断，心辰Lingo似乎也能从容应对。

听得懂语音，更读得懂“话外之音”

在外滩大会举行的发布会上，西湖心辰CEO醒辰表示，心辰Lingo的核心优势在于其能够捕捉到语音中的细微变化，不仅能理解你所说的话，更能深刻理解你的意图和情感，为AI赋予了“高情商”。

心辰Lingo作为国内首个端到端语音大模型，在输入语音后，可以直接分析语音，再回复语音。通过大模型的训练，它能够敏锐捕捉说话者的语气、节奏和情绪。相较于传统的语音交互系统需要将语音转化成文字才能进行文字理解，并再次将生成的回复从文字转换回语音进行最终输出，端到端的语音大模型极大地减少了信息在转换过程中的损失。

此外，心辰Lingo还具有原生的语音理解、多种语音风格表达、语音模态超级压缩三大技术特性。在显著降低计算和存储成本的同时，不仅能提升对话自然度，还能灵活适用于多种应用环境：在常规的对话之外，突发奇想，要听一段相声或是一曲说唱，心辰Lingo也能轻松“安排”。

西湖心辰相关负责人介绍，开放内测申请以来，已收到超千家企业用户预约，包括了教育、金融、医疗健康、政府与公共服务、媒体与娱乐、零售与商业服务、制造与工程等八大行业，数十个实际使用场景。

竞逐智能语音服务市场

人们需要更有效的沟通。想要让AI真正做到引导、倾听与共情，就要能听得懂话外之音。全球权威咨询机构IDC预测，到2030年，全球智能语音服务市场将达到731.6亿美元，年复合增长率预计将达到27%。微软等大模型厂商已经开始在该领域布局谋划。

“端到端语音大模型对于软硬件应用的友好性是这个市场的共识，尤其是智能硬件和具身智能领域。”西湖心辰创始人蓝振忠表示。

外滩大会上，除了心辰Lingo外，西湖心辰还带来了两款自研垂类大模型。一款是面向销售服务方向的心辰小星，系列产品预计可进行私域转化、电销转化的AI代运营与构建“QuickFind-专业知识精准智能问答系统”。另一款是面向心理疏导的心辰小天，通过聊天陪伴的形式进行负面情绪的疏解，AI心理服务平台和AI心理咨询热线还能敏锐识别用户意图和情绪状态，并及时跟进高危风险，提供个性化的服务。

据悉，今年10月西湖心辰还将发布基于心辰Lingo进行领域深度训练的儿童陪伴、心理疏导、销售服务3大垂类语音模型。

要打造陪伴10亿人的AI伙伴

西湖心辰创始人蓝振忠任教于西湖大学，是自然语言处理预训练语言模型“ALBERT”的第一作者，曾位列《麻省理工科技评论》评选的2021年度亚太地区“35岁以下科技创新35人”。此次外滩大会，得益于AI大模型研发、智能语音识别与处理技术等方面的成就，蓝振忠还被授予了2024年度的InTech科技奖。

2021年7月，依托蓝振忠所创办的西湖大学工学院深度学习实验室，西湖心辰宣告成立，并汇集了一批来自谷歌、Meta、亚马逊等公司的顶尖AI技术人才。

西湖心辰已陆续推出AI心理咨询师“小天”、智能写作平台“Friday”以及AI绘画产品“造梦日记”。根据其官网的数据，西湖心辰已累计为使用者和合作伙伴提供超2.3亿次AI绘画、写作、咨询服务。

2023年3月，西湖心辰宣布获得百度风投、凯泰资本和西湖教育基金会可持续发展平台的数百万美元Pre-A轮融资。不久后，西湖心辰又获得来自上市公司汤姆猫的一笔金额超亿元的投资，双方将依托西湖心辰自研的通用大模型——西湖大模型展开合作。

在西湖大模型的发布会上，蓝振忠表示，要构建智商情商俱佳的通用大模型，打造陪伴10亿人的AI。西湖大模型具备长期记忆、个性化和情感感知等特色，能够记住用户的历史互动信息，深度定制模型的人设、性格和偏好，并且能感知用户的情绪状态，采用更有温度的表达方式和用户互动。

“聊会小天”是基于西湖大模型研发的面向C端的公益类AI陪伴产品。研发团队聚集了近20位心理学专业及人工智能专业的在读博士生、博士后，并长期邀请近5000位专业心理咨询师共同训练。

未来“聊会小天”将搭载心辰Lingo端到端语音互动的能力，为公众提供更加便捷、高效和个性化的心理咨询服务。从西湖心辰发布的演示视频可以看到，小天能够通过用户诉说烦恼时的语气语音，快速形成情感共鸣，并引导用户吐露心声。判断问题的关键所在，给出专业且合理意见建议，小天也是做到了精准与迅速。“默契且知心，就像你的好闺蜜好兄弟一样。” 西湖心辰相关负责人表示。据了解，小天已达到了中高级心理咨询师的水平。

来源：《浙商》杂志官方微信公众号 记者 章一琛胡淼