近日，社交平台Soul App(以下简称“Soul”)语音大模型再次升级，上线自研端到端全双工语音通话大模型，具备超低交互延迟、快速自动打断、超真实声音表达和情绪感知理解能力等特点，能够直接理解丰富的声音世界，支持超拟人化的多风格语言，实现更接近生活日常的交互对话和“类真人”的情感陪伴体验。目前，Soul自研的端到端语音通话大模型能力已上线旗下“异世界回响”实时通话场景(内测中)，并将在后续拓展至AI苟蛋等多个AI陪伴、AI互动场景。

自2016年上线，Soul一直致力于以创新的技术方案和产品设计，实现社交体验的拓展。2020年，Soul启动对AIGC的技术研发工作，系统推进在智能对话、语音技术、虚拟人等AIGC关键技术能力研发工作，并推动AI能力在社交场景的深度落地。

以AI升级社交的过程中，Soul的技术重点之一是致力于实现拟人化、自然化情感陪伴体验。其中，声音是重要环节之一。作为传递信息和情感的重要媒介，声音最能在沟通中赋予“情绪温度”和“陪伴感”。特别是在社交场景中，情感化、低延迟、多风格、类真实的声音能力，可以打破“次元壁”，让线上社交尤其是人机互动中，也能实现真实生活场景聊天的自然流畅感和沉浸现场感，真正完成类现实生活化互动场景中的交互体验。

因此，为给用户带来更好的情绪反馈和陪伴感，情绪理解、延迟问题一直是Soul技术团队关注的焦点。

此前，Soul团队推出了自研的语音生成大模型、语音识别大模型、语音对话大模型、音乐生成大模型等语音大模型能力，支持真实音色生成、语音DIY、多语言切换、多情感拟真人实时对话等，目前已应用于Soul “AI苟蛋”、站内狼人游戏“狼人魅影”AI语音实时互动、独立新产品“异世界回响”等场景。

与国际最前沿的技术发展保持同频，Soul持续完善自身语音技术能力积累，创新AI社交应用体验。今年7月，在人工智能领域顶级的国际学术会议——国际人工智能联合会议(International Joint Conference on Artificial Intelligence,IJCAI)举办的第二届多模态情感识别挑战赛(MER24)上，Soul 语音技术团队于SEMI(半监督学习)赛道获得第一名，在国际赛事舞台上展现了Soul的前沿洞察和技术能力。

如今，自研端到端语音通话大模型的率先上线，再次证明了Soul在行业中扎实的技术能力积累。

区别于传统的级联方案，语音到语音的端到端建模，意味着语音交互体系的颠覆式升级，即不再需要从“语音识别、自然语言理解、语音生成”等多个环节流转，直接语音输入—语音输出的端到端模型能够最大程度实现信息无损传递，降低响应延迟时间。

此次Soul自研的端到端语音通话大模型便具备超低交互延迟、快速自动打断、超真实声音表达和丰富情绪感知理解能力的特点，支持更自然的人机交互体验。

在延迟方面，于实际应用过程中，用户体验与“异世界回响”中虚拟人实时语音通话效果时，延迟时间少于行业平均水平，真正实现即时的AI交流和陪伴。

端到端的语音语义理解和响应以及更自然的语音指令控制，让Soul语音通话大模型不仅能够给予情感关怀、理解人声情绪情感并给出有温度的回应，还能够理解物理世界的声音场景，模拟物理世界动物声音、理解多人聊天内容，实现多风格语言切换、文艺内容创作和即兴演唱，接近现实交流互动场景需要。

接下来，Soul将持续推进多模态端到端大模型能力建设和应用落地，以AI辅助社交、提升关系建立的质量和效率的同时，构建人机交互新场景，让用户可以与AI进行更加有温度、沉浸、趣味的互动交流，不断创新社交体验。

举报 0 收藏 0 打赏 0评论 0分享 0

 

 

更多>同类资讯

合合信息助力打造文档处理专属APP，近百种AI产品全面国产化适配

近期，某政府机关与合合信息达成合作，私有化部署了通用文字、通用表格、身份证、银行卡、营业执照、发票、驾驶证、行驶证、护照等10多种卡证、票据识别模块，并完全适配昇腾Atlas 300I Pro，基于合合信息智能文字识别技术与国产化适配方案，实现了政务办公场景下标准证

09-03

感受影像的力量 共创温暖的世界，华为影像XMAGE上海影像周正式开展

2024年8月31日，“温暖的世界”华为影像XMAGE上海影像周在浦东美术馆正式拉开帷幕。上海作为国际化的艺术之都，成为“温暖的世界”华为影像XMAGE全球巡展的关键地标之一，上海站也是规模最大、参展作品最多、影响力最强的一站。本次展览包括“自然的奥秘”“景观与空间

09-02

多比价是真能省钱 同款飞利浦蓝牙耳机京东疯狂星期一便宜30元

新学期伊始，不少学生要买新文具、新耳机、新路由器等。在购买3C数码产品时，大家还是需要谨慎一些，不要因为是几十元或一百出头的小物件就放松警惕，多比较下没准就能省下几十元。就有网友在购买耳机时发现，京东3C数码“疯狂星期一”比拼多多、天猫、抖音要便宜，能省

09-02

帅康40周年盛大开启第一届帅粉节，以健康烹饪科技感恩回馈全球5000万用户

2024年,帅康迎来创立40周年这一重要里程碑。在这四十年的辉煌历程中,作为健康厨电专家的帅康,始终保持着敏锐的洞察力。帅康深知,把握用户当下的消费观念和趋势,并适时调整发展方向,对于企业的持续发展至关重要。发布健康烹饪科技,解决用户烹饪本质需求一直以来,帅康以“

09-02

《黑神话：悟空》不欺天命！影驰 GeForce RTX 4070 Ti SUPER 特别纪念版登场！

《黑神话:悟空》现已发售,作为中国首款3A大作在发布当天就支持NVIDIA DLSS 3和全景光线追踪技术为玩家带来更好的游戏体验。得益于GeForce RTX 40系列和DLSS 3的加持下,玩家可实全分辨率60+FPS的帧率享受全景光线追踪技术。影驰此次也为广大《黑神:悟空》的粉丝玩家们带

09-02

维谛技术推出智能中功率母线新品，助力智算中心末端配电换代升级

作为数据中心电力保障的最后一道“防线”，末端配电正在经受什么样的挑战?当前，在AI技术的驱动下，数据中心正向智算中心转变，规模不断扩大、单机柜功率密度提升、建设周期缩短。这些新的发展趋势，对末端配电系统建设应用提出了更高要求。如何最大程度保障配电安全，

09-02

伊利金领冠:首部母婴营养发展史纪录片揭秘中国奶粉的超凡实力

近日,中国婴幼儿配方奶粉领军品牌伊利金领冠,重磅推出了首部母婴营养发展史纪录片《超凡奶粉在中国》。该系列纪录片共十集,分别从超凡配方、超凡奶源、超凡品质三大维度讲述了伊利在母婴营养健康方面22年的研究历程,更展现了其在科技创新领域的硬实力。一部母婴营养发展

09-02

MiniMax大模型日均交互时长排名第一 每日处理超3万亿token

以大模型、AIGC为代表的人工智能浪潮，正在悄然改变着人们的生活及工作方式。8月31日，“2024 MiniMax Link伙伴日”活动在上海顺利举行。本次活动以Link(连接)为主题，聚焦AI创新技术发展。活动现场，MiniMax创始人闫俊杰分享了基于MOE(混合专家模型)+ Linear Attention

09-02

限量5折抢！9月1日晚8点小度添添闺蜜机悦享版京东只要1699元

好消息！9月1日晚8点，原价2999元的小度添添闺蜜机悦享版，京东只要1699元，差不多相当于只要5折。目前添添京东自营旗舰店、小度京东自营旗舰店已经开启预约通道，想入手这款闺蜜机的消费者不如现在就拿起手机预约吧，下单还可享6期免息，晒单返50元E卡赠小度白金会员季

09-01

“99公益日”升级为“久久公益节” 六大分会场让公益更加融入日常生活

走过十年的99，今年如期而至，与往常一样将从9月1日正式启动，持续到9月10日。随着公益行业进入高质量发展阶段，今年“99公益日”正式升级为“久久公益节”。今年的主题为“十年如一日、久久做好事”。腾讯公益慈善基金会(以下简称“腾讯基金会”)将继续投入4亿元资金助

09-01

小刀电动车好不好？创新驱动市场口碑，持续升温见真章

在电动车行业这片竞争激烈的蓝海中，小刀电动车近期的一系列动作无疑成为了市场关注的焦点。作为行业内的佼佼者，小刀电动车不仅通过创新技术引领了产品动力科技、安全舒适的升级，还通过快速拓展的渠道网络和全国用户的认可，进一步巩固了其市场领先地位。创新引领安全

08-31

行业首家快速落地响应五部门《推动电动自行车以旧换新实施方案》 绿源携手广西以旧换新专项行动启动

2024年8月31日，第七届广西新能源电动车(三轮车)及零配件展览会上，广西新能源电动车以旧换新专项行动启动仪式圆满落幕。此次活动由绿源电动车联合广西电动自行车安全隐患全链条整治工作专班、广西电动自行车协会联合发起，汇聚了中国轻工业联合会、中国电动自行车协会

08-31

建一座人工智能产业“高楼”！华为云助力四川以AI推动产业变革

今年的全国两会上，“人工智能+”首次被写入政府工作报告，标志着人工智能已上升为国家战略。当下，人工智能产业蓬勃发展，赋能千行万业，促进产业深度转型升级，为加快形成新质生产力提供了重要支撑。四川也在抢抓机遇。今年，省委、省政府将人工智能列为“一号创新工

08-31

开学文具需求多“马大哈”家长买这忘那 京东文具“限时达”解家长燃眉之急

当前，全国中小学生已经陆续重返校园，但难免有家长因为工作忙，或是清单统计的不够充分，必备文具总会忘买好几样。为了让广大的学生能顺利开学，京东文具开学季不只带来了低至5折、3件8折、满99减20等超值优惠，还有“限时达”服务加持，就算文具准备有遗漏，京东上午

08-31

企业责任在肩，绿源联合广西整治专班启动全省安全公益万里行

2024年8月30日，第七届广西新能源电动车(三轮车)及零配件展览会在万众瞩目中盛大启幕，作为西南地区规模最大的电动车盛会，绿源电动车凭借其独特的数字化电池技术及新品Moda 9成为全场瞩目的焦点。同日，绿源电动车携手广西电动自行车安全隐患全链条整治工作专班等单位

声明：本文内容仅代表作者个人观点，与本站立场无关。如有内容侵犯您的合法权益，请及时与我们联系，我们将第一时间安排处理