×

扫码关注微信公众号

挖贝网> 产业> 详情

思必驰发布天机Fusion多模态大模型交互系统,加速具身智能规模化落地

2026/7/30 15:38:26     

当具身智能机器人走进展厅、工厂和家庭等场景,需要面对的不再是安静、标准、单一的实验室环境,而是人声交织、设备轰鸣、人员移动、任务随时变化的真实世界。

思必驰推出的具身机器人解决方案——天机Fusion多模态大模型交互系统,作为机器人交互中枢,把语音、视觉、表情、手势、环境信息与大模型能力连接起来,提供从前端感知、语义理解到任务执行的系统级底座,让机器人在移动、远场、多人、强噪声等场景中,也能更自然地完成交流与服务。

智能聆听:在真实环境里听得清

天机系统提供RM1、RM2多模态语音交互模组及R41纯语音交互模组,集成麦克风阵列、声卡、功放、回采、网络接口与系统驱动支持,可适配人形机器人、服务机器人、扫地机器人、零售机器人、展厅讲解机器人等多种形态。

针对人形机器人弧形结构和运动特性,天机系统支持离散型环形麦克风阵列,更贴合机身结构与密封需求。配合深度学语音增强、回声消除、AI去混响、声纹降噪、说话人分离、声源定位与人声聚焦等能力,机器人可以在3-5米远场、360°范围内捕捉声音,并在嘈杂环境中锁定真正的交互对象。

智能理解:听见后知道该回应谁

机器人在公共服务和商业接待场景中,经常会遇到多人同时说话、旁人干扰、背景广播、用户未正对设备等情况。天机系统将语谱、波束、视觉唇动等特征进行融合建模,并结合唤醒信息、视线方向、手势动作、人脸识别和中枢拒识判断,帮助机器人判断“谁在对我说话”、“这句话是否需要回应”。

这让交互从单一语音识别走向多模态理解。用户不必总是站到固定位置、反复唤醒或用标准句式表达需求;机器人也不只是机械执行一条指令,而是结合场景上下文,理解人的意图、状态和交互目标。对于展厅导览、交通枢纽问询、园区接待、家庭陪伴等场景,这种能力直接影响机器人服务是否自然、可信、可持续。

智能响应:让机器人从“会说话”向“会协同”

具身智能需要的不是孤立的大模型问答,而是可以调度工具、连接业务、执行任务的智能体系统。天机系统基于思必驰自研“1+N”分布式智能体架构,由中枢大模型负责意图理解、任务拆解和工具调度,协同迎宾接待、展厅讲解、设备控制、AI引导、百科问答等垂域智能体,并支持客户自研大模型或第三方大模型接入。

依托DUI智能化定制中台,机器人厂商可以围绕自身产品、行业知识、业务流程和场景接口,快速构建可复用、可扩展、可热插拔的智能体应用。换句话说,天机系统不只是让机器人“答得上”,更希望帮助机器人“用得上”——能够接住真实需求,完成导览、问答、巡检、控制、提醒等具体任务。

有温度的交互:让机器人更懂人

除了听清和执行,具身机器人还需要更接近人的表达方式。思必驰天机系统把人脸识别、手势控制、眼神唤醒、语音唤醒等能力纳入交互入口,让机器人能够主动“看见”用户、判断用户是否有交互意图,而不是被动等待一句标准唤醒词。

在“听”的层面,焦点聚焦模式可支持目标说话人锁定与增强,尽量滤除非目标说话人的干扰;全景扫描模式则可对画面中的多个说话人进行实时分离与识别。当用户戴口罩、说话被遮挡,或现场存在背景音乐、主持声、其他观众交谈时,系统能够通过遮挡检测与智能模式切换,帮助机器人稳定捕捉真正需要回应的声音,让交流不因环境复杂而中断。

真正有温度的交互,还体现在机器人能不能“记得我、理解我、回应我”。天机系统将身份识别、个性化推荐、大模型情绪感知与反馈纳入方案设计,可结合人脸识别、微表情分析、视线方向判断、用户轨迹记忆和语义上下文,判断用户的兴趣点、情绪状态与当前需求。当机器人再次遇到同一位用户时,可以调整问候方式、推荐内容、语速语调和回应节奏;当用户表现出犹豫、好奇或焦急时,也能用更合适的声音情绪和反馈方式承接交流。

这意味着机器人不再只是执行命令的设备,而可以成为更自然的服务入口:在展厅里,它可以根据参观者兴趣调整讲解;在公共空间里,它可以更友好地回应问询;在家庭场景中,它可以逐渐理解不同成员的惯。

案例落地:智元精灵G2的“声智协同”

思必驰为智元精灵G2提供软硬一体化语音方案,采用离散型环四麦克风阵列与智慧降噪技术,实现360°精准拾音与嘈杂环境抗干扰。基于AISPEECH DFM大模型构建面向智能终端的1+N分布式智能体系统,支持多语种互译与多场景定制交互,目前已落地2025全运会引导、展厅讲解等场景。整套方案以端到端全链路技术保障低延迟响应,助力机器人实现“听得清、听得懂、执行准”的高效交互,赋能产业场景智能化升级。

作为国内领先的对话式人工智能平台型企业,思必驰专注于全栈对话式AI和端侧智能技术的自主研发,围绕算法模型、端侧部署和柔性交付三大维度,构建了全栈对话式AI技术体系,覆盖“软件-芯片-模组-终端”的产品服务体系,已经在智慧物联、智慧办公、智慧出行等领域实现规模化应用。在智慧物联领域,思必驰已与众多各细分行业的头部企业建立深度合作,覆盖智能家居、智能机器人、智能穿戴、消费电子等多个垂直领域。

从“能听会说”到“思考会做”,具身智能需要的不只是一颗大脑,更是一套连接感知、认知、表达与执行的系统。面向未来,思必驰将继续围绕全链路对话式AI、端侧智能、多模态交互和分布式智能体等维度,携手机器人产业伙伴,把更自然、更可靠、更可规模化的人机交互带入家庭、商业服务、工业制造和更多真实场景。