首个搭载商汤日日新融合大模型交互版「SenseNova-5o」的具身智能机器人来了!
依托「SenseNova-5o」强大的多模态实时交互能力,商汤为机器人提供了实现情感交互能力的核心引擎,让机器人看懂、理解并与世界交互。
同时还助力专注具身智能人形机器人领域的科技企业——归墟机器人,研发新一代具有情感陪伴和心理健康筛查干预功能的具身智能类人型机器人飞燕,使它具备了强大的全景视界感知能力和深度思考能力,可实现对整个物理世界的信息理解和交互,并推动智能健康和心智陪伴领域人机交互体验的升级,引领具身智能领域的创新发展。
全景视界感知,让机器人看懂、理解并与世界交互
「SenseNova-5o」是商汤“日日新”融合大模型的交互版本,拥有强大的实时交互、视觉识别、记忆思考、持续对话和复杂推理等能力,帮助AI与人类更自然、更流畅地交流,让每次互动更加智能与贴心。同时通过整合商汤大装置基础设施能力,「SenseNova-5o」让用户在任何环境下都能享受稳定、实时、流畅、无延迟的音视频对话服务和沟通体验。
基于「SenseNova-5o」,机器人已经实现全景视界感知,可结合空间感知理解能力,合理规划路径与物体交互动作。结合日日新的先进技术,其多模态交互记忆更出色,交互响应更畅快。它拥有超 5 分钟的超长多模态交互记忆,实时交互延迟不到 2 秒,可快速响应语音指令与动作示意,进行多轮对话。同时,凭借卓越的空间交互表现,机器人还可为用户带来灵活自然、友好多变的人机交互体验。
「SenseNova-5o」还提供强大的个性化设置功能,支持根据用户偏好,个性化设置交流风格与使用习惯,从人设到语气都能自由调整。「SenseNova-5o」还提供不同的音色选择,可以根据用户需要轻松切换。
在实际应用中,「SenseNova-5o」让机器人能够精准捕捉患者微妙的表情变化和情绪波动,有效判断如焦虑、阿兹海默症等病理特征动作,并据此提供细致入微、个性化的响应服务,为患者带来更加温馨、关怀的体验。
多场景应用,SenseNova-5o加速具身智能拥抱AI 2.0时代
拥有「SenseNova-5o」的加持,具身智能机器人将可以在心理诊疗、儿童及老人陪伴领域实现多场景、多领域应用和落地。
在心理诊疗场景中,它能够辅助开展初筛和心理筛查等部分基础性工作,提高筛查效率和准确性,使心理医生得以聚焦于高价值诊疗环节。例如,目前在江苏省第一人民医院,应用「SenseNova-5o」的飞燕机器人已投入应用,通过情绪识别、多模态感知与交互等技术,完成一系列心理健康筛查、个性化干预、情感支持等任务,不仅能减少用户在面对真人时的焦虑,还能借助“人形”更流畅地展开沟通。同时,在校园心理小屋场景中,应用「SenseNova-5o」机器人还可以为广大师生提供心理咨询服务,助力心理健康教育工作。
在养老陪伴场景中,它还可为居家养老和机构养老的老年人提供智能陪伴、健康管理、紧急响应等功能,满足老年人的生活和情感需求。在商业服务场景中,拥有了「SenseNova-5o」高效、精准的多模态实时交互能力,公共服务机器人可以化身来宾的专属讲解员,提供专业、生动的讲解和互动体验。
“商汤科技日日新5o为机器人赋予了情感交互能力的核心引擎,使智能机器人能够更清晰地洞察物理世界,并像人一样为用户提供多样化的服务。”归墟机器人CTO于勇表示。
通过与具身智能机器人结合,商汤借助日日新融合大模型和「SenseNova-5o」正在加速推动多模态大模型在各个场景的应用。
未来,商汤科技还将携手更多合作伙伴,共同探索「SenseNova-5o」在具身智能、硬件、教育等更多领域的应用潜能,让AI真正成为人类生活中的得力助手和贴心伙伴,为社会各界打造更加温暖、智能、关爱的生活体验。