本报讯(首席记者 黄婷)近日,浙江省科技计划项目——“领雁”研发攻关计划“面向智能分析的多维视觉数据感知、表示与协同技术”的中期检查会在北京大学信息技术高等研究院召开。
会上,北大信研院发布了自主研发的“自主智能机器人大脑”系统。基于自研的多模态理解大模型,让机器人实现对环境、对象和事件的实时感知理解并作出分析决策,达到“让机器人像人一样思考”的目标。该系统负责人视觉智能实验室主任王钊博士表示,这是国内首个面向机器人应用所设计的多模态理解大模型,不同于GPT—4o等通用大模型,该大模型的能力边界定义为“机器人需要且仅需要的能力”。“自主智能机器人大脑”是一套软件系统,可以部署在不同的机器人载体上,也可以应用在各类场景。
“‘自主智能机器人大脑’可以让机器人实现对环境、对象和事件的实时感知理解,将机器智能从‘看见世界’进化到‘看懂世界’。理解响应速度可以达到一秒以内,并支持实时转换为文字。加载自主智能大脑后,机器人可以像人一样自主地在开放环境中运行,而不需要人为操控。”北大信研院相关负责人介绍。
不仅如此, “自主智能机器人大脑”还可以让人与机器人进行泛化语义交互,达到让用户在使用机器人时可以动态自定义规则的效果。以巡检为例,现有的机器人检查什么内容是程序定义好的,而“自主智能机器人大脑”支持用户通过语音或者文字自定义检查内容。