返回资讯中心
外部精选
ai-models
#大模型#国内动态#资讯#具身推理模型#狮子山人工智能实验室

不靠堆砌数据,让机器人看懂真实物理世界 | 招商局狮子山实验室发布「驭物™ Lion-ER-35B-A3B」具身推理模型

视频画面中物体位置看上去更高,并不等同于它在真实三维空间里处于更高位置;更换拍摄角度,家具外观发生改变,但它仍是同一个物体;画面内物体发生位移,有可能是物体本身发生移动,也可能仅仅是相机镜头产生转动……

量子位思邈2026/11/4 · 今天9 分钟阅读中文

以下正文同步自 量子位,版权归原站所有,已转换为易读排版。

视频画面中物体位置看上去更高,并不等同于它在真实三维空间里处于更高位置;更换拍摄角度,家具外观发生改变,但它仍是同一个物体;画面内物体发生位移,有可能是物体本身发生移动,也可能仅仅是相机镜头产生转动……

这些细微的空间、状态变化,人类一眼就能分辨,但对机器人的“具身大脑”来说,却是难以攻克的难题。

想要机器人可靠完成现实任务,模型不能仅仅做到“看见物体”,更要读懂三维空间关系、捕捉物体状态变化、研判任务所处阶段。

近日,招商局先进技术研究院下属狮子山人工智能实验室发布具身推理视觉语言模型「驭物™ Lion-ER-35B-A3B」。该模型采用MoE混合专家模型架构,总参数约35B,每个Token仅激活约3B参数。

在不显著增加推理开销的前提下,模型在十项主流具身相关基准上实现全部指标上涨,多项核心能力超越更大参数量的主流模型,走出了一条区别于大规模堆砌训练数据的技术路线,有助于机器人真正理解三维物理世界。

过去几年,Open X-Embodiment、DROID等工作不断拓展真实世界机器人数据的边界。但随着数据规模扩大,一个问题也越来越清楚:

已有研究表明,在既有机器人数据集内,仅调整不同数据域的训练权重,就能明显影响下游任务表现。

「驭物™ Lion-ER-35B-A3B」的核心亮点,并非单纯提升模型参数量,而是搭建了一套能力牵引的具身数据引擎,摒弃盲目收集海量数据的传统做法,转而围绕模型需要掌握的能力做正向设计,再依靠评测发现短板,闭环迭代优化数据。

他们将具身推理拆解为“实体、空间、时序、物理、可供性、任务、社会、证据”等8个一级领域,细化出39项二级能力。并把推理方式、输入形式和回答形式作为独立维度分开标注,避免不同分类维度混用造成的重叠。

真实任务往往涉及复合能力,例如判断物品是否放置到位,既需要任务进度判断,也需要空间关系推理。

在训练采样时,团队还会考虑不同因素的组合与留出,避免某类能力始终绑定在少数固定场景、物体或提问方式上。

把抽象的能力目标,逐项拆解、落地为“需要什么场景、怎样组织观察、提出什么问题、依据什么确定答案”。

以跨视角推理为例。首先明确提供给模型的视角数量、需要在多张画面之间建立关联的目标物体,以及判定方位时所采用的观测者位置与朝向。

同时还要核验素材本身:模型拿到的视觉信息,是否足以支撑模型推导出可靠答案。如果关键视角缺失、证据不足,这道题就只能依靠猜测,不能纳入合格训练样本。

能力蓝图预先规划好需要覆盖的能力范围,评测则承担查漏补缺的角色,后续定位模型依旧薄弱的环节。

构题方式层面,团队设计了三条可互相组合的路径,从已有QA与视觉标注中转换、从观察素材中发现证据、从结构化条件与关系中推导。这三条路径共同把抽象的能力要求,转化为一道道具体、可作答的训练题。

对于模型持续失误的高难样本,团队进一步引入Human in the loop人工复核,搭建面向复杂具身任务的可视化核验平台,通过多视角对照、时序回放与证据标记等能力强化人工审查,帮助审核人员还原关键视觉线索与推理依据,避免将模型能力边界误判为数据问题。

「驭物™ Lion-ER-35B-A3B」的监督训练集共包含312380条样本,训练时按能力需求分配训练预算,而不是由数据源的题量决定权重。

样本重点覆盖空间几何、多视角对应、动作轨迹、任务规划等核心具身能力。团队会减少同质化重复题目,将训练资源投向薄弱的推理类型。样本从候选、审核到入训全程留痕,训练配方可追溯、可调整。

这是一套数据迭代机制,从模型错题中找出需要补强的能力,再将其转化为下一轮可执行的数据需求。

发现错题后,先核查标注、画面证据、评分是否存在问题,再区分偶发失误与系统性能力短板。确认存在能力缺口后,再从覆盖31个数据源、约430万条记录的素材池中,检索推理逻辑相同、场景不同的新素材,经构题核验后加入训练,再通过新一轮评测验证效果。

例如模型容易将画面二维上下位置等同于三维高度,团队就优先选择具有上下多层可放置支撑面的场景,让模型需要结合空间结构判断高低。再给左右、前后关系增加遮挡和透视变化,覆盖更容易混淆的情况。

简而言之,能力蓝图提供覆盖方向,Eval-Driven Data Harness持续校准盲区。

在这套能力牵引的数据引擎加持下,「驭物™ Lion-ER-35B-A3B」以仅约3B的推理激活参数,在十项公开基准上实现全部指标正向提升,部分指标超过参数量更大的模型。

在评测覆盖的十项公开基准上,「驭物™ Lion-ER-35B-A3B」的等权综合均分达到65.29。

十项基准完整成绩(avg@4),蓝色列为「驭物™ Lion‑ER‑35B‑A3B」

ERQA各能力类别成绩对比(avg@4),蓝色列为「驭物™ Lion‑ER‑35B‑A3B」

整体结果显示,「驭物™ Lion-ER-35B-A3B」在十项基准上得分均高于所用基座。

下面四道案例全部来自公开评测基准,同一道题目,「驭物™ Lion-ER-35B-A3B」、基座Qwen3.6-35B-A3B、Qwen3.6-27B分别独立作答4次。

两张图片来自机械臂第一人称相机的连续拍摄:瓶子在画面中整体向上偏移,问题是相机正在朝哪个方向转动。

基座仅答对一次,Qwen3.6-27B全部答错,「驭物™ Lion-ER-35B-A3B」通过两帧画面的变化规律,正确判断相机向下转动,4次作答全部答对。

对机器人来说,画面里物体位置发生变化,首先要分清变化来源,是物体本身在移动,还是相机自身发生了转动。

画面里标注了四条彩色轨迹。机械臂的目标是把充电器从插线板拔下,放到画面右侧,该选择哪一条轨迹?

两个对比模型都被向右延伸的紫色长弧线误导,选择了这条轨迹。它看似朝着目标放置区域延伸,但轨迹根本接触不到充电器。连目标都碰不到,拔取、放置的后续动作自然无从谈起。

「驭物™ Lion-ER-35B-A3B」会逐一排查无效路线,红色偏向插线板左侧,紫色无法接触充电器,黄色伸向后方软管,只有橙色轨迹能够先抵达充电器,完成拔取,再移动到右侧目标位置,4次作答全部正确。

这道题考验的核心,是把目标、路线与具体操作联系起来,不仅要看它通向哪里,还要判断它能否接触目标、完成任务。

题目给出的是在同一住宅内拍摄的三张照片,蝴蝶挂画只出现在第三张。题目要求模型判断拍摄第一张照片时,挂画位于拍摄者的什么方向。

解这道题,需要模型串联多张画面、重建空间布局。挂画出现在第三张图的客厅墙面上,结合另外两张图可以还原空间方位。拍摄第一张照片时,拍摄者站在楼梯底部、面朝台阶,客厅在他身后,因此挂画位于拍摄者后方。

两个对比模型都答成了“左侧”,4次作答无一答对。「驭物™ Lion-ER-35B-A3B」4次判断全部准确。

识别出挂画只是基础能力,难点在于切换到题目指定的拍摄位置与朝向,完成跨视角的空间推理。

这是一段机器人操作视频,任务指令为把桌上的寿司卷放进锅里。问题是,视频当前时刻,第一步“移动到寿司卷”是否已经完成?

基座4次作答中有3次误判该步骤“已完成”,Qwen3.6-27B也有半数回答做出同样误判。「驭物™ Lion-ER-35B-A3B」4次最终答案均判断为“尚未完成”。

画面里出现动作,不等于对应任务步骤已经达成。模型需要观察动作带来的状态变化,核对目标状态是否达成。一旦误判进度,机器人就会提前执行后续动作,整套时序流程都会出错。

四道案例分别对应相机运动判断、动作轨迹交互推理、跨视角空间映射、任务状态进度识别,都是机器人将语言指令转化为物理动作的核心能力。

当下,能够对话、看懂图片的多模态大模型已经十分常见,但真正面向真实物理世界,提升机器人能力的“具身大脑”依旧稀缺。

机器人要完成现实世界作业,不能只做到识别画面内容,还需要区分视觉表象与三维真实空间。

「驭物™ Lion-ER-35B-A3B」带来的,不只是一组亮眼的分数,更是一套可复用的方法论:

让能力成为数据的设计单元,让评测成为数据生产的起点。从能力蓝图到数据配方,从一次评测失败到一批新的训练数据,每一步都有明确的目标、可核查的证据和可追溯的记录。

目前「驭物™ Lion-ER-35B-A3B」已在Hugging Face开源权重,采用BF16 Safetensors格式,原生兼容Transformers、vLLM、SGLang等主流推理框架。

开发者可以围绕空间关系理解、场景状态分析、任务进度判断和空间约束理解等方向开展评测与适配,结合自己的图像、视频和任务,探索具身问答、场景决策分析与机器人系统集成。

招商局狮子山人工智能实验室表示,后续团队将面向具身Agent,拓展工具调用、多轮交互与执行反馈等方面的训练数据,探索长程任务中的连续决策与失败恢复,持续迭代这套能力牵引的数据引擎,为机器人在真实环境中完成任务提供支撑。

Hugging Face模型地址:

https://huggingface.co/cmriat/lion-ER-35B-A3B

正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。

打开原文
去社区讨论 →