跳到正文
热点事件持续更新

CAPSafe基准评测具身智能体安全推理能力

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Youmna Farag 等研究者发布 CAPSafe 基准,用于评测大语言模型驱动的具身智能体的安全推理能力,涵盖动作级与规划级两个层面。评测九个闭源与开源大模型后发现,模型在危险识别与安全长程规划之间存在明显差距;Gemini-3-pro 的安全成功率最高,为 78.19%,其余模型均低于 65%。 CAPSafe 的设定中,危险是情境化的(需从物体属性推断),同一环境内可同时存在多个危险,并为每个危险标注相对严重程度,以便进行细粒度分析。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月21日
  1. arXiv cs.RO
    CAPSafe 基准评测大模型在具身智能体中的动作与长程规划安全推理

    研究者提出 CAPSafe 基准,从两个层面评测大语言模型驱动的具身智能体的安全推理能力:动作级数据集判断单个动作在给定环境上下文中是否安全,规划级数据集评估智能体能否为复杂的危险家庭任务生成安全的长程规划。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。