arXiv · Robotics· Junxiang Wang, Yuchen Liu, Yi Wu, Guofei Chen, Nir Pechuk, Tao Chen, Zackory Erickson, Yuzhe Qin, Tianyu Li·· 3 小时前AI 评分37
具身智能体该记住什么?MeMoREval 基准评测记忆模态
What Should Embodied Agents Remember? Benchmarking and Evaluating Memory Modality for Embodied Agents
AI 导读
研究者推出 MeMoREval 基准,通过受控的“经历-请求”协议评测具身智能体的记忆模态,涵盖 4 个仿真室内环境中的 53 个任务,并同时衡量任务成功率与记忆构建、使用的推理成本。参考评估显示,存储帧比存储生成描述在更低写入时推理成本下表现更好,帧加场景图在所有测试模型上取得最高总体任务成功率;两项实体机器人演示验证了该协议可扩展到仿真之外。
来源:arXiv · Robotics · arxiv.org