AI EarlyView
Pro
AI EarlyView
← 最新论文日报
10月2日· 周五

arXiv 论文日报

智能体长跑与评测

今天最值得关注的是智能体长期运行与评测可靠性:ReLiveGym 和 DAYJOB 分别从数周重放和长周期专业任务检验智能体耐力,而 Agent 评测可靠性研究揭示排行榜受脚手架影响,增加任务未必可靠。此外,记忆系统 LabBook 与 MemFit 为长程智能体提供高效历史利用方案。

📄 10 篇精选</> 6 篇带代码🏆 1 篇 SOTA
📈 趋势速览智能体研究正从短任务转向长周期、真实场景的持久运行,ReLiveGym、DAYJOB 等基准强调数周级自主性;同时评测可靠性争议升温,模型-框架交互和脚手架效应被系统审视;记忆系统 LabBook、MemFit 聚焦高效历史利用,支撑长期智能体。
1
Kepler: Auditable World Models for ARC-AGI-3
💡 可执行世界模型满分通关ARC-AGI-3,可审计性突出。
智能体Wensen Wu
2
FutureWorlds: Learning Robotic World Models from Alternative Futures
💡 多未来预测学习提升机器人世界模型泛化。
机器人Hao Wu、Shengju Qian、Weiyan Wang 等
3
Can AI Scientists Coordinate at Runtime?
💡 运行时动态协调突破固定工作流,提升AI科学家灵活性。
智能体Zijian Liu、Yangzhixin Luo、Junyu Lu 等
4
GUI-HARVEST: Self-Improving GUI Agents through Evidence-Driven Harness Evolution
💡 证据驱动框架进化让GUI智能体自我改进。
智能体Geyi Yang、Zikun Qu、Xiang Li 等
5
Finding the Right Fit: Model-Harness Interactions across Agent Tasks
💡 揭示模型排名因框架反转,选型需看组合。
智能体Yixuan Li、Yiyun Zhou、Yao Long Teng 等
6
ReLiveGym: Evaluating Long-Lived Agents over Weeks of Replayed Reality
💡 数周重放现实评测长期存活智能体,填补空白。
智能体Xisen Jin、Jingheng Li、Zhenglun Chen 等
7
LabBook: Harnessing Experimental History for Efficient LLM-Driven Discovery
💡 实验历史记忆机制避免上下文冗余,加速科学发现。
智能体Bo Yuan、Wenqian Ye、Zelin Zhao 等
8
MemFit: Efficient Long-Term Agentic Memory
💡 逐字存储降低写入成本,实现高效长期记忆。
智能体Mitchell Piehl、Muchao Ye
9
DAYJOB: A Benchmark for Long-Horizon Professional Work
💡 130个医疗金融长任务考验专业工作能力。
智能体Stephanie Finley、Liudas Panavas、Thomas Mikkelson 等
10
Agent Evaluation Reliability: More Tasks Won't (Always) Fix An Agent Leaderboard
💡 指出增加任务未必提升评测可靠性,需区分模型与部署。
智能体Michael Hardy、Ruhana Azam、Anka Reuel 等

生成于 09:31 · 来源 arXiv · AI 编排

往期日报