Hugging Face Blog·· 14 天前AI 评分57
Hugging Face 博客介绍 ALTK-Evolve 的一致性指南功能
Your Agent Aced the Task. Will It Do It Again?
AI 导读
Hugging Face 博客介绍了 ALTK-Evolve 新增的 consistency guidelines 与 Consistency Analyzer:在 AppWorld test_normal(168 任务)上,GPT-4.1 驱动的 ReAct agent 平均 Mean@5 为 77.4%,但 Pass^5 仅 53.0%,存在 24.4pp 的一致性差距。
来源:Hugging Face Blog · huggingface.co