跳到正文
原文
Hugging Face Blog·· 14 天前AI 评分57

Hugging Face 博客介绍 ALTK-Evolve 的一致性指南功能

Your Agent Aced the Task. Will It Do It Again?

AI 导读

Hugging Face 博客介绍了 ALTK-Evolve 新增的 consistency guidelines 与 Consistency Analyzer:在 AppWorld test_normal(168 任务)上,GPT-4.1 驱动的 ReAct agent 平均 Mean@5 为 77.4%,但 Pass^5 仅 53.0%,存在 24.4pp 的一致性差距。

来源:Hugging Face Blog · huggingface.co