跳到正文
热点事件持续更新

IBM 团队对比三款 Agent harness 的 AppWorld 完成率

1 篇报道1 个报道来源2 小时前核心报道更新

先了解这件事

AI 综述

IBM 的 CUGA 团队用同一开源模型 GLM-5.3-flash,在 AppWorld 的 90 个任务上对比三种 harness:CUGA 通过 73/90(81.1%),Hermes 为 42/90(46.7%),Deep Agents 为 27/90(30.0%)。 按三个变体全部通过才算通过的场景口径,CUGA 为 20/30,Hermes 为 8/30。该结果由 CUGA 团队发布,对比的是同一模型下不同 harness 的任务完成率。

AI 根据报道生成 · 2 小时前更新

最新核心报道11月3日 23:57
CUGA 团队对比 CUGA、Hermes 与 Deep Agents:同一模型下 AppWorld 完成率 30% 至 81%

本栏展示直接支持事件的最新报道;时间线也保留相关报道及提及,因此可能出现更晚日期。

报道时间线

沿着报道,了解事件的不同侧面。

11月3日
  1. Hugging Face 博客
    CUGA 团队对比 CUGA、Hermes 与 Deep Agents:同一模型下 AppWorld 完成率 30% 至 81%

    IBM 的 CUGA 团队用同一开源模型 GLM-5.3-flash 在 AppWorld 的 90 个任务上对比三种 harness,CUGA 通过 73/90(81.1%),Hermes 为 42/90(46.7%),Deep Agents 为 27/90(30.0%)。按三个变体全部通过才算通过的场景口径,CUGA 为 20/30,Hermes 为 8/30。

已显示 1 篇,共 1 篇报道。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。