跳到正文
热点事件持续更新

微软与Hugging Face发布ThinkingBox智能体评估基准

1 篇报道1 个报道来源1 天前更新

先了解这件事

AI 综述

微软与Hugging Face联合发布智能体评估环境与基准 ThinkingBox,按数据库最终状态而非生成文本给智能体打分。基准覆盖 507 个有状态业务流程,每任务重复运行 20 次,报告 pass@1、pass@20 与 20/20 一致性;约八成失败源于工具处理而非推理。 代码、数据集与 OpenEnv 适配器均已开源开放。

AI 根据报道生成 · 4 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月4日
  1. Hugging Face Blog精选
    微软与 Hugging Face 发布智能体评估基准 ThinkingBox,按数据库终态评分

    微软与 Hugging Face 联合发布智能体评估环境与基准 ThinkingBox,按数据库最终状态而非生成文本给智能体打分。基准覆盖 507 个有状态业务流程,每任务重复运行 20 次,报告 pass@1、pass@20 与 20/20 一致性,约八成失败源于工具处理而非推理。代码、数据集与 OpenEnv 适配器均已开源开放。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。