跳到正文
热点事件持续更新

ToolRACER合成数据管线与基准发布

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

Arkajyoti Chakraborty等作者发布ToolRACER,一套协调用户、助手与工具仿真模型来生成并验证多轮交互的合成数据生成管线,并据此构建基准ToolRACERBench。该基准覆盖六个领域、55种人物设定,产出5.6K条经验证的对话轨迹,其中约66%包含易失败场景。 作者称,在ToolRACERBench上训练的模型在τ²-bench与ACEBench上的端到端智能体准确率均有提升,与小语言模型域内数据集混合时增益显著。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月8日
  1. arXiv cs.CL
    ToolRACER:面向智能体训练与评估的鲁棒对话仿真资源

    ToolRACER 是一套合成数据生成流水线,协调用户、助手与工具仿真模型生成并验证多轮交互,据此构建的 ToolRACERBench 覆盖六个领域、55 种人物设定,产出 5.6K 条经验证的对话轨迹,其中约 66% 包含易失败场景。在 ToolRACERBench 上训练的模型在 τ²-bench 与 ACEBench 上的端到端智能体准确率均有提升,与小语言模型域内数据集混合时增益显著。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。