跳到正文
热点事件持续更新

斯洛伐克语原生基准 sk-bench 发布

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

研究团队发布 sk-bench,一个原生优先的斯洛伐克语大语言模型基准,包含 30 个数据集、33 个评分任务变体,覆盖十类技能,其中 11 项资源为首次引入或首次打包用于生成式 LLM 评测。团队称已公开数据与代码。 在统一测试框架下评测 55 个开源与闭源模型,最佳开源模型落后专有 API 12.6 分;对 Qwen3-14B 继续斯洛伐克语预训练会使总分下降 13.9 分,少量指令数据可恢复其中四分之三。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月8日
  1. arXiv cs.CL
    sk-bench:面向斯洛伐克语大语言模型的原生优先基准

    研究团队发布 sk-bench,一个原生优先的斯洛伐克语 LLM 基准,包含 30 个数据集(33 个评分任务变体)、覆盖十类技能,其中 11 项资源为首次引入或首次打包用于生成式 LLM 评测。在统一测试框架下评测 55 个开源与闭源模型,最佳开源模型落后专有 API 12.6 分;对 Qwen3-14B 继续斯洛伐克语预训练会使总分下降 13.9 分,少量指令数据可恢复其中四分之三。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。