跳到正文
arXiv cs.AI· Jose Hernandez-Orallo·· 8 小时前AI 评分29

首个基于 LLM 的 Levin Kt 超智能 C-test 基准发布

Artificiality's First Exam: An LLM-Referenced C-test for Supraintelligence

AI 导读

研究者提出首个以 LLM 作为表示机器的 Levin Kt 测试,可在人类和前沿模型解出之前生成高难度、以比特为单位计量的认证题目。团队构建了轻量级生成与认证流程,并生成首批认证题集测试了 12 个 LLM,得到的智能体特征曲线随难度上升而下降,延伸至可认证但超出前沿智能能力的超智能窗口。

来源:arXiv cs.AI · arxiv.org