arXiv cs.CL· Tapan Parikh·· 3 小时前AI 评分44
105 个语言模型的单词普查:44 个模型族的答案选择趋同
The One-Word Census: Answer-Choice Conformity Across 44 Language Models
AI 导读
一项针对 105 个语言模型的"单词普查"发现,被要求"选一个词"时,超过二十家实验室的模型有 46% 的概率都选了 serendipity。研究用 96 个单轮提示、每模型 8 次、精确匹配打分,测得 96 个类别中有 28 个的单一答案占比至少 80%。轻度后训练和人格微调模型分歧最大,大厂重度后训练的助手最趋同;在 20 个共享类别中,模型群体比人类更集中。
来源:arXiv cs.CL · arxiv.org