研究:大模型安全拒答决策随采样设置不稳定
热点事件持续更新
研究:大模型安全拒答决策随采样设置不稳定
1 篇报道1 个报道来源4 小时前更新
先了解这件事
AI 综述
一项新研究测试了 Llama 3.1 8B、Qwen 2.5 7B、Qwen 3 8B、Gemma 3 12B 四个指令微调模型,在 876 条有害提示、20 种采样配置下的安全拒绝行为。作者 Erik Larsen 称,结果显示 18%–28% 的提示出现 REFUSE、PARTIAL、COMPLY 三种标签之间的翻转,即同一提示在不同随机种子或温度下会得到不同处理。 该研究针对的是“模型对有害请求会稳定拒答”这一常见假设,指出安全拒答决策会随采样设置变化。这一不稳定性意味着仅凭单次采样评估模型安全性可能得出不同结论。
AI 根据报道生成 · 3 小时前更新
最新进展10月15日 12:00
随机种子与温度如何暴露 LLM 拒绝行为的不稳定性报道时间线
沿着报道,了解事件的不同侧面。
10月15日
- arXiv cs.CL随机种子与温度如何暴露 LLM 拒绝行为的不稳定性
研究测试 Llama 3.1 8B、Qwen 2.5 7B、Qwen 3 8B、Gemma 3 12B 四个指令微调模型在 876 条有害提示、20 种采样配置下的安全拒绝行为,发现 18-28% 的提示出现 REFUSE/PARTIAL/COMPLY 标签翻转。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。