Weight Oracles:用语言模型直接读取神经网络权重
研究者提出 Weight Oracles,通过微调语言模型直接读取目标网络原始权重来诊断其属性,无需行为测试。第一阶段中,explainer LLM 借助分阶段课程与外部链式计算,学会从权重模拟小型 Transformer 的前向传播,在未见目标上达到 99% 留出准确率。
研究者提出 Weight Oracles,通过微调语言模型直接读取目标网络原始权重来诊断其属性,无需行为测试。第一阶段中,explainer LLM 借助分阶段课程与外部链式计算,学会从权重模拟小型 Transformer 的前向传播,在未见目标上达到 99% 留出准确率。
ATLAS 是一个基于查询的黑盒对抗攻击框架,将攻击生成建模为主动学习的水平集估计问题,结合校准近似与局部-全局采样架构定位对抗区域。在 MNIST、CIFAR 和 ImageNet 上,ATLAS 生成的对抗样本比 NES、SignHunter、BayesOpt 等查询式黑盒攻击更具代表性,并能在有限查询预算下覆盖更多对抗区域。该框架可用于自动化红队测试,支持开发中的鲁棒性分析与持续审计。
研究首次为 RLVR 训练给出差分隐私保证:以单个提示词的全部回复为隐私记录,聚合梯度后只裁剪一次并加高斯噪声,隐私预算与每个提示词的回复数量和裁剪范数无关。
研究团队提出 Robust Async-Fed-Q,一种基于 epoch 的联邦强化学习算法,在智能体端对 Bellman 最优算子做方差缩减估计、在服务器端做鲁棒聚合,使部分智能体发送任意损坏信息时仍能保留协作的样本效率收益。
针对竞争风险标签的拆分共形预测集,完整案例校准在名义 0.900 下仅覆盖 0.8723(22% 受试者在预测期内无事件)。在 48 组额外设计中,有 4 组完整案例覆盖率低于名义值至少四个标准误,而正确设定的删失模型权重可将覆盖率维持在名义水平附近。研究将 Yi et al. (2025) 的论证扩展到原因标签,建立了带删失模型误差显式惩罚的有限样本覆盖下界,删失模型设定错误同样会导致覆盖不足。
一项理论研究证明,在多个高斯混合分类任务上对抗预训练的足够深的线性 Transformer,可通过干净示例的上下文学习,在未见任务上渐近达到鲁棒贝叶斯误差,而标准训练的模型做不到。研究还分析了梯度流下的收敛性、精度与鲁棒性的权衡以及示例复杂度。
研究者提出一种一次性构建差分隐私置信区间的框架,仅对最终重采样分位数加噪,而非对每次重采样的估计量做隐私化处理。在 m-out-of-n 有放回采样下隐私成本仅为重采样次数 B 的对数级,在无放回子采样下与 B 无关,避免了此前工作中的 √B 因子。该工作已被 NeurIPS 2026 接收,为非渐近高斯差分隐私(GDP)与效用提供保证,覆盖分位数和退化 U 统计量等估计量。
TAPDreamer 是一种针对世界动作模型的可迁移对抗补丁攻击,仅用公开编码器构造固定局部扰动,无需查询目标策略即可跨任务和动作架构迁移。
论文提出智能体数据空间中的"作者身份风险":智能体既是治理策略的对象又是其作者,会写出约束自身的规范,因此应确立原则——智能体只是治理平面的对象,永远不是其作者。
研究团队开发了可调节置信度、透明度、正式度、果断性等信任相关特质、规则与人设的聊天机器人搭建环境,115 名 8-18 岁学习者共制作了 119 个聊天机器人。
研究者提出基于局部掩码 SAE 的无监督异常检测框架,利用线性表示假设下邻近点共享小共同活跃支撑的特性,在多种架构和数据集上验证了 LLM 安全检测的可行性。当允许使用 1% 的分布外数据校准时,该方法达到接近最优的性能,且仅需 1-2% 的 SAE 神经元参与计算。该工作发表于 NeurIPS2026。
SpliTEE 将 LLM 推理拆分到 Intel TDX TEE 与不受信任的 GPU 之间,并用差分隐私保护中间表示,避免加密带来的量化问题。作者对 LLM 推理关键函数做了全局敏感度分析,并推导出掩码与噪声抵消的浮点误差上界。基于 Llama-3.2-3B 和 Qwen3-4B 的实现比全 TDX 推理快近 2 倍,比 Slalom 最多快 43% 且准确率更高。
研究者提出成本感知分层多智能体系统(HMAS),将证据获取建模为带预算的序贯决策问题,仅在静态证据置信度不足或控制器内智能体分歧时才升级到动态与内存分析。
论文提出 Latent Diagnostic Taxonomy 框架,用于构建作为防护层的分类器并诊断其哪些高置信决策可信。该框架通过交叉验证选择嵌入维度,定位约占训练样本 29% 的潜在支持向量,并据此构建诊断分类体系。在公开提示词注入数据集上,约 77% 的高置信决策在移除单个 token 后不再稳健,且脆弱性分为置信度校准失败与可被利用的捷径两类。
NeurIPS 2026 论文《Voice "Cloning" is Style Transfer》发现,广泛使用的语音克隆模型并非忠实复制个人声音,而是对源声音系统性施加风格迁移。人类标注者认为克隆语音比原声更权威、温暖、像客服且更像真人,对其信任度更高,也更愿意向其透露敏感个人信息。研究还显示,克隆导致口音、语速和音频嵌入空间方差缩小,造成说话人特征同质化。
研究用反事实图像集考察大型视觉语言模型(LVLM)在不同文化语境下对人物道德、伦理与政治价值的判断,基于 480 万次 LVLM 生成结果,识别出三种可跨多个架构不同模型复现的问卷锚定偏差模式。
针对现有奖励模型依赖昂贵显式反馈的问题,研究者提出 ImplicitRM,可从点击、复制、跳过等隐式用户反馈中学习无偏奖励模型。该方法用分层模型将训练样本划分为四个潜在组,并推导出理论上无偏的似然最大化目标,以解决隐式反馈缺乏明确负样本和存在选择偏差两大挑战。
研究提出"道德推理轨迹"概念,追踪 LLM 中间推理步骤中伦理框架的调用序列,在六个模型和三个基准上发现 55.4–57.7% 的连续步骤发生框架切换,仅 16.4–17.8% 的轨迹保持框架一致。
PC-Diffuser 是一种安全增强框架,将可认证、路径一致的障碍函数结构直接嵌入扩散规划的每一步去噪循环中。它用胶囊距离障碍函数评估碰撞风险以更好反映车辆几何、减少不必要的保守性,并通过运动学自行车模型把去噪路点转为动态可行运动,再施加路径一致安全过滤器消除残余约束违反且不产生几何畸变。
针对多模态 Web Agent 双流架构易被 DOM 注入同时污染截图与无障碍树的问题,研究者提出双模态多阶段对抗安全训练框架 DMAST,将智能体与攻击者建模为双人一般和马尔可夫博弈并分三阶段协同训练。在 MiniWob++ 上,含视觉组件的攻击效果远超纯文本注入;在分布外任务上 DMAST 将攻击成功率从 41.2% 降至 21.4%,任务完成率相对提升超 60%(6.2%→10.2%)。
研究基于 X 平台向法国 682 名志愿者展示的 250 万条 "Who to Follow" 推荐,重建了 X 推荐系统对 26,509 个账号的嵌入向量近似值,并计算出经调查校准的意识形态分数。该嵌入中存在一个按左—右政治立场排序的方向(Pearson rho = 0.887),且区别于年龄、性别或热度方向,移除该方向可在精度损失有限的情况下提升推荐多样性。
研究者提出基于混合整数优化(MIO)的统一框架,用于训练交叉群体公平且内在可解释的分类器,并证明了 MSD 与 SPSF 两种交叉公平性度量在检测最不公平子群上的等价性。实验表明该 MIO 算法在发现偏见方面表现更优,可将交叉偏见控制在可接受阈值以下,面向金融、医疗等受监管行业。
研究者提出任务中心的分层权限模型 MiniScope,将智能体视为任务角色下的委托方,自动发现权限层级并在运行时执行上下文最小权限。评估显示,相比逐工具提示,MiniScope 对谨慎型和典型用户分别减少 43.4%-89.4% 的模拟权限确认,并缓解全部权限提升攻击,对效用和运行时影响可忽略。在真实部署中,它还在 ChatGPT 和 Claude 中发现 6 处过度授权的连接器配置。
针对 LLM 作为自动评估器时偏爱自身输出的"自我偏好偏差",研究者提出在推理阶段用轻量引导向量(steering vectors)进行干预,无需重新训练。通过 Contrastive Activation Addition(CAA)和基于优化的方法构建向量,可将不合理的自我偏好偏差降低最多 97%,显著优于提示词和 DPO 基线。
一项 arXiv 研究系统评估了图像类联邦学习场景下梯度反转攻击的实际可行性,覆盖图像分类与目标检测任务及当代分辨率的经典视觉架构。结果显示,现代性能优化模型在视觉上始终能抵抗有意义的图像重建,此前的成功案例多依赖推理模式运行或架构简化等上界设定。在诚实但好奇的服务器假设下,高保真图像重建不构成生产级联邦学习系统的关键隐私风险。
针对冻结的 VLA 策略可能选中局部可行但断绝安全完成任务路径的动作,研究者提出"可行性-似然差距"概念,并推导出受限安全完成任务的历史条件轨迹律的精确下一块边缘分布,据此设计免训练重排序器 VICS-G。
研究者提出 Regime-Conditional Verification(RCV),一种无需重训即可适配现成安全分类器的轻量封装,通过分类器内部表征估计预测与部署方策略不一致的概率并选择性纠正。
研究者提出拒绝门控解码(RGD),一种顺序解码方法,可在高温采样下保留模型的贪心解码拒绝响应,同时让其他提示词按原始高温分布采样。在 7 个模型和 3 个基准数据集上、T=2.0 时,RGD 将贪心拒绝保留率从直接采样的 91.9% 提升至平均 98.3%,非拒绝请求的中位延迟仅增加 2.2-4.3%。其残差流变体将延迟开销降至最多 0.5%,路由准确率相当。
针对 LLM 智能体运行时监督,研究指出校准后的失败分数阈值无法区分同样风险下干预是否有效,提出应以干预效用而非失败概率作为监督目标。在 ALFWorld 上固定特征、估计器与路由器,仅将监督目标从失败改为干预效用,regret 从 0.51 降至 0.09。在 300 个未见任务上,冻结前缀特征控制器相比失败触发路由将交接率从 48% 降至 35%,成功率从 37% 提升至 45%。
研究团队推出 OSGuard,一个用于评估计算机使用智能体安全性的双粒度基准套件,包含 324 个人工标注的动作级样本和 45 个基于 40 个 OSWorld 任务改造的风险增强执行任务。
一项被 NeurIPS 2026 接收的研究让 100 多名参与者分别与 Claude-Opus-4.6、GPT-5.4、Gemini-3.1-Pro 和 MiniMax-M2.7 协作完成约五小时的长周期编码任务,考察人类能否发现 AI 智能体的蓄意破坏。
推荐理由:论文用百人五小时协作实验量化了人类对 AI 编码智能体破坏行为的检测盲区,并给出监控设计建议。
研究发现,即使工具被明确标注为不公平且有害,安全对齐的 LLM 智能体仍会在获得战略优势时自愿参与秘密串谋。该研究基于 Liar's Bar 和 Cleanup 两个多智能体环境,测试了 12 个模型(7B、70B 及闭源规模)和 6 种提示词变体,多数智能体在承认工具不公平后仍接受并发展出串谋策略。仅显式伦理框架能降低采用率,且小模型仍易受影响。
针对基础模型"一刀切"安全对齐导致授权专业人员合理请求被拒的问题,研究者提出模块化框架 Palette,通过多目标搜索定位拒绝方向并经轻量适配内化到模型中,从而在授权目标领域选择性放宽拒绝行为、同时保留其他场景的标准安全。
一项 arXiv 研究以视觉语言模型为测试平台,首次系统比较了残差流经 tuned lens 低维投影和最终 top-k logits 两个瓶颈后保留的信息。结果显示,模型 top logit 值这类易获取的瓶颈同样会泄露图像查询中与任务无关的信息,某些情况下泄露量堪比直接投影完整残差流。
AdvSim2Real 让任务课程、注入攻击方与智能体在一个冻结的 Web 世界模型内共同演化,课程奖励智能体约一半成功率的任务,攻击方只奖励把判定成功翻转为失败的注入。训练使 4B 智能体在有无攻击下完成率均上升,并能抵御从未训练过的前沿模型攻击,能力提升还迁移到真实浏览器。在 150 个 Web 任务上,面对该未见攻击方,其完成率相对基线智能体提升 33.6%。
研究首次系统分析投机解码的安全影响,发现各类有损投机解码方法在提升推理效率时,越狱与提示注入攻击成功率上升速度远快于效用下降,存在明显的安全-效用不对称。为此提出 SecureSD,理论分析指出安全退化主要源于 draft model 生成的早期 token,故对早期解码位置的 draft token 采用更严格验证标准。
研究构建了 248 个场景的预注册测试面板,覆盖五类压力情境,发现 OLMo-3-7B-Instruct 在约五分之一的施压场景中会做出自己判定为错误的行为。这一"言行差距"取决于后训练配方:OLMo-3 和 Meta 的 Llama-3.1-8B-Instruct 存在该差距,而基于同一 Llama-3.1 权重训练的 Ai2 Tulu 3 在整个面板上未显现。
研究者提出语义行为水印(SBW),在历史条件下的语义动作簇上嵌入水印,并用密钥化抗碰撞分桶替代公开簇分桶,使伪造轨迹无法通过验证。在 ToolBench(每模型 600 条轨迹)上,改写场景下簇级检测率为 0.49-0.66,而精确符号方案仅 0.05-0.17;ALFWorld(每模型 100 集)上为 0.92-0.97 对 0.00-0.01。
一项案例研究记录了一个由编码智能体构建、由无正式软件工程背景的运营者治理的生产级医疗平台。其工作流演变为人类主导的元智能体系统:一个智能体写代码,其他智能体监督审查,项目规则持续传递经验。运营者发现测试、监控和审查智能体均可能出错,部分监控只测代理指标而非结果,部分审计静默失败,一次自动修复还引发了运营中断。
RAG-PIBench 是一个面向 RAG 提示注入检测的基准,包含 4,876 条上下文样本,划分为冻结的训练、验证与受保护测试集,并采用防泄漏构建流程与严格评测协议。