arXiv cs.LG· Jie Wang, Yanbo Sun, Zheng Yan, Jiahe Lan, Elisa Bertino·· 7 小时前AI 评分22
LLM4Trust:探索大语言模型在信任评估中的能力
LLM4Trust: Exploring the Capabilities of Large Language Models for Trust Evaluation
AI 导读
研究者提出 LLM4Trust,首个系统探索 LLM 信任评估能力的基准框架,建模五种基本信任属性并设计对应理解任务,在九种提示方法下评估八款代表性 LLM。实验显示 LLM 能有效理解信任属性并在有限监督下具备实际评估潜力,但易受针对信任图和 few-shot 示例的攻击,且推理成本高,为此提出防御机制与批量推理提升鲁棒性和效率。
来源:arXiv cs.LG · arxiv.org