arXiv cs.CL· Ke Chen, Xucheng Yu, Yufei Zhou, Haohan Wang·· 5 小时前AI 评分30
提示词稳定性为何重要:通用系统中自动生成提示词的评估与优化
Prompt Stability Matters: Evaluating and Optimizing Auto-Generated Prompt in General-Purpose Systems
AI 导读
研究提出以"语义稳定性"衡量提示词在重复执行下模型响应的一致性,并据此构建首个稳定性感知的通用提示词生成系统,利用稳定性反馈迭代提升提示词质量与系统性能。通过分析系统内部结构依赖,研究证明提示词稳定性是系统级有效执行的必要条件,在通用与领域特定任务上同时提升了准确率和输出一致性。系统 UI 与源码已公开。
来源:arXiv cs.CL · arxiv.org