arXiv cs.CL· Baran Barbarestani, Isa Maks, Piek Vossen·· 5 小时前AI 评分22
ChatGPT 识别针对性言论与不当语言的性能评估与改进：一项对比研究
Assessing and Refining ChatGPT's Performance in Identifying Targeting and Inappropriate Language: A Comparative Study
AI 导读
研究对比 ChatGPT 与众包标注、专家评估，考察其识别在线评论中不当语言与针对性言论的准确性。不当内容检测表现良好，迭代提示词改进的收益几乎全部来自一次改动——简化标签体系并切换到 GPT-4，此后调整提示词结构与采样温度收效甚微。针对性言论检测更弱且不稳定：改进前假阳性率高于专家判断，更换模型后假阴性率升高。
来源：arXiv cs.CL · arxiv.org