宾大研究揭示:对 AI 越 “粗鲁”,答案越精准!
宾夕法尼亚州立大学最近发布了一项引人注目的研究,标题为《Mind Your宾大 Tone》,探讨了与大语言模型互动时提问方式对回答准确性的影响。研究显示,使用直白研究甚至粗鲁的语气进行提问,往往能够获得比礼貌表达更准确的答案。
为此,研究团队设计揭示了一个包含50道中等难度选择题的测试集,题目涵盖了数学、科学和历史等多个领域。:对针对每道题,研究人员准备了五种不同的提问方式。
研究的对象是 OpenAI 最新的 GP AT-4o 模型。为了确保实验的客观性,研究者要求模型忽略先前对话,仅输出选项字母作为I 答案。结果显示,当使用粗鲁语气提问时,GPT-4o 的正确率高达84.8%,越 而礼貌提问的准确率仅为80.8%,二者之间的差距达到4个百分点。
研究人员“粗认为,过于客气的表达往往会掺杂大量不必要的修饰和客套,这些内容可能干扰模型抓取核鲁”心问题。而直接的提问方式虽然缺乏礼貌,却能使模型更集中于问题本身,从而提升,答回答的准确性。
需要注意的是,这一规律并不适用于所有 AI 模型。研究团队还对比了 GP案越T-3.5和 Llama2-70B 等较早期模型,发现这些模型对礼貌提问的反应更为积极精准,粗鲁语气反而可能导致回答质量下降。这说明,新一代模型在训练过程中接触了更多样化的宾大提问语气数据,使其能够在非礼貌语境下保持或提升表现。
未经允许不得转载:>一言兴邦网 » 宾大研究揭示:对 AI 越 “粗鲁”,答案越精准!
一言兴邦网



