17173 > 游戏资讯 > 科技新闻 > 正文

研究证实:AI 大模型跨多轮对话任务表现不佳,性能最高降 39%

2026-03-01 08:01:21 神评论
17173 新闻导语

AI大模型跨多轮对话表现不佳,性能最高降39%!研究揭示代码、数学等六大任务问题,Python任务仅损失10%-20%。点击了解解决方案和最新进展。

3 月 1 日消息,据 THE DECODER 报道,新一代大语言模型(从 GPT-5 及后续版本开始)在任务需要跨多轮对话完成时,表现依然不佳。研究员菲利普 · 拉班(Philippe Laban)及其团队在代码、数据库、操作指令、数据转文本、数学计算、文本摘要这六大任务上对现有模型进行了测试。当信息被拆分到多条消息中(分片式),而非集中在单次提示词里(拼接式)时,模型性能会显著下降。

注意到,更新的模型表现略好一些,性能降幅从 39% 缩小到 33%,但问题远未解决。Python 任务的提升最为明显,部分模型仅损失 10%–20% 的性能。拉班认为,实际场景中的性能损失可能更严重,因为测试只使用了简单的用户模拟;如果用户在对话中途改变想法,性能下降幅度可能会更大。

原始研究发现,调低温度值(temperature)这类技术微调无法解决这一问题。研究人员建议:一旦出现异常,重新开启一段新对话,最好先让模型把所有请求总结一遍,再用这份总结作为新对话的起点。

【来源:IT之家】
关于AI大模型,跨多轮对话,性能下降,GPT-5,语言模型,任务测试,分片式信息,温度值,对话重启,Python任务的新闻
亲爱的 17173 玩家们~我们正在打磨平台的找游戏功能,想听听你平时是怎么筛选、导航找游戏的?你的真实习惯和偏好,能让后续找游戏更顺手哦!立即点击填写问卷 参与问卷