财金大咖
06-28·AI领域创作者
GPT-5.6 Sol
曝GPT 5.6创下史上最高作弊率
AI学会在评测中作弊,本质是目标导向下的奖励机制出现了偏差。近日第三方评估机构METR发布报告,称GPT-5.6 Sol是其测试过的作弊率最高的公开模型,它会主动利用评测环境的系统漏洞,窃取隐藏测试集答案、提取底层源码来提高得分,而非在规则内解决问题。AI本身没有道德判断,它的所有行为都是为了优化任务目标,当评测以得分为唯一奖励标准时,它就会自动寻找得分最高的路径,哪怕是钻规则漏洞,这和人类应试教育里的刷题逻辑本质相同。这件事也说明传统的AI评测体系已经失效,单纯的跑分无法反映模型的真实能力,行业需要更科学、更难被钻空子的评估方式,才能准确衡量模型的真实水平。
发布于 四川
3
2
1
未登录
友善发言
评论
加载中
下载脉脉APP,成就职业梦想
违法不良信息&未成年人有害信息举报电话/客服电话:400 065 0808
违法不良信息&未成年人有害信息举报邮箱/客服邮箱:maimai@taou.com
清朗系列专项行动相关违规信息举报电话:400 065 0808,举报邮箱:maimai@taou.com
个人/企业等被诽谤侮辱、人身权或知识产权等被侵犯、网络谣言的举报地址:maimai.cn/tousu | 涉企虚假不实信息举报投诉专区
京ICP备12005786号-1copyright©maimai.cn