测试运用AI定位隐性bug，落地难点在哪
AI定位隐性Bug这件事，听起来很美好，做起来全是坑。第一个坑是AI会"假装"发现了问题。GUI Agent在测试中经常把系统缺陷误认为是自己的操作错误。它跑了一遍测试，报告说"一切正常"，但实际上它根本没发现那个藏在深处的逻辑漏洞。你信了AI的报告，上线之后崩了，锅还是你的。AI测了等于没测，你还得多花时间验证AI的测试结果。第二个坑是AI的测试结果不可解释。传统测试用例失败了你知道为什么，AI测试失败了它给你的是一堆概率和权重。你不知道它是真的发现了Bug，还是只是模型抽风了。MIT的研究表明，智能体的内部状态根本无法被白盒观测。你只能相信它的输出，但你凭什么相信它。约90%的企业已开展AI测试实践，却仅有15%实现全公司级落地。这数据说明大家都在试，但真正敢把AI测试结果当真的没几个。AI测试还在从"能不能做"走向"能不能信"的路上。
发布于 四川
分享
评论
赞
未登录
友善发言
评论
加载中
