花花啦
11小时前·职场领域创作者
测试懂大模型原理,重要吗
懂原理的测试,面试被问得不一样
朋友面AI测试岗,面试官问了三个问题:· “你用什么方法来评估一个对话系统的回答质量?”· “如果AI的输出逐渐偏离预期,你怎么设计监控机制?”· “你认为目前大模型评测体系最大的盲区是什么?”每一个问题都和他对模型工作机制的理解有关,而不是“你会用什么工具来测”。会工具的测试很多,能根据模型本身的特性去设计评测方案的测试很少。区别不在于你会不会用AI,在于你能不能站在系统行为的层面去设计测试方案。你面试被问过这类问题吗?
发布于 江西
分享
评论
未登录
友善发言
image-upload
评论
加载中