霍格沃兹测试开发学社
08-07 · 北京测吧
视频大模型正在改写软件测试的验收标准 三
2. 指令遵循测试很多视频看起来很好,但并没有完整执行提示词。例如:一名穿蓝色工装的测试工程师站在机房中,左手拿着平板,右侧服务器亮起红色告警灯,镜头缓慢向前推进。可以把提示词拆成7个检查项:画面中只有一名主要人物;人物处于机房场景;人物穿蓝色工装;平板位于人物左手;服务器机柜位于画面右侧;机柜上出现红色告警灯;镜头存在缓慢推进动作。然后计算:指令遵循率 = 正确满足的约束数量 ÷ 总约束数量这种拆解比“整体效果不错”“基本符合要求”更容易执行,也方便比较不同模型版本。对于广告、电商和培训类视频,指令遵循往往比画面美观更重要。商品颜色错了、人物数量错了、操作步骤错了,即使画质很高,也不能交付。3. 时序一致性测试一张图片只需要检查一个瞬间,一段10秒、24 FPS的视频包含约240帧画面。常见问题包括:人物在中途变脸;手指数量发生变化;衣服颜色前后不一致;商品Logo突然消失;背景中的门窗位置移动;人物行走时出现滑步;屏幕文字不断跳动;镜头切换后主体身份改变;物体凭空出现或消失。人工逐帧检查成本很高,可以结合计算机视觉工具完成初步筛查:视频抽帧人物和物体检测目标跟踪统计主体丢失和ID切换分析连续帧差异标记闪烁、突变和异常帧自动检测无法完全替代人工,但可以先把问题片段筛出来,减少评测人员的观看成本。4. 音画同步测试H3 可以同时生成画面和立体声音频。它的音频并不是后期简单拼接,而是由模型与视频内容共同生成。测试时至少要覆盖:人物口型是否与语音一致;台词内容是否与提示词一致;动作音效是否出现在正确时间;环境音是否符合场景;左右声道是否正常;是否存在破音、爆音或长时间静音;背景音乐是否遮挡对白;多语言发音是否准确;字幕、语音和画面表达是否一致。例如,提示词要求:红色告警灯亮起后,机房响起三声警报。检查点就不能只写“存在警报声”,还应包括:告警灯先亮;一共出现三声;警报出现在亮灯之后;三次警报之间没有异常重叠;声音与场景匹配。这是典型的跨模态时间轴验证。本文部分内容参考了霍格沃兹测试开发学社整理的相关技术资料,主要涉及软件测试、自动化测试、测试开发及 AI 测试等内容,侧重测试实践、工具应用与工程经验整理。
发布于 北京
分享
评论
未登录
友善发言
image-upload
评论
加载中