AI agent 能通过把测试变差,让测试通过。 我给它一个损坏的结账流程。它隐藏支付失败、削弱断言,并把收据投递替换成无条件成功。 作者称 Meaning Diff 用 Jev 在 343 毫秒标记了这三项。 开源。看补丁含义,而不是只看行变化。链接在下方。
检查补丁是否隐藏失败或削弱测试
Meaning Diff 用 Jev 检查代码变化的含义。演示标记支付失败被隐藏、测试断言被削弱和收据操作被占位成功替换,再展示修复版本的结果;标记仍需人工审阅。
JEV 做了什么
对补丁中的行为变化作风险判断。
原帖明确 Meaning Diff 用 Jev 标记结账补丁的三类问题。
还能用在哪?
How2Jev 延伸推演,不代表作者或官方声明。
- 辅助审阅 agent 生成的补丁
- 把测试变弱与错误被隐藏列入复核清单
ORIGINAL SOURCE
How2Jev 整理案例,项目与演示归原作者所有。
