Playwright CLI新增规格驱动测试流程
Playwright CLI v0.1.10加入面向AI Agent的规格驱动测试技能,覆盖规划、生成与修复流程。网络检查改用稳定请求索引和细分命令,数据获取命令默认输出原始结果,便于流水线处理。
原文暂未完整获取,基于公开信息的快读
Playwright CLI v0.1.10 新增面向 AI Agent 的规格驱动测试技能,把文字规格到测试维护的过程组织为规划、生成、修复三个阶段。同时,网络检查改用稳定请求索引和细分命令,数据获取命令默认输出原始结果,方便 CI 脚本直接处理。
目前能确认什么
根据已提供的节选,新增的 references/spec-driven-testing.md 为 Agent 提供了 plan/generate/heal 流程:先把规格要求映射为选择器和断言,再生成测试代码,最后在规格或应用变化后修复测试。
规格驱动测试的关键,是让测试断言对应明确的行为要求。例如,规格写明提交失败后应显示错误提示,测试就需要验证这个结果,而不能只检查按钮能否点击。
这次提供的是流程指导,自动维护仍需要团队接线。
节选明确提到,该技能在此版本中是只读参考,没有内置的规格变更检测和修复触发机制。何时运行、如何比较差异、允许修复什么,都需要自行实现。
网络检查方面,原有 network 命令被 requests 及细分命令替代,可以按编号提取请求详情、请求头和请求体。cookie-list、localstorage-list 等命令默认输出不带包装文本的数据,便于交给 jq 等工具继续处理。
我的判断
对已有 CI 的团队,网络命令调整更容易产生直接收益,也需要先处理兼容性:调用旧命令、剥离输出包装文本的脚本,都应检查。
规格驱动流程则适合从行为要求明确的一小组测试开始。真正需要约束的是 heal:页面变化后,Agent 应该修改定位方式,还是报告功能偏离规格?如果只以测试变绿为目标,删除或放宽断言也可能掩盖回归。
目前节选没有讲清修复边界、审批机制,以及请求索引的稳定范围。这些需要原文后续内容或官方文档确认。作者提到的项目收益,也不能直接当作这个版本的效果证明。