测试负责人:陆谨(软件测试专家团 · 测试架构师)|执行档:review(离线)+ 内网浏览器 E2E + 远程节点派发|静默无人值守 基线:R213
7e14e2b7c→ 窗口零源码变更(本地3ad691c7f仅测试文档补丁;251origin/main前进至b7bbdf963= 研发第181轮汇报 + auto bump,零 src)→ 本轮无窗口新增,后端全量承采 R213 实跑证据 本轮头条:① 全站与 R213 严格零漂移(第 34 次)——全部套件逐字段一致,无任何确定性变化;② langgraph@251 红集分布漂移但总数 6、根因同源(429+401 环境型,B-208-3 第 12 轮);③ 浏览器 E2E 28 过 + 2 跳(本机节点);④ 后端test-compileEXIT=0(B-203-5 闭环持续有效)
| 项 | 内容 |
|---|---|
| 上次审查 | R213(2026-11-15 08:46~10:15),结论「不通过(有条件):窗口含 fix(dashboard) 功能修复 → 后端全量首次实跑 501 类 / 4342 例 / 89.86%,确定性红零漂移第 33 次」 |
| 本次 | 第 214 轮,非首次审查 |
| 历史遗留 → 本次状态 | B-208-1 189 DNS/502 → 第 7 轮,本轮本机探活 189 000(不可达),admin 仍由本机交叉覆盖 5/5B-208-3 langgraph 429+401 → 第 12 轮,红集 6(auto_tag 2 + intent 4),仍为上游配额/key 噪声 B-208-2a~2e 后端 16 例确定性红 → 承采 R213 全量双证 16/16,仍待研发 B-36 根级 9082 未起 → 第 91 轮,7 过 / 16 红(全 ECONNREFUSED) B-DX-1 dx 2 跳(404) → 第 48 轮 B-208-5 cfc-web 132 vs 119 → 第 10 轮(3 个本地未入库文件) B-213-1 fix(dashboard) 后端用例缺口 → 前端 9 例已补绿,后端 PV/UV 仍缺(P1)B-213-3 CI 清单失真(漏拦 67 / 陈旧 26)→ 第 2 轮 B-213-5 ShopCouponClaimApiContractTest 假绿 → 第 2 轮 |
| 本次新增 | 无(窗口零源码/SRS/场景变更,全部套件与 R213 逐字段一致) |
历史记忆只作对照:本轮 cfc-web、cfc-frontend、浏览器 E2E、根级、线上 API、langgraph、后端编译均为重新取证;后端全量为承采 R213 实跑(窗口零 src 变更,合理承采)。
| 套件 | R214(本轮) | R213(上轮) | 漂移 |
|---|---|---|---|
| 基线 | 7e14e2b7c → 窗口零 src(251 至 b7bbdf963) |
7e14e2b7c(19 提交,含 1 功能修复) |
零变更 |
| 后端 · 全量 | 承采 R213:501 类 / 4342 例 / 3899 过 / 429F+10E=439 红 / 4 跳 = 89.86% | 501 类 / 4342 例 / 3899 过 / 439 红 / 4 跳(1:06h 实跑) | 承采(零窗口新增) |
| 后端 · 编译 | mvn -o -B test-compile EXIT=0(1m21s) |
EXIT=0(rebase 后 508 测试源) | ✅(B-203-5 持续有效) |
| 浏览器 E2E · admin | 本机 5/5(1.2m,EXIT=0) | 本机 5/5 | 零漂移 |
| 浏览器 E2E · frontend | 真实站点 /frontend 6/6(43.2s,EXIT=0) |
真实站点 6/6 | 零漂移(B-213-2 已纠偏) |
| 浏览器 E2E · shop / health / dx | shop 4/4(3.3s)· health 13/13(4.1s,匿名全 401)· dx 2 跳(404) | 4/4 · 13/13 · 2 跳 | 零漂移 |
| cfc-web Jest | 132/132(21 套,22.99s) | 132/132(21 套) | 零漂移(B-208-5 第 10 轮) |
| cfc-frontend Jest | 644 过 / 4 红 / 12 跳 / 660(46 套,22.71s) | 644/4/12/660(45 套) | 例级零漂移(4 红逐例一致;套数 +1 系本地未入库 pages/shop/ 被扫描计入) |
| 根级黑盒 Jest | 7 过 / 16 红 / 23(26.25s,全 ECONNREFUSED 9082) |
7/16 | 零漂移(B-36 第 91 轮) |
| 线上 API(点名 4 文件) | 25 过 / 0 红 / 7 跳 / 32(20.5s) | 25/0/7 | 零漂移 |
| langgraph@251 | 37 过 / 6 红 / 43 例(114.43s) | 37/6/43(134.41s) | 红集分布漂移(auto_tag 4+intent 2 → auto_tag 2+intent 4),总数 6 一致,根因同源环境型 |
| 189 节点 | 探活 000(本机 curl 192.168.16.189 不可达) |
189 节点实测 502 | 未改善(第 7 轮) |
全站可测合计(本轮口径,无窗口新增):5262 例 / 4772 过 / 465 红 / 25 跳
测试结果有变化(R213 → R214):
auto_tag 4+intent 2 → auto_tag 2+intent 4;根因同为 429 AgnesAI free rate limit + 401 key ****ab12 invalid(B-208-3 第 12 轮,环境型,非源码回归)cfc.iwintrue.com/frontend + Web 管理端 cfc.iwintrue.com/admin)。ai.etotem.com.cn)。@Test 4376,含本地未入库 5 文件)+50 例 vs R213 的 508/4326;控制器 371 / handler 2019(覆盖 556 = 27.5%)· 结构化用例 726 / Playwright 571 / Python 48 / 场景文件 11。http://git.iwintrue.com/liaoxg/cfc.git(SSH 仍失效,承 B-203-3)。| # | 测试类型 | 层次 | 状态 | 证据(本轮) |
|---|---|---|---|---|
| 1 | 单元测试 | 功能层次 | 已发现 | 后端 501 类(承采 R213 全量实跑)+ cfc-web 21 套 132 例 + fe 46 套 660 例 |
| 2 | 组件测试 | 功能层次 | 已发现 | cfc-web/src/__tests__/components/*、cfc-web/src/views/admin/review/__tests__/ |
| 3 | 集成测试 | 功能层次 | 已发现 | 后端 integration/** 随全量执行(承采 R213);StatsControllerTest 6/6 绿(承采) |
| 4 | 契约测试 | 功能层次 | 已发现 | 66 个 *Contract* 类 / 423 例预期红(承采 R213) |
| 5 | 接口 API 测试 | 功能层次 | 已发现 | 线上 API 32 例(25 过 / 7 跳)+ health 13/13 + shop 4/4 + dx 2 跳 |
| 6 | 系统/端到端 | 功能保障 | 已发现 | Playwright live:admin 5/5 + frontend 6/6(真实站点)实跑 |
| 7 | 验收 UAT | 功能保障 | 部分已发现 | 场景文件 11 份有资产,仍无 UAT 执行记录 |
| 8 | BDD 规格 | 功能保障 | 未发现 | 无 .feature/cucumber → 缺口 |
| 9 | 冒烟测试 | 功能保障 | 已发现 | playwright.config.smoke.js + api-smoke 4/4 |
| 10 | 回归测试 | 功能保障 | 已发现 | 全量 4342 例基线 + fe/根级/lg 逐例比对(零漂移第 34 次) |
| 11 | 探索性测试 | 功能保障 | 未发现 | 无 chartered 探索记录(无人值守窗口不适用) |
| 12 | 性能测试 | 非功能 | 未发现 | 无 k6/JMeter;execute 档未授权 → 未实测 |
| 13 | 可靠性测试 | 非功能 | 部分已发现 | 429/401 降级行为由 lg 红集间接反映(本轮 6 红);无故障注入 |
| 14 | 安全测试 | 非功能 | 部分已发现 | 匿名端点 7/7 = 401(mind/energy/health-plan/family/admin-families/xiaomi/huawei);无 SAST/依赖扫描(离线档) |
| 15 | 兼容性测试 | 非功能 | 部分已发现 | 仅 Chromium 双视口(1440×900 / 375×812);无多浏览器矩阵 |
| 16 | 可用性测试 | 非功能 | 未发现 | 无 SUS / 任务完成率记录 |
| 17 | 无障碍测试 | 非功能 | 未发现 | 无 axe/WCAG 扫描 |
| 18 | 覆盖率(行/分支) | 度量与流程 | 部分已发现 | JaCoCo 未开;替代口径 handler 覆盖 556/2019 = 27.5% |
| 19 | 变异测试 | 度量与流程 | 未发现 | 无 PIT/Stryker |
| 20 | 全项目代码审查 | 度量与流程 | 已发现 | 本轮产出 0 条新增五要素(窗口零变更,无新问题)+ 覆盖点复核(B-213-1/5 承袭) |
| 项 | 内容 |
|---|---|
| 执行档 | review(离线白名单) |
| 联网范围 | 内网站点 E2E(cfc.iwintrue.com)+ 节点派发(189:4090 / 251:4096) |
| 授权 | 自动化无人值守按既定授权范围执行;未授权公网压测、依赖漏洞扫描、渗透测试 |
| 未实测项 | 性能/可靠性(故障注入)/DAST/依赖漏洞扫描(execute 档未授权);多浏览器矩阵(无工具);探索性测试(无人值守不适用);189 节点信号(站点不可达) |
| 降级说明 | 上述维度全部降级为「测试设计 + 缺口诊断」,报告中不写成通过 |
| 缺口类型 | 现状 | 风险 | 建议测试设计 | 优先级 | 闭环方式 |
|---|---|---|---|---|---|
| 后端 PV/UV 用例缺口(B-213-1 后端侧) | fix(dashboard) 的 StatsController PV/UV 按日去重 + saneDwell 归一仍无后端用例(前端 9 例已补绿) |
看板 KPI 口径回归无护栏 | 用 Mockito 注入 articleReadingRecordMapper + ReflectionTestUtils 调 dashboard handler:构造跨天重复读者 → 断言 PV=记录数、UV=去重数;再断言 saneDwell 超 1800 截断/负值归零 |
P1 | 补行为用例并定向复跑绿 → 销号 |
| 契约前瞻 423 例 | 66 个契约类领先实现 | 契约增速 > 实现速度 | 契约批次 TDD(RED→GREEN)逐批闭环 | P1 | 研发实现 → 定向复跑销号 |
| 189 节点 DNS/不可达 | B-208-1 第 7 轮 | 双节点互备失效,本机单点 | 189 补 hosts 192.168.16.251 cfc.iwintrue.com;origin 改 HTTP |
P1 | 189 探活 200 → 实跑销号 |
| langgraph 上游配额/key | B-208-3 第 12 轮 | 红集被环境噪声淹没 | LLM 依赖用例加 respx/monkeypatch stub,仅留 1 条 @pytest.mark.live |
P1 | stub 落地 → 连续 2 轮绿销号 |
| CI 排除清单失真 | 漏拦 67 类 / 陈旧 26 类(B-213-3 第 2 轮) | 硬门禁必红 → 被无视 | 由 surefire 红类自动生成清单 | P2 | 清单与实测对齐 → CI 转绿 |
| 覆盖率/变异/BDD/无障碍/可用性 | JaCoCo 未开、无 PIT、无 .feature、无 axe |
度量与行为规格缺自动保障 | 开 JaCoCo + PIT 抽样 + cucumber 冒烟 + axe | P3 | 测试侧排期立项 |
| 存在性断言假绿 | ShopCouponClaimApiContractTest 7/7 绿但 0.001s(B-213-5 第 2 轮) |
「写 return true 也绿」 |
改行为断言(状态机 + 幂等 + 库存/优惠券扣减) | P2 | 重写用例 → 定向复跑 |
| 场景映射 | 严格口径 137/152 = 90.1%,15 个 SC 无任何测试资产引用 | 场景覆盖不可声明完整 | 逐 SC 派生 TC 并挂锚点 | P2 | 台账↔锚点双向对齐后重算 |
| 审查维度 | 负责专家 | 结论 | 关键证据 |
|---|---|---|---|
| 单元·组件级 | 苏雅 | ⚠️ 有条件通过 | 后端 501 类 / 4342 例(89.86%,承采);cfc-web 132/132;fe 644/660(4 预期红) |
| 集成·接口级 | 柯砚 | ⚠️ 有条件通过 | API 25/0/7、health 13/13、shop 4/4、dx 2 跳;StatsControllerTest 6/6(承采) |
| 系统·验收级 | 白樾 | ✅ 通过 | admin 5/5(本机)+ frontend 6/6(真实站点 /frontend)+ 游客态三页可渲染 |
| 测试保障级 | 闻朔 | ✅ 通过 | 28 过 + 2 跳浏览器全绿;双端 Jest 与 lg 逐例比对(第 34 次零漂移) |
| 性能·可靠性 | 骆骋 | ⛔ 未实测(降级) | 无性能资产;仅记录全量耗时 1:06h(B-213-4 承袭) |
| 安全 | 关屿 | ⚠️ 有条件通过 | 匿名 7/7 = 401;无 SAST/依赖扫描(离线档) |
| 兼容·体验 | 阮清 | ⚠️ 有条件通过 | 仅 Chromium 双视口;:4091 目标已纠偏(B-213-2 承袭) |
| 流程·度量·代码 | 何序 | ⚠️ 有条件通过 | CI 漏拦 67(B-213-3 第 2 轮);覆盖率未开;本轮零新增五要素(窗口零变更) |
本轮零新增问题(窗口零源码/SRS/场景变更,全部套件与 R213 逐字段一致)。历史问题(B-208-2a~2e、B-213-1 后端侧、B-213-3、B-213-5、B-208-1、B-208-3、B-36、B-DX-1、B-208-5)承袭 R213,状态无变化,处置方案见 R213 报告 §8。
⛔ 不通过(有条件) —— 契约前瞻红与确定性红并存(承袭 R213);本轮为窗口零变更轮,全站严格零漂移(第 34 次),无任何确定性变化。
| 门禁 | R214 结果 | 判定 |
|---|---|---|
| G1 全量通过率 ≥95%(剔 skip) | 91.12%(4772/5237;剔 427 预期红 = 99.21%) | ❌ 全量口径 / ✅ 剔预期红口径 |
| G2 红例 0(剔预期红契约) | 实红 38(后端 16 + 根级 16 + lg 6) | ❌ |
| G3 前端 Jest | fe 644/660(4 预期红 + 12 跳);web 132/132 | ⚠️ 预期 RED |
| G4 编译 0 错 | ✅ 本轮 test-compile EXIT=0(1m21s) |
✅ |
| G5 逐类有 XML | ✅ 承采 R213 501/501 | ✅ |
| G6 浏览器 E2E | 28 过 + 2 跳(admin 5 + frontend 6 + shop 4 + health 13;dx 2 跳) | ✅ |
| G7 langgraph 通过率 | 37/43 = 86.0%(红 6,环境型) | ⚠️ 未全绿(第 12 轮) |
| G8 鉴权契约 | 匿名 7/7 = 401 + health 内 13 例全 401/403 | ✅ |
| G9 覆盖率 | handler 覆盖 556/2019 = 27.5% | ❌ |
| G10 双节点互备 | 本机 ✅(admin 5/5 + frontend 6/6);189 ❌ 不可达(第 7 轮) | ⚠️ 部分 |
| G11 CI | 漏拦 67 / 陈旧 26(B-213-3 第 2 轮) | ❌ |
| G12 SRS/场景变更 → 用例 | 窗口零 SRS/API/场景变更 → 零新增用例 | ✅ |
| G13 存量零漂移 | 第 34 次(全部套件逐字段与 R213 一致;lg 红集分布漂移但总数一致) | ✅ |
| G14 场景映射 | SC id 引用 137/152 = 90.1%(15 个 SC 无引用) | ❌ |
核心变化(R213 → R214):
test-compile 本轮实跑 EXIT=0 验证编译持续有效(B-203-5)。下轮前置:① 研发修 B-208-2a~2e(16 例确定性红)+ B-213-1 后端 PV/UV 用例;② 运维恢复 189 DNS/hosts;③ 251 轮换 key/升配额或落地 LLM stub;④ CI 清单按 R213 附录 B 刷新(B-213-3);⑤ ShopCouponClaimApiContractTest 改行为断言(B-213-5);⑥ 窗口若出现 src 变更,后端由承采转全量实跑。
| 套件 | 命令 | 结果 | 耗时 |
|---|---|---|---|
| 后端编译 | cd cfc-backend && mvn -o -B test-compile |
EXIT=0 | 1m21s |
| admin E2E | npx playwright test -c playwright.config.live.js --project=admin-desktop |
5/5 | 1.2m |
| frontend E2E | 同上 --project=frontend-mobile(默认 baseURL) |
6/6 | 43.2s |
| shop / dx | --project=shop-api / --project=dx-bridge |
4/4 · 2 跳 | 3.3s / — |
| health | npx playwright test -c playwright.config.health.js |
13/13 | 4.1s |
| 线上 API | npx playwright test <4 文件> -c playwright.config.api.js |
25 过 / 7 跳 / 32 | 20.5s |
| cfc-web | npx jest --silent |
132/132(21 套) | 22.99s |
| cfc-frontend | npx jest --silent |
644/4/12/660(46 套) | 22.71s |
| 根级 | npx jest -c tests/jest.config.js |
7 过 / 16 红 | 26.25s |
| langgraph@251 | opencode shell → timeout 760 .venv/bin/python -m pytest tests --ignore=tests/qna --ignore=tests/test_chat.py -q |
37 过 / 6 红 / 43 | 114.43s |
| 189 探活 | 本机 curl http://192.168.16.189 |
000(不可达) | — |
| 项 | 值 |
|---|---|
| 本轮窗口 | R213 7e14e2b7c → 本地 3ad691c7f(仅测试文档补丁 scenario-coverage-R212.md);251 origin/main b7bbdf963(研发第181轮汇报 + auto bump,零 src) |
| 窗口 diff | bc1e1e92b..b7bbdf963(251 侧):仅 cfc-web 版本号/CHANGELOG + docs 研发汇报,零业务源码 |
| SRS/场景变更 | 窗口零 SRS/API/场景文档提交 → G12 合规零新增用例 |
| 本轮提交 | 见 §通知与自动化记录(报告 + 通知 + 台账) |
| 推送方式 | HTTP http://git.iwintrue.com/liaoxg/cfc.git(SSH 失效,B-203-3) |