report-test-2026-11-15-R214.md 19 KB

测试负责人工作汇报 R214(2026-11-15 · 自动化闭环)

测试负责人:陆谨(软件测试专家团 · 测试架构师)|执行档:review(离线)+ 内网浏览器 E2E + 远程节点派发|静默无人值守 基线:R213 7e14e2b7c → 窗口零源码变更(本地 3ad691c7f 仅测试文档补丁;251 origin/main 前进至 b7bbdf963 = 研发第181轮汇报 + auto bump,零 src)→ 本轮无窗口新增,后端全量承采 R213 实跑证据 本轮头条:① 全站与 R213 严格零漂移(第 34 次)——全部套件逐字段一致,无任何确定性变化;② langgraph@251 红集分布漂移但总数 6、根因同源(429+401 环境型,B-208-3 第 12 轮);③ 浏览器 E2E 28 过 + 2 跳(本机节点);④ 后端 test-compile EXIT=0(B-203-5 闭环持续有效)


0. 历史审查记录(对照,非本次结论依据)

项 内容
上次审查 R213(2026-11-15 08:46~10:15),结论「不通过(有条件):窗口含 fix(dashboard) 功能修复 → 后端全量首次实跑 501 类 / 4342 例 / 89.86%,确定性红零漂移第 33 次」
本次 第 214 轮,非首次审查
历史遗留 → 本次状态 B-208-1 189 DNS/502 → 第 7 轮,本轮本机探活 189 000(不可达),admin 仍由本机交叉覆盖 5/5
B-208-3 langgraph 429+401 → 第 12 轮,红集 6(auto_tag 2 + intent 4),仍为上游配额/key 噪声
B-208-2a~2e 后端 16 例确定性红 → 承采 R213 全量双证 16/16,仍待研发
B-36 根级 9082 未起 → 第 91 轮,7 过 / 16 红(全 ECONNREFUSED)
B-DX-1 dx 2 跳(404) → 第 48 轮
B-208-5 cfc-web 132 vs 119 → 第 10 轮(3 个本地未入库文件)
B-213-1 fix(dashboard) 后端用例缺口 → 前端 9 例已补绿,后端 PV/UV 仍缺(P1)
B-213-3 CI 清单失真(漏拦 67 / 陈旧 26)→ 第 2 轮
B-213-5 ShopCouponClaimApiContractTest 假绿 → 第 2 轮
本次新增 无(窗口零源码/SRS/场景变更,全部套件与 R213 逐字段一致)

历史记忆只作对照:本轮 cfc-web、cfc-frontend、浏览器 E2E、根级、线上 API、langgraph、后端编译均为重新取证;后端全量为承采 R213 实跑(窗口零 src 变更,合理承采)。


1. 执行总览

套件 R214(本轮) R213(上轮) 漂移
基线 7e14e2b7c → 窗口零 src(251 至 b7bbdf963) 7e14e2b7c(19 提交,含 1 功能修复) 零变更
后端 · 全量 承采 R213:501 类 / 4342 例 / 3899 过 / 429F+10E=439 红 / 4 跳 = 89.86% 501 类 / 4342 例 / 3899 过 / 439 红 / 4 跳(1:06h 实跑) 承采(零窗口新增)
后端 · 编译 mvn -o -B test-compile EXIT=0(1m21s) EXIT=0(rebase 后 508 测试源) ✅(B-203-5 持续有效)
浏览器 E2E · admin 本机 5/5(1.2m,EXIT=0) 本机 5/5 零漂移
浏览器 E2E · frontend 真实站点 /frontend 6/6(43.2s,EXIT=0) 真实站点 6/6 零漂移(B-213-2 已纠偏)
浏览器 E2E · shop / health / dx shop 4/4(3.3s)· health 13/13(4.1s,匿名全 401)· dx 2 跳(404) 4/4 · 13/13 · 2 跳 零漂移
cfc-web Jest 132/132(21 套,22.99s) 132/132(21 套) 零漂移(B-208-5 第 10 轮)
cfc-frontend Jest 644 过 / 4 红 / 12 跳 / 660(46 套,22.71s) 644/4/12/660(45 套) 例级零漂移(4 红逐例一致;套数 +1 系本地未入库 pages/shop/ 被扫描计入)
根级黑盒 Jest 7 过 / 16 红 / 23(26.25s,全 ECONNREFUSED 9082) 7/16 零漂移(B-36 第 91 轮)
线上 API(点名 4 文件) 25 过 / 0 红 / 7 跳 / 32(20.5s) 25/0/7 零漂移
langgraph@251 37 过 / 6 红 / 43 例(114.43s) 37/6/43(134.41s) 红集分布漂移(auto_tag 4+intent 2 → auto_tag 2+intent 4),总数 6 一致,根因同源环境型
189 节点 探活 000(本机 curl 192.168.16.189 不可达) 189 节点实测 502 未改善(第 7 轮)

全站可测合计(本轮口径,无窗口新增):5262 例 / 4772 过 / 465 红 / 25 跳

  • 全量口径(剔 skip):4772 / 5237 = 91.12%
  • 剔除预期红契约(后端 423 + fe 4 = 427):4772 / 4810 = 99.21%,实红 38(后端确定性 16 + 根级环境 16 + lg 环境 6)
  • 口径说明:较 R213 全站 5312 例少 50 例,系 R213 报告含窗口新增折算(+5 类 46 例 + 4 例补强),本轮零窗口新增,无折算项;后端 = 承采 R213 全量实跑(501 类 4342 例)

测试结果有变化(R213 → R214):

  • ⬜ 全站严格零漂移(第 34 次):cfc-web 132/132、fe 644/4/12/660、根级 7/16、浏览器 28/28+2 跳、线上 API 25/0/7、后端 test-compile EXIT=0 —— 逐字段与 R213 一致
  • 🟡 langgraph 红集分布漂移:红 6 总数一致,但 auto_tag 4+intent 2 → auto_tag 2+intent 4;根因同为 429 AgnesAI free rate limit + 401 key ****ab12 invalid(B-208-3 第 12 轮,环境型,非源码回归)
  • ⬜ 无新 B-*:窗口零源码/SRS/场景变更,G12 合规零新增用例

2. 项目画像(本轮视角)

  • 业务定位:家庭教育 SaaS(五维能量 · 成长规划 · 测评订单 · 商城 · 健康报告解析 · 家庭工作台),双端(小程序 H5 cfc.iwintrue.com/frontend + Web 管理端 cfc.iwintrue.com/admin)。
  • 技术栈:Spring Boot 2.7.18 / Java 8 / MyBatis-Plus(9082)· uni-app Vue2(H5)· Vue2+Element(8082)· FastAPI+LangGraph(9000,生产 ai.etotem.com.cn)。
  • 测试资产基线(discover+inventory EXIT=0,本轮刷新):后端测试文件 513(@Test 4376,含本地未入库 5 文件)+50 例 vs R213 的 508/4326;控制器 371 / handler 2019(覆盖 556 = 27.5%)· 结构化用例 726 / Playwright 571 / Python 48 / 场景文件 11。
  • 节点探活(10:15-10:20):本机 ✅ admin 5/5 + frontend 6/6 + Jest 双端 · 189 ❌ 000 不可达(B-208-1 第 7 轮)· 251 ✅ pytest 实派 43 例 · 本地 9082 ❌ 拒绝连接 · 本地 4091 = OpenCode UI(非 H5,B-213-2 持续)。
  • 通道:全程 HTTP http://git.iwintrue.com/liaoxg/cfc.git(SSH 仍失效,承 B-203-3)。
  • 风险点:① 契约前瞻红已增至 66 类 / 423 例;② 189 长期失修导致双节点互备失效(第 7 轮);③ 后端全量耗时 1:06h(B-213-4,慢类 top5 占 ≈21 分钟);④ 后端 PV/UV 用例缺口(B-213-1 后端侧未闭环)。

3. 20 类测试覆盖矩阵

# 测试类型 层次 状态 证据(本轮)
1 单元测试 功能层次 已发现 后端 501 类(承采 R213 全量实跑)+ cfc-web 21 套 132 例 + fe 46 套 660 例
2 组件测试 功能层次 已发现 cfc-web/src/__tests__/components/*、cfc-web/src/views/admin/review/__tests__/
3 集成测试 功能层次 已发现 后端 integration/** 随全量执行(承采 R213);StatsControllerTest 6/6 绿(承采)
4 契约测试 功能层次 已发现 66 个 *Contract* 类 / 423 例预期红(承采 R213)
5 接口 API 测试 功能层次 已发现 线上 API 32 例(25 过 / 7 跳)+ health 13/13 + shop 4/4 + dx 2 跳
6 系统/端到端 功能保障 已发现 Playwright live:admin 5/5 + frontend 6/6(真实站点)实跑
7 验收 UAT 功能保障 部分已发现 场景文件 11 份有资产,仍无 UAT 执行记录
8 BDD 规格 功能保障 未发现 无 .feature/cucumber → 缺口
9 冒烟测试 功能保障 已发现 playwright.config.smoke.js + api-smoke 4/4
10 回归测试 功能保障 已发现 全量 4342 例基线 + fe/根级/lg 逐例比对(零漂移第 34 次)
11 探索性测试 功能保障 未发现 无 chartered 探索记录(无人值守窗口不适用)
12 性能测试 非功能 未发现 无 k6/JMeter;execute 档未授权 → 未实测
13 可靠性测试 非功能 部分已发现 429/401 降级行为由 lg 红集间接反映(本轮 6 红);无故障注入
14 安全测试 非功能 部分已发现 匿名端点 7/7 = 401(mind/energy/health-plan/family/admin-families/xiaomi/huawei);无 SAST/依赖扫描(离线档)
15 兼容性测试 非功能 部分已发现 仅 Chromium 双视口(1440×900 / 375×812);无多浏览器矩阵
16 可用性测试 非功能 未发现 无 SUS / 任务完成率记录
17 无障碍测试 非功能 未发现 无 axe/WCAG 扫描
18 覆盖率(行/分支) 度量与流程 部分已发现 JaCoCo 未开;替代口径 handler 覆盖 556/2019 = 27.5%
19 变异测试 度量与流程 未发现 无 PIT/Stryker
20 全项目代码审查 度量与流程 已发现 本轮产出 0 条新增五要素(窗口零变更,无新问题)+ 覆盖点复核(B-213-1/5 承袭)

4. 测试方案(本轮实际执行)

  • 目标:① 窗口零源码变更 → 后端全量承采 R213 实跑证据(不做无意义重跑);② 快速套件全部重新实跑验证零漂移;③ langgraph@251 重新取证;④ 刷新台账。
  • 范围:全 20 类。排除:性能压测(execute 档未授权 → 降级测试设计)、多浏览器矩阵、探索性测试。
  • 执行档:review(离线白名单);网络仅用于内网站点 E2E 与节点派发(189:4090 / 251:4096)。
  • 节点分工(每节点单浏览器任务):admin → 本机;frontend → 真实站点(本机 hosts → 251);langgraph → 251;189 仅探活(000 不取信号)。
  • 验收标准:G1 ≥95%(剔 skip)、G2 红例 0(剔预期红契约)、G4 编译 0 错、G5 逐类 XML、G6 浏览器全绿、G13 存量零漂移。

5. 执行档与授权

项 内容
执行档 review(离线白名单)
联网范围 内网站点 E2E(cfc.iwintrue.com)+ 节点派发(189:4090 / 251:4096)
授权 自动化无人值守按既定授权范围执行;未授权公网压测、依赖漏洞扫描、渗透测试
未实测项 性能/可靠性(故障注入)/DAST/依赖漏洞扫描(execute 档未授权);多浏览器矩阵(无工具);探索性测试(无人值守不适用);189 节点信号(站点不可达)
降级说明 上述维度全部降级为「测试设计 + 缺口诊断」,报告中不写成通过

6. 覆盖缺口清单

缺口类型 现状 风险 建议测试设计 优先级 闭环方式
后端 PV/UV 用例缺口(B-213-1 后端侧) fix(dashboard) 的 StatsController PV/UV 按日去重 + saneDwell 归一仍无后端用例(前端 9 例已补绿) 看板 KPI 口径回归无护栏 用 Mockito 注入 articleReadingRecordMapper + ReflectionTestUtils 调 dashboard handler:构造跨天重复读者 → 断言 PV=记录数、UV=去重数;再断言 saneDwell 超 1800 截断/负值归零 P1 补行为用例并定向复跑绿 → 销号
契约前瞻 423 例 66 个契约类领先实现 契约增速 > 实现速度 契约批次 TDD(RED→GREEN)逐批闭环 P1 研发实现 → 定向复跑销号
189 节点 DNS/不可达 B-208-1 第 7 轮 双节点互备失效,本机单点 189 补 hosts 192.168.16.251 cfc.iwintrue.com;origin 改 HTTP P1 189 探活 200 → 实跑销号
langgraph 上游配额/key B-208-3 第 12 轮 红集被环境噪声淹没 LLM 依赖用例加 respx/monkeypatch stub,仅留 1 条 @pytest.mark.live P1 stub 落地 → 连续 2 轮绿销号
CI 排除清单失真 漏拦 67 类 / 陈旧 26 类(B-213-3 第 2 轮) 硬门禁必红 → 被无视 由 surefire 红类自动生成清单 P2 清单与实测对齐 → CI 转绿
覆盖率/变异/BDD/无障碍/可用性 JaCoCo 未开、无 PIT、无 .feature、无 axe 度量与行为规格缺自动保障 开 JaCoCo + PIT 抽样 + cucumber 冒烟 + axe P3 测试侧排期立项
存在性断言假绿 ShopCouponClaimApiContractTest 7/7 绿但 0.001s(B-213-5 第 2 轮) 「写 return true 也绿」 改行为断言(状态机 + 幂等 + 库存/优惠券扣减) P2 重写用例 → 定向复跑
场景映射 严格口径 137/152 = 90.1%,15 个 SC 无任何测试资产引用 场景覆盖不可声明完整 逐 SC 派生 TC 并挂锚点 P2 台账↔锚点双向对齐后重算

7. 域结论表

审查维度 负责专家 结论 关键证据
单元·组件级 苏雅 ⚠️ 有条件通过 后端 501 类 / 4342 例(89.86%,承采);cfc-web 132/132;fe 644/660(4 预期红)
集成·接口级 柯砚 ⚠️ 有条件通过 API 25/0/7、health 13/13、shop 4/4、dx 2 跳;StatsControllerTest 6/6(承采)
系统·验收级 白樾 ✅ 通过 admin 5/5(本机)+ frontend 6/6(真实站点 /frontend)+ 游客态三页可渲染
测试保障级 闻朔 ✅ 通过 28 过 + 2 跳浏览器全绿;双端 Jest 与 lg 逐例比对(第 34 次零漂移)
性能·可靠性 骆骋 ⛔ 未实测(降级) 无性能资产;仅记录全量耗时 1:06h(B-213-4 承袭)
安全 关屿 ⚠️ 有条件通过 匿名 7/7 = 401;无 SAST/依赖扫描(离线档)
兼容·体验 阮清 ⚠️ 有条件通过 仅 Chromium 双视口;:4091 目标已纠偏(B-213-2 承袭)
流程·度量·代码 何序 ⚠️ 有条件通过 CI 漏拦 67(B-213-3 第 2 轮);覆盖率未开;本轮零新增五要素(窗口零变更)

8. 五要素问题清单

本轮零新增问题(窗口零源码/SRS/场景变更,全部套件与 R213 逐字段一致)。历史问题(B-208-2a~2e、B-213-1 后端侧、B-213-3、B-213-5、B-208-1、B-208-3、B-36、B-DX-1、B-208-5)承袭 R213,状态无变化,处置方案见 R213 报告 §8。


9. 门禁结论

⛔ 不通过(有条件) —— 契约前瞻红与确定性红并存(承袭 R213);本轮为窗口零变更轮,全站严格零漂移(第 34 次),无任何确定性变化。

门禁 R214 结果 判定
G1 全量通过率 ≥95%(剔 skip) 91.12%(4772/5237;剔 427 预期红 = 99.21%) ❌ 全量口径 / ✅ 剔预期红口径
G2 红例 0(剔预期红契约) 实红 38(后端 16 + 根级 16 + lg 6) ❌
G3 前端 Jest fe 644/660(4 预期红 + 12 跳);web 132/132 ⚠️ 预期 RED
G4 编译 0 错 ✅ 本轮 test-compile EXIT=0(1m21s) ✅
G5 逐类有 XML ✅ 承采 R213 501/501 ✅
G6 浏览器 E2E 28 过 + 2 跳(admin 5 + frontend 6 + shop 4 + health 13;dx 2 跳) ✅
G7 langgraph 通过率 37/43 = 86.0%(红 6,环境型) ⚠️ 未全绿(第 12 轮)
G8 鉴权契约 匿名 7/7 = 401 + health 内 13 例全 401/403 ✅
G9 覆盖率 handler 覆盖 556/2019 = 27.5% ❌
G10 双节点互备 本机 ✅(admin 5/5 + frontend 6/6);189 ❌ 不可达(第 7 轮) ⚠️ 部分
G11 CI 漏拦 67 / 陈旧 26(B-213-3 第 2 轮) ❌
G12 SRS/场景变更 → 用例 窗口零 SRS/API/场景变更 → 零新增用例 ✅
G13 存量零漂移 第 34 次(全部套件逐字段与 R213 一致;lg 红集分布漂移但总数一致) ✅
G14 场景映射 SC id 引用 137/152 = 90.1%(15 个 SC 无引用) ❌

核心变化(R213 → R214):

  1. 窗口零源码变更 → 后端全量承采 R213 实跑证据(501 类 / 4342 例 / 89.86%),未做无意义重跑;test-compile 本轮实跑 EXIT=0 验证编译持续有效(B-203-5)。
  2. 全站严格零漂移(第 34 次):cfc-web、cfc-frontend、根级、浏览器、线上 API 全部逐字段与 R213 一致。
  3. langgraph 红集分布漂移但总数一致(auto_tag 4+intent 2 → auto_tag 2+intent 4):根因同源(429+401 环境型),非源码回归,B-208-3 第 12 轮。
  4. 189 节点第 7 轮未修(本轮探活 000 不可达;admin 由本机交叉覆盖)。
  5. 无新 B-*:窗口零源码/SRS/场景变更 → G12 合规零新增用例。

下轮前置:① 研发修 B-208-2a~2e(16 例确定性红)+ B-213-1 后端 PV/UV 用例;② 运维恢复 189 DNS/hosts;③ 251 轮换 key/升配额或落地 LLM stub;④ CI 清单按 R213 附录 B 刷新(B-213-3);⑤ ShopCouponClaimApiContractTest 改行为断言(B-213-5);⑥ 窗口若出现 src 变更,后端由承采转全量实跑。


附录 A:本轮命令与耗时

套件 命令 结果 耗时
后端编译 cd cfc-backend && mvn -o -B test-compile EXIT=0 1m21s
admin E2E npx playwright test -c playwright.config.live.js --project=admin-desktop 5/5 1.2m
frontend E2E 同上 --project=frontend-mobile(默认 baseURL) 6/6 43.2s
shop / dx --project=shop-api / --project=dx-bridge 4/4 · 2 跳 3.3s / —
health npx playwright test -c playwright.config.health.js 13/13 4.1s
线上 API npx playwright test <4 文件> -c playwright.config.api.js 25 过 / 7 跳 / 32 20.5s
cfc-web npx jest --silent 132/132(21 套) 22.99s
cfc-frontend npx jest --silent 644/4/12/660(46 套) 22.71s
根级 npx jest -c tests/jest.config.js 7 过 / 16 红 26.25s
langgraph@251 opencode shell → timeout 760 .venv/bin/python -m pytest tests --ignore=tests/qna --ignore=tests/test_chat.py -q 37 过 / 6 红 / 43 114.43s
189 探活 本机 curl http://192.168.16.189 000(不可达) —

附录 B:git 真理证据

项 值
本轮窗口 R213 7e14e2b7c → 本地 3ad691c7f(仅测试文档补丁 scenario-coverage-R212.md);251 origin/main b7bbdf963(研发第181轮汇报 + auto bump,零 src)
窗口 diff bc1e1e92b..b7bbdf963(251 侧):仅 cfc-web 版本号/CHANGELOG + docs 研发汇报,零业务源码
SRS/场景变更 窗口零 SRS/API/场景文档提交 → G12 合规零新增用例
本轮提交 见 §通知与自动化记录(报告 + 通知 + 台账)
推送方式 HTTP http://git.iwintrue.com/liaoxg/cfc.git(SSH 失效,B-203-3)