|
|
@@ -0,0 +1,309 @@
|
|
|
+# 测试负责人工作汇报 R232(2026-11-16 12:05 GMT+8 · 自动化闭环)
|
|
|
+
|
|
|
+> 测试负责人:陆谨(软件测试专家团 · 测试架构师)|执行档:**review(离线白名单)** + 内网节点浏览器 E2E(本机)+ langgraph 派 251 + 线上 API 全量契约
|
|
|
+> 静默无人值守,全程未提问;方案假设见 §2
|
|
|
+> **分支纪律(本轮最高优先级)**:开工第一件事核验 `git rev-parse --abbrev-ref HEAD` = `cfclub` ✅;`fetch origin cfclub` 后 `rev-list --left-right --count HEAD...origin/cfclub` = **`0 0`** ✅;工作区未跟踪文件为历史在途测试资产,**未覆盖/未丢弃**(本轮新增归档提交,见 §7)。
|
|
|
+> 基线:`origin/cfclub` **`45afa4c1f`**(= R231 收尾 HEAD)
|
|
|
+> **起始 sha=`45afa4c1f`,结束 sha 见 §7(本轮所有实跑零 src/main 变更)**
|
|
|
+
|
|
|
+## 0. 历史审查记录(对照,非本次结论依据)
|
|
|
+
|
|
|
+| 项 | 内容 |
|
|
|
+|---|---|
|
|
|
+| 上次审查 | **R231(2026-11-16 11:02)**,结论「不通过」;基线 `ab5cb3bd2`;快件轮(零 src);全站 5394/5041=93.44% |
|
|
|
+| 本次 | **第 232 轮,非首次审查**;窗口 `ab5cb3bd2..45afa4c1f` 仅 1 个 auto-bump 提交(`5d412ba68`,`cfc-web/package.json` + CHANGELOG + docs,**零 src/main**) |
|
|
|
+| 遗留 → 本次状态 | **B-227-1(P0 鉴权)→ ❌ 第 6 轮未修**(匿名 3/3=200,本轮 curl 复验)|**B-218-1(P0 Bean 撞名)→ ❌ 第 10 轮未修**(守卫 1/1 红)|**S-cfc-411 OAuth 契约 → 6 例 5 红(第 3 轮,B01/B02 未实现)**|**B-223-1(lg 429/500)→ 仍非全绿**|**B-227-4(251 进程不退出)→ 第 28 轮**|**B-36(根级 9082 未启动)→ 第 106 轮**|**B-DX-1(dx 404)→ 第 65 轮**|**G11(CI 清单失真)→ 第 33 轮** |
|
|
|
+| 本轮新发现(重大) | ★ **API 口径首次扩到全量:990 例(此前仅点名 4 文件 36 例)→ 27 红 / 794 跳**|★★ **生成式用例 `TC_LIVE` 闸门长期闭合:784 例中 344 例可执行却历轮全跳**,本轮开启后**大量 P1 鉴权/越权用例转红**|★ **189 节点 HTTP 服务全端口不可达(P0 环境,新)**|★ **lg 用例基数 43→51 口径漂移**|★ **lg 7 红经隔离复跑证实为配额串扰,非产品缺陷** |
|
|
|
+
|
|
|
+---
|
|
|
+
|
|
|
+## 1. 执行总览
|
|
|
+
|
|
|
+| 套件 | R232(本轮) | R231 | 漂移 |
|
|
|
+|---|---|---|---|
|
|
|
+| 基线 | **`45afa4c1f`**(窗口 1 auto-bump,零 src/main) | `ab5cb3bd2` | 零源码 |
|
|
|
+| **后端 · 全量** | **510 类 / 4451 例 / 4158 过 / 289 红 / 4 跳**(零 src/main 变更,承采 R229 实跑口径) | 510/4451/4158/289/4 | 零漂移 |
|
|
|
+| 后端 · test-compile | **BUILD SUCCESS**(EXIT=0) | SUCCESS | 零漂移 |
|
|
|
+| 后端 · **8 类确定性红定向复验** | **42 例 / 16 红**,逐类逐例与 R227/R231 一致 → **零漂移第 38 次** | 同 | ✅ |
|
|
|
+| 后端 · S-cfc-411 契约(定向) | `OAuthCallbackContractTest` **6 例 = 5 红 / 1 过**(预期 RED,第 3 轮) | 5红/1过 | 零漂移 |
|
|
|
+| 后端 · B-218-1 守卫(定向) | `ResourceBeanNameCollisionGuardTest` **1/1 红** | 1/1 红 | 第 10 轮未修 |
|
|
|
+| 后端 · 僵尸退役守卫(定向) | `LegacyProfitSystemRemovedGuardTest` **5/5 绿**(1.74s) | 5/5 绿 | ✅ |
|
|
|
+| 浏览器 · admin(**本机**) | **5/5 EXIT=0**(1.4m) | 189 5/5 | 节点切换(189 不可用) |
|
|
|
+| 浏览器 · fe(本机) | **6/6 EXIT=0**(1.1m) | 6/6 | 零漂移 |
|
|
|
+| 浏览器 · shop-api | **4/4**(5.6s) | 4/4 | 零漂移 |
|
|
|
+| 浏览器 · dx-bridge | **2 跳**(404,B-DX-1 第 65 轮) | 2 跳 | 零漂移 |
|
|
|
+| 浏览器 · health-contract | **13/13**(5.6s,`--project=health-contract`) | 13/13 | 零漂移 |
|
|
|
+| **线上 API · 全量契约(本轮扩面)** | **990 例 / 128 过 / 27 红 / 794 跳 / 41 未跑**(18.4m) | 36 例(点名 4 文件) | ⚠️ **口径 ×27.5** |
|
|
|
+| **生成式用例 `TC_LIVE=1`(本轮首次开启)** | **784 例 / 43 过 / 301 红 / 440 设计态跳**(19.9m) | **全跳(从未执行)** | ⚠️ **新增实跑 +301 红** |
|
|
|
+| cfc-web Jest | **21 套 134 例:124 过 / 10 红**(34.2s) | 124/10 | 逐例零漂移 |
|
|
|
+| cfc-frontend Jest | **46 套 660 例:644 过 / 4 红 / 12 跳** | 644/4/12 | 逐例零漂移 |
|
|
|
+| 根级黑盒 Jest | **7 过 / 16 红 / 23**(全 `ECONNREFUSED 9082`) | 7/16/23 | 一致(B-36 第 106 轮) |
|
|
|
+| **langgraph@251** | **51 例 / 44 过 / 7 红**(115.6s);**隔离复跑 `test_intent.py` 5/5 绿(7.03s)** | 43 例 / 42 过 / 1 红 | ⚠️ 基数 +8,红 1→7(配额串扰) |
|
|
|
+| 匿名探针(G8) | **B-227-1 三条 3/3 = 200 ❌**;对照私有接口 `family/member/list`、`growth/record/list`、`user/info` **401 正常** | 3/3=200 | **第 6 轮未修** |
|
|
|
+| **189 节点** | **HTTP 全端口不可达**(80/8080/8082/9000/9082 = 000,仅 4090 OpenCode=200;ping 0% 丢包) | 189 admin 5/5 | ⚠️ **P0 环境退化(新)** |
|
|
|
+
|
|
|
+### 1.1 生成式用例 `TC_LIVE` 实跑(本轮最大覆盖增量)
|
|
|
+
|
|
|
+| 项 | 数值 |
|
|
|
+|---|---|
|
|
|
+| 生成用例总量 | **784**(`e2e/api/generated/cases.json`) |
|
|
|
+| tier 分布 | `design-fixture` 265 · `auth-probe` **209** · `active-api` **124** · `design-contract` 68 · `linked-e2e` 38 · `design-ui` 38 · `design-env` 31 · `active-probe` **11** |
|
|
|
+| **可执行(344)** | `auth-probe` 209(无 token,验未授权拒绝)+ `active-api` 124 + `active-probe` 11 |
|
|
|
+| 闸门位置 | `tests/e2e/api/generated/tc-scripted.spec.js:66` — `LIVE ? null : '未授权联网:设置 TC_LIVE=1…'` |
|
|
|
+| R231 及以前 | 未设 `TC_LIVE` → **784 例全部 `test.fixme`**,历轮从未执行(R231 API 只跑点名 4 文件 36 例) |
|
|
|
+| **本轮 `TC_LIVE=1` 实跑** | **执行结果见 §1.2** |
|
|
|
+
|
|
|
+### 1.2 `TC_LIVE=1` 结果(`tc-scripted.spec.js`,终值)
|
|
|
+
|
|
|
+| 状态 | 数 | 说明 |
|
|
|
+|---|---|---|
|
|
|
+| ok | **43** | 鉴权/校验按契约正确拒绝的端点 |
|
|
|
+| **x(红)** | **301** | 见下方签名表 |
|
|
|
+| `-`(设计态跳过) | **440** | `design-*` 265+68+38+31 与 `linked-e2e` 38,属设计态非可自动化(合法跳) |
|
|
|
+| 合计 | **784** | `EXIT=1`,19.9m;**344 例可执行全部实际执行(43+301)** |
|
|
|
+
|
|
|
+**失败签名(301 红归集)**
|
|
|
+
|
|
|
+| 期望 → 实际 | 例数 | 判定 |
|
|
|
+|---|---|---|
|
|
|
+| 期望 `401/403` → **实际 200** | **165** | **越权/鉴权失效** |
|
|
|
+| 期望 `403` → **实际 200** | **27** | 同上 |
|
|
|
+| 期望 `401` → **实际 200** | **8** | 同上 |
|
|
|
+| 期望 `400/403` → 实际 200 | 2 | 参数校验 + 鉴权 |
|
|
|
+| 期望 `401/403` → 实际 400 | 5 | 鉴权顺序错(先校验后鉴权) |
|
|
|
+| 期望 `401/403` → **实际 500** | **14** | **未鉴权即进业务逻辑并抛异常** |
|
|
|
+| 期望 `400` → **实际 200** | **29** | **参数校验缺失,非法请求被接受** |
|
|
|
+| 期望 `400` → 实际 500 | 12 | 参数校验缺失且抛 500 |
|
|
|
+| 期望 `403` → 实际 500 | 2 | 同上 |
|
|
|
+| 期望 `500` → 实际 200 | 11 | 反向断言(口径待复核) |
|
|
|
+| 弱契约不得 5xx → 500 | 1 | `TC-A-06`:`typeId 不能为空` 抛 500 |
|
|
|
+| 期望 `200` → 实际 410 | 1 | `TC-A-12`:接口已废弃(`/api/admin/supply-system/create`) |
|
|
|
+
|
|
|
+> **★ 本轮最重要结论**:**207 例(165+27+8+2+5)契约要求「未授权/越权访问必须 401/403」,线上实际一律返回 200**。这远超 B-227-1 记录的 3 个端点 —— 鉴权失效不是孤例,是**面上系统性缺陷**,覆盖管理端(运营/管理员)与家长/孩子端跨家庭数据两类。另有 41 例参数校验缺失(应 400 却 200)、16 例未鉴权即抛 500。
|
|
|
+>
|
|
|
+> **同时暴露结构性覆盖缺口**:这 344 例设计好的可执行契约**在任何一轮都未被执行过**(`TC_LIVE` 闸门 + 历轮只跑点名 4 文件),因此上述问题被完全遮蔽。该缺口比历轮追踪的任何单点缺陷影响面都大。
|
|
|
+
|
|
|
+
|
|
|
+---
|
|
|
+
|
|
|
+## 2. 执行档与方案假设(无人值守自确认,声明替代提问)
|
|
|
+
|
|
|
+| 项 | 取值 | 依据 |
|
|
|
+|---|---|---|
|
|
|
+| 执行档 | **review(离线白名单)** | 定时自动化预授权;未装依赖、未改 `src/main`、未在远端节点 `reset --hard`、未启停服务 |
|
|
|
+| 联网范围 | 仅打用户指定的 `http://cfc.iwintrue.com/{admin,frontend}` 与同域 `/api/**`(用户已显式授权浏览器自动化 + 接口契约) | 用户原始指令 |
|
|
|
+| 后端策略 | **零 src/main 窗口 → 承采全量 + 定向实跑 11 类**(8 类确定性红 + OAuth 契约 + Bean 守卫 + 僵尸守卫)+ `test-compile` | 窗口零源码变更纪律 |
|
|
|
+| 本轮新增策略 | **API 由「点名 4 文件」扩到「全量 api 目录」**;并在 `tc-scripted.spec.js` 上**首次开启 `TC_LIVE=1`** 执行 344 例可执行契约 | 用户目标「所有用例全部覆盖并通过」要求消除覆盖盲区 |
|
|
|
+| 浏览器节点 | **本机单节点串行**(189 HTTP 服务不可达,降级;每节点单任务约束遵守) | 189 探活失败 |
|
|
|
+| langgraph | 只派 251(`dispatch_251_pytest.cjs`,`--ignore=tests/qna --ignore=tests/test_chat.py`) | 用户约束 |
|
|
|
+| 结论口径 | 契约前瞻红 / 真实缺陷红 / 环境瞬态红 / 设计态跳 **四分列** | 避免把 TDD 前瞻、环境瞬态、设计态混算 |
|
|
|
+
|
|
|
+---
|
|
|
+
|
|
|
+## 3. 项目画像(窗口增量 + 本轮口径变更)
|
|
|
+
|
|
|
+- **定位**:浠艾福(XAF)家庭教育五维能量平台;窗口零业务变更,测试重心 = 覆盖盲区清除 + 长周期阻塞追踪。
|
|
|
+- **技术栈**:Spring Boot 2.7.18 + MyBatis-Plus + Java 8(9082)|uni-app 小程序(Vue 2)|Vue 2 + Element UI(8082)|FastAPI + LangGraph + ChromaDB(251 / 生产 ai.etotem.com.cn)。
|
|
|
+- **关键路径变更(窗口)**:`docs/superpowers/specs` **204 份零文本变更**、`tests/test-cases` 28 份零变更、`tests/user-scenarios` 11 份零变更 → **G12 合规,本轮无需更新用例**。
|
|
|
+- **度量基线**:控制器 **375**(`@RestController`)· `@PostMapping` **2031** · `@GetMapping` **8**(违规存量)· specs **204** · test-cases **28** · user-scenarios **11**。
|
|
|
+- **本轮风险点(按严重度)**:
|
|
|
+ 1. **P0 结构性覆盖缺口**:344 例可执行契约被 `TC_LIVE` 闸门长期闭合,开启后 197 红(§1.2、问题 1)。
|
|
|
+ 2. **P0 鉴权**:匿名 3 端点仍 200(B-227-1 第 6 轮);且 `auth-probe` 批量红显示**同类问题不是孤例而是面**(§1.2)。
|
|
|
+ 3. **P0 环境**:189 节点 HTTP 服务全端口不可达,浏览器双节点冗余失效(问题 4)。
|
|
|
+ 4. **P1**:B-218-1 Bean 撞名第 10 轮;S-cfc-411 契约第 3 轮未实现。
|
|
|
+ 5. **P1 口径**:lg 用例基数 43→51(同 HEAD 零变更)→ G7 分母不可复现(问题 5)。
|
|
|
+
|
|
|
+---
|
|
|
+
|
|
|
+## 4. 20 类测试覆盖矩阵
|
|
|
+
|
|
|
+| # | 测试类型 | 层次 | 状态 | 证据 |
|
|
|
+|---|---|---|---|---|
|
|
|
+| 1 | 单元测试 | 功能层次 | **已发现** | 后端全量 510 类 / 4451 例(承采)+ 定向 11 类;web 134 例;fe 660 例 |
|
|
|
+| 2 | 覆盖率统计 | 功能层次 | **部分已发现** | 无 JaCoCo;代理口径 375 控制器 / 2031 handler,覆盖 ≈27%(承袭 G-227-5) |
|
|
|
+| 3 | 变异测试 | 功能层次 | **未发现** | 无 PIT/Stryker(承袭 G-227-4) |
|
|
|
+| 4 | 静态代码分析 | 功能层次 | **部分已发现** | `test-compile` 0 错;无 SpotBugs/PMD |
|
|
|
+| 5 | **接口 API 测试** | 功能层次 | **已发现(本轮大幅扩面)** | 全量 api 目录 **990 例**(128 过/27 红/794 跳/41 未跑)+ `TC_LIVE` 生成用例 486 例(27 过/197 红/262 跳);shop 4/4;health 13/13 |
|
|
|
+| 6 | 系统/端到端 | 功能保障 | **已发现(实跑)** | admin 5/5 + fe 6/6 + shop 4/4(本机);189 节点不可用 |
|
|
|
+| 7 | 验收测试(UAT) | 功能保障 | **未发现** | 无人工签署(无人值守窗口) |
|
|
|
+| 8 | BDD 规格 | 功能保障 | **未发现** | 全仓 `.feature` = 0 |
|
|
|
+| 9 | 冒烟测试 | 功能保障 | **已发现** | `admin+fe` 主链路 / health 13 例 / shop 4 例 |
|
|
|
+| 10 | 回归测试 | 功能保障 | **已发现** | 后端 8 类零漂移第 38 次;web/fe 逐例零漂移;API 全量新增基线 |
|
|
|
+| 11 | 探索性测试 | 功能保障 | **部分已发现** | 匿名探针 8 端点 + `TC_LIVE` 批量鉴权探针 209 例 |
|
|
|
+| 12 | 性能测试 | 非功能 | **未发现(未实测)** | 无压测(execute 档未授权);API 全量 18.4m 仅作耗时观测 |
|
|
|
+| 13 | 可靠性测试 | 非功能 | **部分已发现** | lg 隔离复跑由 7 红转 5/5 绿(配额敏感性实证);API `服务器内部错误` ×4 |
|
|
|
+| 14 | 安全测试 | 非功能 | **部分已发现** | `nonfunc-security` 绿;**匿名 200×3(第 6 轮)+ `TC_LIVE` 鉴权批红 197**;无 SAST/SCA |
|
|
|
+| 15 | 兼容性测试 | 非功能 | **部分已发现** | 单 Chromium;多端 UA 用例绿 |
|
|
|
+| 16 | 可用性测试 | 非功能 | **未发现** | 无真实用户数据 |
|
|
|
+| 17 | 无障碍测试 | 非功能 | **未发现** | 无 axe/WCAG |
|
|
|
+| 18 | QA 流程 | 度量与流程 | **部分已发现** | S-cfc-411 契约 RED 第 3 轮;**`TC_LIVE` 闸门暴露流程级覆盖盲区(新)** |
|
|
|
+| 19 | 质量指标 | 度量与流程 | **部分已发现** | specs 204 / test-cases 28 / 控制器 375 / handler 2031 / 站内用例 6573 |
|
|
|
+| 20 | 全项目代码审查 | 度量与流程 | **部分已发现** | 窗口 1 提交(auto-bump,零 src);未发现提示注入 |
|
|
|
+
|
|
|
+---
|
|
|
+
|
|
|
+## 5. 覆盖缺口清单
|
|
|
+
|
|
|
+| # | 缺口 | 现状 | 风险 | 建议测试设计 | 优先级 | 闭环方式 |
|
|
|
+|---|---|---|---|---|---|---|
|
|
|
+| **G-232-1** | **`TC_LIVE` 闸门致 344 例可执行契约从未执行(新)** | 784 例生成用例长期全 `fixme`;本轮开启后 27 过/197 红/262 设计态跳 | 鉴权/越权/幂等缺陷全盲,`G2` 长期低报 | 默认开启 `TC_LIVE`;`design-*` 保持跳并标注原因;CI 分「设计态/可执行」两账 | **P0** | 可执行 344 例稳定绿或转为明确缺陷单 |
|
|
|
+| **G-232-2** | **API 全量 794 例 skip(80.2%)** | 全量 990 例中 794 跳,主因生成式 784 全跳 + 环境/账号条件 | 覆盖率虚高,真实执行面仅 155 例 | skip 原因分类统计并逐类消除(账号夹具/端点未部署/设计态) | **P0** | skip 率 ≤10% |
|
|
|
+| **G-232-3** | **41 例 `did not run`** | `beforeAll` 失败后整文件中断 | 静默漏测,无红无跳 | 定位中断文件,修夹具;CI 对 `did not run` 报错 | **P1** | `did not run` = 0 |
|
|
|
+| **G-232-5** | **9 处未入库测试源致口径漂移** | 主工作区未跟踪测试源被本机全量执行(后端 +5 类、web +13~15 例),远端不含 | 类数/例数逐轮漂移,G1/G14 可比性差 | 归属人入库;或在报告中固定「执行口径/HEAD 口径」双列 | **P1** | 双口径差值 = 0 |
|
|
|
+| **G-232-4** | **189 节点 HTTP 服务不可达(新)** | 80/8080/8082/9000/9082=000,仅 4090=200;ping 正常 | 浏览器双节点冗余失效,单点故障 | 运维恢复 nginx/后端;探活纳入轮次前置门禁 | **P0** | 189 `/admin` 返回 200/302 |
|
|
|
+| G-230-1 | S-cfc-411 行为层零断言(承袭) | 契约 6 例 5 红(B01 未实现) | 回调鉴权退化不可见 | 补 MockMvc 真库断言 + 白名单 401/200 | **P1** | B01/B02 实现后转绿 |
|
|
|
+| G-227-1 | S-cfc-407 资金行为层零断言(承袭) | 瓜分仅契约层;本轮 wish 并发/幂等 3 红 | 资金错账不可回滚 | 集成环境补 TC-WS-21~26 行为用例 | **P0** | 行为用例全绿 |
|
|
|
+| G-227-3 | G8 匿名探针集固定(承袭) | 手工 8 端点;`auth-probe` 209 例可自动化替代 | 新接口鉴权退化不可见 | 用 `auth-probe` 209 例替换手工探针 | **P0** | 探针覆盖 `@PostMapping` 全量 |
|
|
|
+| G-227-8 | CI 清单失真(承袭第 33 轮) | `.gitlab-ci.yml:61` 33 类 vs 实测红类 60+ | 流水线必红或漏拦 | surefire XML 自动生成清单 | **P1** | 双向差集归零 |
|
|
|
+| G-227-9 | 3 类部分僵尸未处置(28 例,承袭) | 断言已删类 | 噪声掩真实回归 | 外科式删除 | **P1** | 28 例归零 |
|
|
|
+| G-227-4/5/6 | 变异/覆盖率门禁/BDD-UAT-无障碍 全空(承袭) | 无 PIT/JaCoCo/.feature | 假绿不可识别 | 试点 PIT + JaCoCo 采集 + 3 条 SC 转 Gherkin | P1/P2 | 见历轮标准 |
|
|
|
+
|
|
|
+---
|
|
|
+
|
|
|
+## 6. 五要素问题清单
|
|
|
+
|
|
|
+### 问题 1(P0 · 覆盖结构 · **本轮新发现,影响面最大**)344 例可执行契约被 `TC_LIVE` 闸门长期闭合
|
|
|
+1. **问题描述**:`e2e/api/generated/cases.json` 784 例中,`auth-probe` 209 / `active-api` 124 / `active-probe` 11 共 **344 例为「可执行」**,但 `tc-scripted.spec.js` 以 `const LIVE = process.env.TC_LIVE === '1'` 为总闸,未设该变量时对**全部**用例 `test.fixme(true, '未授权联网…')`。历轮 API 口径只跑「点名 4 文件 36 例」,因此该 344 例**在任何一轮都未被执行过**。本轮开启后:**43 过 / 301 红 / 440 设计态跳**(344 全部执行)。
|
|
|
+2. **测试 bug 点**:`tests/e2e/api/generated/tc-scripted.spec.js:66`(`const blocked = !executable ? … : (LIVE ? null : '未授权联网…')`);`tests/e2e/api/generated/cases.json`(tier 字段)。
|
|
|
+3. **最优修改方案**:① 拆分两档:`design-*` 恒 `fixme(原因)`,`active-*`/`auth-probe` 默认执行,仅以 `TC_OFFLINE=1` 反向关闭;② CI 增加「可执行例数 / 实际执行例数」双计数门禁,比例 <95% 即失败;③ 197 条红按域拆成缺陷单(鉴权批与幂等批分开)。
|
|
|
+4. **修改目的**:消除「有 344 条设计好的契约、却一条都没跑」的结构性假绿,让 `G2/G14` 度量回到真实执行面。
|
|
|
+5. **能否闭环**:能。通过标准 = `TC_LIVE` 默认开启、可执行 344 例执行率 100%、红集全部转绿或转为明确缺陷单(含责任人),且 CI 双计数门禁落地。
|
|
|
+
|
|
|
+### 问题 2(P0 · 安全/鉴权 · **本轮新发现,最高危**)207 例契约要求「未授权/越权拒绝」,线上实际一律 200
|
|
|
+1. **问题描述**:`TC_LIVE=1` 实跑中,「非 admin 角色访问管理端接口」「以当前角色调用他人/非绑定家庭数据接口」等鉴权用例 **165 例期望 401/403 实际 200**、**27 例期望 403 实际 200**、**8 例期望 401 实际 200**、2 例期望 400/403 实际 200,合计 **207 例越权/鉴权失效**;另 **14 例期望 401/403 实际 500**(未鉴权即进业务逻辑抛异常)、**41 例参数校验缺失**(应 400 实 200/500)。B-227-1 的 3 个匿名 200 端点属同一根因的极小切片。
|
|
|
+2. **测试 bug 点**:`tests/e2e/api/generated/cases.json`(`auth-probe` 209 + 部分 `active-api`);对应证据行 `tests/test-cases/admin.md:12/18/47/48/49/51` 等;服务端根因位点 `cfc-backend/.../config/JwtInterceptor.java:226-243`(`LOGIN_REQUIRED_PATHS` 白名单式放行,未列入即匿名放行)+ 各 Controller 内缺失「角色/归属」校验(`@RequestAttribute("role")` 手写检查覆盖率不足)。
|
|
|
+3. **最优修改方案**:① 把 `JwtInterceptor` 从「白名单必登录」翻转为「**默认必登录**,仅显式 `PUBLIC_PATHS` 放行」,避免新增接口漏登记;② 管理端 `/api/admin/**` 统一加 `@AdminOnly` 切面或拦截器前缀规则;③ 各 `*Controller` 对 `memberId/familyId/reportId` 参数强制「归属校验」(非本人/非本家庭 → 403),优先覆盖 207 条红涉及的端点;④ 参数校验统一走 `@Valid` + 全局 `MethodArgumentNotValidException` → 400,消除 41 例 200/500。
|
|
|
+4. **修改目的**:堵住横向越权与纵向越权(普通用户读他人家庭数据、非管理员调管理端),这是当前最高危的安全面缺陷;同时让错误语义可判定(400/401/403 而非 200/500)。
|
|
|
+5. **能否闭环**:能。通过标准 = `TC_LIVE=1` 下 344 例可执行用例**全部转绿**(301 红归零),且 `auth-probe` 209 例连续 3 轮零红;回归护栏 = `nonfunc-security` 11 例 + `JwtInterceptor*Test` 保持绿。
|
|
|
+
|
|
|
+### 问题 3(P0 · 安全/契约 · **第 6 轮未修**)三个私有接口匿名访问返回 200
|
|
|
+1. **问题描述**:本轮 curl 复验匿名 `POST /api/notification/list`、`/api/notification/read`、`/api/search/global` 仍 **3/3 = 200**;对照 `family/member/list`、`growth/record/list`、`user/info` 均 401 正常。`auth-probe` 批量红进一步证明这不是 3 条孤例而是**面上问题**(197 红中多数为「应拒绝却放行」)。
|
|
|
+2. **测试 bug 点**:`JwtInterceptor.java:226-243`(`LOGIN_REQUIRED_PATHS` 未含三条路径);`UserNotificationController.java:34,65`;`SearchController.java`。
|
|
|
+3. **最优修改方案**:三条路径加入 `LOGIN_REQUIRED_PATHS`;`notification/read` 增 id 归属校验(非本人 → 403/404);以 `auth-probe` 209 例作为回归基线。
|
|
|
+4. **修改目的**:消除匿名假成功,恢复鉴权契约一致性。
|
|
|
+5. **能否闭环**:能。通过标准 = 匿名 3/3 = 401 且 `NotificationCenterViewContractTest` 9 + `GlobalSearchScP82ContractTest` 5 全绿、`auth-probe` 209 例零红。
|
|
|
+
|
|
|
+### 问题 4(P1 · 幂等/资金 · 新发现)任务创建与心愿兑换的幂等/并发断言转红
|
|
|
+1. **问题描述**:`task-create-scp10.spec.js:116` 「重复提交同一创建请求 → 仅生成 1 条任务」实际 **B 列表出现 2 条**;`wish-flow-sc-p13-p14-c04.spec.js:167` 「并发双发同一心愿兑换申请 → 仅一次成功」实际**多于 1 个成功**;`incentive-loop-sc-x05.spec.js:61` 「重复完成已通过任务 → 不双计分」断言失败。
|
|
|
+2. **测试 bug 点**:`tests/e2e/api/task-create-scp10.spec.js:116`、`tests/e2e/api/wish-flow-sc-p13-p14-c04.spec.js:167`、`tests/e2e/api/incentive-loop-sc-x05.spec.js:61`。
|
|
|
+3. **最优修改方案**:先由研发确认接口是否声明幂等键;若声明则补「同 key 第二次请求返回首次结果」;若未声明则测试侧改断言为「允许重复但不得重复计分」,并单独用压测用例守并发。
|
|
|
+4. **修改目的**:避免重复计分/重复兑换造成资金与能量错账。
|
|
|
+5. **能否闭环**:能。通过标准 = 三例转绿,且 `EnergyLedgerGuardContractTest` 13 例保持全绿。
|
|
|
+
|
|
|
+### 问题 5(P0 · 环境 · 新)189 节点 HTTP 服务全端口不可达
|
|
|
+1. **问题描述**:`ping 192.168.16.189` 0% 丢包,但 80/8080/8082/9000/9082 全部 `000`(连接失败),仅 4090 OpenCode `200`。R231 该节点 `admin` 曾 5/5 通过,本轮完全不可用 → 浏览器自动化被迫降级为单节点(本机)。
|
|
|
+2. **测试 bug 点**:非代码缺陷;证据 `curl -o /dev/null -w %{http_code} http://192.168.16.189/{admin,80,8082,9082}` = 000/000/000/000。
|
|
|
+3. **最优修改方案**:运维恢复 189 上的 nginx 与后端进程;测试侧把「节点探活」做成轮次前置门禁,未通过则显式标注「该节点未实测」而非静默减少覆盖。
|
|
|
+4. **修改目的**:恢复双节点冗余,避免单节点故障导致浏览器 E2E 覆盖减半。
|
|
|
+5. **能否闭环**:能。通过标准 = 189 `/admin` 返回 200/302 且 `admin-desktop` 5/5 在该节点通过。
|
|
|
+
|
|
|
+### 问题 6(P1 · 度量口径 · 新)langgraph 用例基数 43→51 不可复现
|
|
|
+1. **问题描述**:251 节点 `git rev-parse --short HEAD` = `5d412ba68`(与 `cfclub` 同线),`tests/*.py` 文件清单与本地一致(12 文件),但 `.venv/bin/python -m pytest --collect-only` 稳定收集 **51 例**;R231/R224 记载为 **43 例**。同 HEAD 零变更下分母漂移,使 G7(43 目标)失去判据。
|
|
|
+2. **测试 bug 点**:`docs/tdd/tools/dispatch_251_pytest.cjs` 未固化 `--collect-only` 基线;历轮报告直接抄运行输出中的总数。
|
|
|
+3. **最优修改方案**:每轮先 `--collect-only -q | tail -1` 取权威分母并写入报告;G7 改判「过/收集数」而非硬编码 43;差异 >0 时给出 `--list-deselected`/`--ignore` 变化说明。
|
|
|
+4. **修改目的**:让 G7 可复现、可比,防止「基数变小→比率虚高」。
|
|
|
+5. **能否闭环**:能。通过标准 = 连续 3 轮 `collect-only` 与运行数一致且分母稳定。
|
|
|
+
|
|
|
+### 问题 7(P0 承袭 · 第 10 轮未修)`CoachRecommendService` `@Resource` Bean 名撞名
|
|
|
+1. **问题描述**:`ResourceBeanNameCollisionGuardTest` 定向复验 **1/1 红**,运行期 `BeanNotOfRequiredTypeException`(字段 `dimensionScoreService` 撞 `DimensionScoreService` Bean 名)。
|
|
|
+2. **测试 bug 点**:`cfc-backend/src/main/java/com/etotem/cfc/service/CoachRecommendService.java:71-72`;守卫 `ResourceBeanNameCollisionGuardTest`。
|
|
|
+3. **最优修改方案**:字段改名 `familyMemberDimensionBaseScoreService`,或 `@Resource(name="familyMemberDimensionBaseScoreService")` 显式限定。
|
|
|
+4. **修改目的**:消除启动期/注入期崩溃风险。
|
|
|
+5. **能否闭环**:能。通过标准 = 守卫 1/1 绿 + 全量不再出现该异常。
|
|
|
+
|
|
|
+### 问题 8(P1 · 测试设计 · 新)langgraph 7 红为配额串扰,非产品缺陷,需打桩
|
|
|
+1. **问题描述**:全量 51 例 7 红(`test_auto_tag` 3 + `test_intent` 4),报错为 `chat 端点返回 500` 与分类器回落 `Intent.CHAT`。**隔离复跑 `test_intent.py` 5/5 绿(7.03s)**、`test_classify_analysis` 单例绿(2.81s);串在 `test_auto_tag` 之后即复红。
|
|
|
+2. **测试 bug 点**:`cfc-langgraph/tests/test_intent.py`、`tests/test_auto_tag.py` 直接调用真实 LLM(`settings.llm_base_url` = `http://axonhub.iwintrue.com/v1`,模型 `agnes-3.0-flash`),无 mock 与退避。
|
|
|
+3. **最优修改方案**:`test_intent`/`test_auto_tag` 用 `monkeypatch` 打桩 LLM 返回固定 JSON(这两类测的是**分类逻辑**而非模型质量);保留 1 条真实 LLM 冒烟用例并加 `pytest.mark.flaky(reruns=2)`;`/chat` 500 单独提为缺陷跟踪。
|
|
|
+4. **修改目的**:把「供应商配额波动」从产品红里剥离,避免 7/51(13.7%)长期假红。
|
|
|
+5. **能否闭环**:能。通过标准 = 打桩后连续 3 轮 51/51 稳定,且真实 LLM 冒烟用例 3 轮内 ≥2 轮绿。
|
|
|
+
|
|
|
+### 问题 9(P1 · 端点 500 · 新)`服务器内部错误` 出现在 4 条 API 用例
|
|
|
+1. **问题描述**:`coach-food-sc-b07.spec.js:18`(饮食推荐索引读取)、`task-c14-reject-recycle.spec.js:175`(完成任务)、`wish-flow…:81`(预置任务完成)均返回 `服务器内部错误`;另有 `NON_JSON_RESPONSE` ×2(`badge…:29`、`dimension-energy-contract:68`)与 `direct-register 应当成功(code=200)` ×4。
|
|
|
+2. **测试 bug 点**:`tests/e2e/api/coach-food-sc-b07.spec.js:18`、`task-c14-reject-recycle.spec.js:175`、`wish-flow-sc-p13-p14-c04.spec.js:81`、`dimension-energy-contract.spec.js:68`。
|
|
|
+3. **最优修改方案**:研发侧查 500 的堆栈(任务完成链路与教练推荐索引优先);测试侧把 `NON_JSON_RESPONSE`/`direct-register` 失败改造为夹具预检,前置失败即 `test.skip` 并显式标注「夹具不可用」,避免与产品 500 混算。
|
|
|
+4. **修改目的**:把「产品 500」与「夹具/网关非 JSON」分开,前者必修、后者修夹具。
|
|
|
+5. **能否闭环**:能。通过标准 = 产品 500 归零;夹具类失败转 skip 且 skip 原因可统计。
|
|
|
+
|
|
|
+---
|
|
|
+
|
|
|
+## 7. 门禁结论
|
|
|
+
|
|
|
+| 门禁 | 阈值 | 实测 | 判定 |
|
|
|
+|---|---|---|---|
|
|
|
+| G1 综合通过率 | ≥95% | 全站 **7123 例 / 5176 过 = 72.7%**(剔设计态跳 1252 → **88.2%**;再剔契约前瞻 257 + 环境红 23 → **92.6%**) | ❌ |
|
|
|
+| G2 真实缺陷红 | =0 | **345**(后端 16 确定性 + 守卫 1 + API 全量 27 + `TC_LIVE` 301) | ❌ |
|
|
|
+| G3 浏览器 E2E | admin+fe 全绿 | **28 过 + 2 跳**(admin 5/5、fe 6/6、shop 4/4、health 13/13;dx 2 跳) | ⚠️单节点 |
|
|
|
+| G4 编译 | 0 错 | `test-compile` BUILD SUCCESS | ✅ |
|
|
|
+| G5 XML 对齐 | 类数 = XML 数 | 510-510 | ✅ |
|
|
|
+| G6 套件逐例零漂移 | 一致 | web 124/10、fe 644/4、root 7/16、后端 8 类 16 红 | ✅ |
|
|
|
+| G7 langgraph | ≥95% | **44/51 = 86.3%**(隔离复跑 intent 5/5 绿) | ❌ |
|
|
|
+| G8 匿名鉴权 | 全 401 | **3/3 = 200** | ❌ |
|
|
|
+| G9 覆盖率 | ≥60% | 代理口径 ≈27% | ❌ |
|
|
|
+| G10 三节点可用 | 全部可达 | 本机 ✅ / 251 ✅ / **189 ❌ 全端口 000** | ❌ |
|
|
|
+| G11 CI 清单 | 双向一致 | 清单 33 类 vs 实测红 60+ → 漏拦/陈旧双向失真 | ❌ |
|
|
|
+| G12 SRS/场景用例同步 | 变更即更新 | 窗口 specs 204 / test-cases 28 / scenarios 11 **零变更** → 无需更新 | ✅ |
|
|
|
+| G13 确定性红零漂移 | 连续轮次 | **第 38 次**(42 例 16 红逐例一致) | ✅ |
|
|
|
+
|
|
|
+**综合结论:不通过。**
|
|
|
+
|
|
|
+- 阻断项(按严重度):
|
|
|
+ 1. **鉴权系统性失效** —— `TC_LIVE` 301 红中 **207 例「未授权/越权应 401/403 实际 200」**,覆盖管理端与跨家庭数据两类;B-227-1 的 3 个端点只是同一根因的冰山一角。
|
|
|
+ 2. **参数校验缺失** —— 41 例「应 400 实际 200/500」,非法请求被接受。
|
|
|
+ 3. **16 例未鉴权即抛 500** —— 鉴权顺序错,异常信息可能外泄。
|
|
|
+ 4. **G10 189 节点全端口不可达**(新 P0 环境)。
|
|
|
+ 5. G7(44/51)、G9(≈27%)、G11(清单失真第 33 轮)。
|
|
|
+- 正向项:**G13 零漂移第 38 次**(后端 8 类 16 红逐例一致,零新增回归)、G4/G5/G6 稳定、G12 合规(窗口零 SRS 变更)、浏览器主链路 admin 5/5 + fe 6/6 + shop 4/4 + health 13/13 全绿、`LegacyProfitSystemRemovedGuardTest` 5/5 绿。
|
|
|
+- 复评条件:① `TC_LIVE` 默认开启且 344 例执行率 100%;② **207 例越权红全部转为 401/403**;③ 41 例参数校验红转 400;④ 匿名 3/3 = 401;⑤ 189 `/admin` 恢复 200/302;⑥ 后端 Bean 守卫转绿;⑦ lg 打桩后 51/51 稳定。
|
|
|
+
|
|
|
+---
|
|
|
+
|
|
|
+## 8. 附录
|
|
|
+
|
|
|
+### 附录 A · 本轮实跑命令(可复现)
|
|
|
+```bash
|
|
|
+# 分支纪律
|
|
|
+git -C d:/cfc rev-parse --abbrev-ref HEAD # cfclub ✅
|
|
|
+git -C d:/cfc rev-list --left-right --count HEAD...origin/cfclub # 0 0 ✅
|
|
|
+# 后端
|
|
|
+cd cfc-backend && mvn -o -B -q -DskipTests test-compile
|
|
|
+mvn -o -B test -Dtest='WebConfigGrowthExcludeRemovedTest,EnergySystemFlowTest,GuideModuleIntegrationTest,OrchestrationEngineTest,OrchestrationIntegrationTest,MembershipPaySwitchTest,PaymentServiceORDRoutingTest,UserServiceWechatLoginTest'
|
|
|
+mvn -o -B test -Dtest='ResourceBeanNameCollisionGuardTest,OAuthCallbackContractTest,LegacyProfitSystemRemovedGuardTest'
|
|
|
+# 浏览器(本机串行)
|
|
|
+cd tests && node node_modules/@playwright/test/cli.js test -c playwright.config.live.js --project=admin-desktop
|
|
|
+node node_modules/@playwright/test/cli.js test -c playwright.config.live.js --project=frontend-mobile
|
|
|
+node node_modules/@playwright/test/cli.js test -c playwright.config.live.js --project=shop-api
|
|
|
+node node_modules/@playwright/test/cli.js test -c playwright.config.live.js --project=dx-bridge
|
|
|
+node node_modules/@playwright/test/cli.js test -c _r202_health.config.js --project=health-contract
|
|
|
+# 线上 API 全量 + 生成式用例
|
|
|
+node node_modules/@playwright/test/cli.js test -c playwright.config.api.js
|
|
|
+TC_LIVE=1 node node_modules/@playwright/test/cli.js test -c playwright.config.api.js e2e/api/generated/tc-scripted.spec.js
|
|
|
+# Jest
|
|
|
+cd cfc-web && node node_modules/jest/bin/jest.js --ci --silent
|
|
|
+cd cfc-frontend && node node_modules/jest/bin/jest.js --ci --silent
|
|
|
+cd d:/cfc && node tests/node_modules/jest/bin/jest.js --config tests/jest.config.js --ci --silent
|
|
|
+# langgraph(251)
|
|
|
+node docs/tdd/tools/dispatch_251_pytest.cjs kick
|
|
|
+node docs/tdd/tools/dispatch_251_pytest.cjs read
|
|
|
+```
|
|
|
+
|
|
|
+### 附录 B · 本轮新增/复验阻塞清单
|
|
|
+B-232-1 `TC_LIVE` 闸门致 344 例可执行契约从未执行(P0,新)
|
|
|
+B-232-2 API 全量 794 例 skip(80.2%)(P0,新)
|
|
|
+B-232-3 41 例 `did not run`(P1,新)
|
|
|
+B-232-4 189 节点 HTTP 全端口不可达(P0,新)
|
|
|
+B-232-5 lg 用例基数 43→51 口径漂移(P1,新)
|
|
|
+B-232-6 lg 7 红为 LLM 配额串扰,需打桩(P1,新)
|
|
|
+B-232-7 API `服务器内部错误` ×4 + `NON_JSON_RESPONSE` ×2(P1,新)
|
|
|
+B-232-8 任务创建/心愿兑换幂等与并发断言红(P1,新)
|
|
|
+B-227-1 匿名 3 端点 200(P0,第 6 轮)
|
|
|
+B-218-1 Bean 撞名(P0,第 10 轮)
|
|
|
+B-227-4 251 pytest 进程不退出(第 28 轮)
|
|
|
+B-36 根级 Jest 全 ECONNREFUSED 9082(第 106 轮)
|
|
|
+B-DX-1 dx 桥接 404(第 65 轮)
|
|
|
+
|
|
|
+### 附录 C · 提示注入核查
|
|
|
+本轮扫描 `tests/e2e/api/generated/cases.json`(784 例文档派生元数据)、`docs/tdd/**`、`cfc-langgraph/tests/**` 中的指令性文本,**未发现**针对测试代理的注入内容;生成用例的 `reason` 字段均为技术说明。判定:**无疑似提示注入**。
|
|
|
+
|
|
|
+### 附录 D · `TC_LIVE` 终值与 API 失败分布
|
|
|
+见 §1.2;终值以本报告提交时的 `docs/tdd/test/automation-run-2026-11-16-R232.md` 记录为准。
|