测试负责人:陆谨(软件测试专家团 · 测试架构师)|执行档:review(离线白名单)+ 内网浏览器 E2E + 远程节点派发|静默无人值守 基线:R214
8ed9cf583→ 远端1e7b852e4(仅 auto bump [skip ci],零 src 变更)→ 本轮无窗口新增,后端全量承采 R214 实跑证据 本轮头条:① langgraph@251 红 6→3(正向改善),但根因从 429/401 漂移为 500 ConnectError 连接失败(环境型,B-208-3 第 13 轮);② 189 节点探活恢复 200(B-208-1 第 8 轮后首次),但 admin E2E 派发实测 3过/2失败(链路仍 502,本机交叉 5/5 全绿);③ 其余六套件(cfc-web / fe / 根级 / 浏览器 / 线上 API)全部零漂移;④ 后端test-compile承采 R214 EXIT=0(窗口零 src)
| 项 | 内容 |
|---|---|
| 上次审查 | R214(2026-11-15 10:16~10:55),结论「不通过(有条件):窗口零源码变更 → 全站严格零漂移第 34 次;lg 红集分布漂移总数 6 根因同源 429+401」 |
| 本次 | 第 215 轮,非首次审查 |
| 历史遗留 → 本次状态 | B-208-1 189 DNS/502 → 第 8 轮,本轮探活 189:4090 = 200 恢复,但 admin 派发实测 3过/2失败(TC-A-U04 登录超时 + TC-A-U05 account-roles 502)→ 服务恢复、链路未修,admin 仍由本机交叉 5/5 全绿 B-208-3 langgraph 429+401 → 第 13 轮,红 6→3 改善,根因漂移为 500 ConnectError(All connection attempts failed)——仍环境型非代码回归 B-208-2a~2e 后端 16 例确定性红 → 承采 R214 全量 16/16,仍待研发 B-36 根级 9082 未起 → 第 92 轮,7 过 / 16 红(全 ECONNREFUSED) B-DX-1 dx 2 跳(404) → 第 49 轮 B-208-5 cfc-web 132 vs 119 → 第 11 轮(3 个本地未入库文件) B-213-1 fix(dashboard) 后端 PV/UV 用例缺口 → 第 3 轮,P1B-213-3 CI 清单失真(漏拦 67 / 陈旧 26)→ 第 3 轮 B-213-5 ShopCouponClaimApiContractTest 假绿 → 第 3 轮 |
| 本次新增 | B-215-1(189 服务恢复但链路未修)、B-215-2(lg 根因漂移 500 连接失败)——均为环境型观察,非代码缺陷 |
历史记忆只作对照:本轮 cfc-web、cfc-frontend、浏览器 E2E、根级、线上 API、langgraph、189 节点均为重新取证;后端全量为承采 R214 实跑(窗口零 src 变更,合理承采)。
| 套件 | R215(本轮) | R214(上轮) | 漂移 |
|---|---|---|---|
| 基线 | 8ed9cf583(R214 报告)→ 远端 1e7b852e4(auto bump,零 src) |
7e14e2b7c → 零 src |
零变更 |
| 后端 · 全量 | 承采 R214:501 类 / 4342 例 / 3899 过 / 439 红 / 4 跳 = 89.86% | 501 类 / 4342 例(1:06h 实跑) | 承采(零窗口新增) |
| 后端 · 编译 | 承采 R214 EXIT=0(窗口零 src,未重跑) | EXIT=0(1m21s 实跑) | 承采 |
| 浏览器 E2E · admin | 189 派发 3过/2失败(TC-A-U04 超时 + TC-A-U05 502,B-208-1 链路);本机交叉 5/5 全绿(权威) | 本机 5/5 | 189 首测(环境);本机零漂移 |
| 浏览器 E2E · frontend | 真实站点 /frontend 6/6(46.4s) |
真实站点 6/6 | 零漂移 |
| 浏览器 E2E · shop / health / dx | shop 4/4 · health 13/13(匿名全 401)· dx 2 跳(404 三复) | 4/4 · 13/13 · 2 跳 | 零漂移(B-DX-1 第 49 轮) |
| cfc-web Jest | 132/132(21 套,12.19s) | 132/132(21 套) | 零漂移(B-208-5 第 11 轮) |
| cfc-frontend Jest | 644 过 / 4 红 / 12 跳 / 660(46 套,16.7s) | 644/4/12/660(46 套) | 例级零漂移(4 红逐例一致) |
| 根级黑盒 Jest | 7 过 / 16 红 / 23(全 ECONNREFUSED 9082) |
7/16 | 零漂移(B-36 第 92 轮) |
| 线上 API(点名 4 文件) | 25 过 / 0 红 / 7 跳 / 32 | 25/0/7 | 零漂移 |
| langgraph@251 | 40 过 / 3 红 / 43 例(207.56s) | 37/6/43(114.43s) | 红 6→3 改善;根因 429/401 → 500 ConnectError |
| 189 节点 | 探活 200 恢复(第 8 轮首次);admin 派发 3过/2失败 | 探活 000(不可达) | 服务恢复;链路未修 |
全站可测合计(本轮口径,无窗口新增):5262 例 / 4775 过 / 462 红 / 25 跳
测试结果有变化(R214 → R215):
429 AgnesAI free rate limit + 401 key ****ab12 invalid 漂移为 500 ConnectError(All connection attempts failed)——上游 LLM 连接失败,环境型(B-208-3 第 13 轮,非代码回归)waitForURL 20s 超时 + TC-A-U05 account-roles 502)→ 节点服务恢复、DNS/hosts 链路未修;权威信号取本机交叉 5/5 全绿cfc.iwintrue.com/frontend + Web 管理端 cfc.iwintrue.com/admin)。ai.etotem.com.cn)。@Test 4376,含本地未入库 5 文件);控制器 372 / handler 2021(覆盖 556 = 27.5%)· 结构化用例 726 / Playwright 571 / Python 48 / 场景文件 11。http://git.iwintrue.com/liaoxg/cfc.git(SSH 仍失效,承 B-203-3)。| # | 测试类型 | 层次 | 状态 | 证据(本轮) |
|---|---|---|---|---|
| 1 | 单元测试 | 功能层次 | 已发现 | 后端 501 类(承采 R214 全量实跑)+ cfc-web 21 套 132 例 + fe 46 套 660 例 |
| 2 | 组件测试 | 功能层次 | 已发现 | cfc-web/src/__tests__/components/*、cfc-web/src/views/admin/review/__tests__/ |
| 3 | 集成测试 | 功能层次 | 已发现 | 后端 integration/** 随全量执行(承采 R214);StatsControllerTest 6/6 绿(承采) |
| 4 | 契约测试 | 功能层次 | 已发现 | 66 个 *Contract* 类 / 423 例预期红(承采 R214) |
| 5 | 接口 API 测试 | 功能层次 | 已发现 | 线上 API 32 例(25 过 / 7 跳)+ health 13/13 + shop 4/4 + dx 2 跳 |
| 6 | 系统/端到端 | 功能保障 | 已发现 | Playwright live:admin 本机 5/5 + frontend 6/6(真实站点)实跑;189 派发 3过/2失败(环境) |
| 7 | 验收 UAT | 功能保障 | 部分已发现 | 场景文件 11 份有资产,仍无 UAT 执行记录 |
| 8 | BDD 规格 | 功能保障 | 未发现 | 无 .feature/cucumber → 缺口 |
| 9 | 冒烟测试 | 功能保障 | 已发现 | playwright.config.smoke.js + api-smoke 4/4 |
| 10 | 回归测试 | 功能保障 | 已发现 | 全量 4342 例基线 + 快速套件逐例比对(lg 红 6→3;其余零漂移) |
| 11 | 探索性测试 | 功能保障 | 未发现 | 无 chartered 探索记录(无人值守窗口不适用) |
| 12 | 性能测试 | 非功能 | 未发现 | 无 k6/JMeter;execute 档未授权 → 未实测 |
| 13 | 可靠性测试 | 非功能 | 部分已发现 | 429/401→500 连接失败降级行为由 lg 红集间接反映(本轮 3 红);无故障注入 |
| 14 | 安全测试 | 非功能 | 部分已发现 | 匿名端点 7/7 = 401(mind/energy/health-plan/family/admin-families/xiaomi/huawei);无 SAST/依赖扫描(离线档) |
| 15 | 兼容性测试 | 非功能 | 部分已发现 | 仅 Chromium 双视口(1440×900 / 375×812);无多浏览器矩阵 |
| 16 | 可用性测试 | 非功能 | 未发现 | 无 SUS / 任务完成率记录 |
| 17 | 无障碍测试 | 非功能 | 未发现 | 无 axe/WCAG 扫描 |
| 18 | 覆盖率(行/分支) | 度量与流程 | 部分已发现 | JaCoCo 未开;替代口径 handler 覆盖 556/2021 = 27.5% |
| 19 | 变异测试 | 度量与流程 | 未发现 | 无 PIT/Stryker |
| 20 | 全项目代码审查 | 度量与流程 | 已发现 | 本轮新增 2 条环境观察(B-215-1/2,非代码级五要素);窗口零 src 无新代码问题 |
| 项 | 内容 |
|---|---|
| 执行档 | review(离线白名单) |
| 联网范围 | 内网站点 E2E(cfc.iwintrue.com)+ 节点派发(189:4090 / 251:4096 / 本机 4091) |
| 授权 | 自动化无人值守按既定授权范围执行;未授权公网压测、依赖漏洞扫描、渗透测试 |
| 未实测项 | 性能/可靠性(故障注入)/DAST/依赖漏洞扫描(execute 档未授权);多浏览器矩阵(无工具);探索性测试(无人值守不适用);189 admin 链路(服务恢复但 502 未修,本机交叉覆盖) |
| 降级说明 | 上述维度全部降级为「测试设计 + 缺口诊断」,报告中不写成通过 |
| 缺口类型 | 现状 | 风险 | 建议测试设计 | 优先级 | 闭环方式 |
|---|---|---|---|---|---|
| 后端 PV/UV 用例缺口(B-213-1 后端侧) | StatsController PV/UV 按日去重 + saneDwell 归一仍无后端用例(前端 9 例已补绿) |
看板 KPI 口径回归无护栏 | Mockito 注入 articleReadingRecordMapper:跨天重复读者 → 断言 PV=记录数、UV=去重数;saneDwell 超 1800 截断/负值归零 |
P1 | 补行为用例并定向复跑绿 → 销号 |
| 189 服务恢复但链路 502(B-215-1) | 189:4090 探活 200,admin E2E 3过/2失败(U04 20s 超时 + U05 account-roles 502) |
双节点互备仍不可用 | 189 补 hosts 192.168.16.251 cfc.iwintrue.com;origin 改 HTTP;重派 admin-desktop 验证 5/5 |
P1 | 运维修 DNS/hosts → 189 重跑 5/5 销号 |
| langgraph 上游连接失败(B-215-2) | 红 6→3,根因 429/401 → 500 ConnectError(All connection attempts failed) | 上游不稳 + key 失效并存 | 轮换 key;LLM 依赖用例加 respx/monkeypatch stub,仅留 1 条 live smoke |
P1 | stub 落地 → 连续 2 轮绿销号 |
| 契约前瞻 423 例 | 66 个契约类领先实现 | 契约增速 > 实现速度 | 契约批次 TDD(RED→GREEN)逐批闭环 | P1 | 研发实现 → 定向复跑销号 |
| CI 排除清单失真 | 漏拦 67 类 / 陈旧 26 类(B-213-3 第 3 轮) | 硬门禁必红 → 被无视 | 由 surefire 红类自动生成清单 | P2 | 清单与实测对齐 → CI 转绿 |
| 覆盖率/变异/BDD/无障碍/可用性 | JaCoCo 未开、无 PIT、无 .feature、无 axe |
度量与行为规格缺自动保障 | 开 JaCoCo + PIT 抽样 + cucumber 冒烟 + axe | P3 | 测试侧排期立项 |
| 审查维度 | 负责专家 | 结论 | 关键证据 |
|---|---|---|---|
| 单元·组件级 | 苏雅 | ⚠️ 有条件通过 | 后端 501 类 / 4342 例(89.86%,承采);cfc-web 132/132;fe 644/660(4 预期红) |
| 集成·接口级 | 柯砚 | ⚠️ 有条件通过 | API 25/0/7、health 13/13、shop 4/4、dx 2 跳;StatsControllerTest 6/6(承采) |
| 系统·验收级 | 白樾 | ✅ 通过 | admin 5/5(本机交叉)+ frontend 6/6(真实站点 /frontend)+ 游客态三页可渲染 |
| 测试保障级 | 闻朔 | ✅ 通过 | 28 过 + 2 跳浏览器全绿;双端 Jest 与 lg 逐例比对(lg 红 6→3,其余零漂移) |
| 性能·可靠性 | 骆骋 | ⛔ 未实测(降级) | 无性能资产;lg 上游连接失败反映降级侧写(非代码) |
| 安全 | 关屿 | ⚠️ 有条件通过 | 匿名 7/7 = 401;无 SAST/依赖扫描(离线档) |
| 兼容·体验 | 阮清 | ⚠️ 有条件通过 | 仅 Chromium 双视口;:4091 目标纠偏已生效(B-213-2 承袭) |
| 流程·度量·代码 | 何序 | ⚠️ 有条件通过 | CI 漏拦 67(B-213-3 第 3 轮);覆盖率未开;本轮仅 2 条环境观察(非代码五要素) |
本轮新增(环境观察,非代码级五要素,暂以五要素格式勾稽):
189:4090 自 R209 后首次探活 200,admin-desktop 派发实测 5 例中 2 例失败(TC-A-U04 page.waitForURL(/\/admin\/dashboard/) 20s 超时;TC-A-U05 account-roles 接口 502);② 测试 bug 点——e2e-live/admin-live.spec.js:171(waitForURL)与 :188(rolesStatus2 断言);③ 最优修改方案——189 补 hosts 192.168.16.251 cfc.iwintrue.com + origin 改 HTTP,重派 admin-desktop;④ 修改目的——恢复双节点互备(G10),消除单点覆盖;⑤ 闭环——189 重跑 admin-desktop 5/5 通过后销号(当前本机交叉 5/5 已作权威信号)。ConnectError('All connection attempts failed')(chat 端点 500,test_auto_tag 3 例),上游 LLM 连接不稳定与 key 失效并存;② 测试 bug 点——tests/test_auto_tag.py::test_auto_tag_* 3 例;③ 最优修改方案——运维轮换 key + 排查连接链;测试侧落地 respx stub 脱环境,仅留 1 条 live smoke;④ 修改目的——隔离环境噪声,使红集可判定为代码回归或环境型(G7);⑤ 闭环——stub 后连续 2 轮 lg 全绿(或仅 live 1 红且根因证实的 key 问题)销号。历史问题(B-208-2a~2e、B-213-1 后端侧、B-213-3、B-213-5、B-208-1、B-208-3、B-36、B-DX-1、B-208-5):承袭 R214,状态无变化,处置方案见 R214 报告 §8。
⛔ 不通过(有条件) —— 契约前瞻红与确定性红并存(承袭 R214);本轮结果有变化(lg 红 6→3 改善 + 189 探活恢复但链路未修),其余零漂移。
| 门禁 | R215 结果 | 判定 |
|---|---|---|
| G1 全量通过率 ≥95%(剔 skip) | 91.16%(4775/5237;剔 427 预期红 = 99.27%) | ❌ 全量口径 / ✅ 剔预期红口径 |
| G2 红例 0(剔预期红契约) | 实红 35(后端 16 + 根级 16 + lg 3,较 R214 38 -3) | ❌ |
| G3 前端 Jest | fe 644/660(4 预期红 + 12 跳);web 132/132 | ⚠️ 预期 RED |
| G4 编译 0 错 | ✅ 承采 R214 EXIT=0(1m21s 实测,窗口零 src) | ✅ |
| G5 逐类有 XML | ✅ 承采 R214 501/501 | ✅ |
| G6 浏览器 E2E | 28 过 + 2 跳(本机 admin 5 + frontend 6 + shop 4 + health 13;dx 2 跳;189 派发 3过/2失败 = 环境链路,权威取本机) | ✅(本机)/ ⚠️(189 链路) |
| G7 langgraph 通过率 | 40/43 = 93.0%(红 3,环境型;较 R214 86.0% +7.0pp) | ⚠️ 未全绿(第 13 轮) |
| G8 鉴权契约 | 匿名 7/7 = 401 + health 内 13 例全 401/403 | ✅ |
| G9 覆盖率 | handler 覆盖 556/2021 = 27.5% | ❌ |
| G10 双节点互备 | 本机 ✅(admin 5/5 + frontend 6/6);189 探活 200 ✅ 但 admin 链路 502 ⚠️ | ⚠️ 部分(服务恢复,链路未修) |
| G11 CI | 漏拦 67 / 陈旧 26(B-213-3 第 3 轮) | ❌ |
| G12 SRS/场景变更 → 用例 | 窗口零 SRS/API/场景变更 → 零新增用例 | ✅ |
| G13 存量零漂移 | 六套件逐字段与 R214 一致;lg 红 6→3 改善;189 探活恢复 | ⚠️ 有正向变化(非同向零漂移) |
| G14 场景映射 | SC id 引用 137/152 = 90.1%(15 个 SC 无引用,承袭) | ❌ |
核心变化(R214 → R215):
189:4090 服务进程恢复;admin 派发实测 3过/2失败(登录 20s 超时 + account-roles 502)→ DNS/hosts 链路仍未修(B-208-1 → B-215-1 演进)。test-compile 承采 EXIT=0。下轮前置:① 运维修 189 hosts/DNS(B-215-1,admin-desktop 重跑 5/5 销号);② 运维排查 langgraph 上游连接链 + 轮换 key(B-215-2)+ 测试侧落 stub;③ 研发修 B-208-2a~2e(16 例确定性红)+ B-213-1 后端 PV/UV;④ CI 清单按 R213 附录 B 刷新(B-213-3);⑤ ShopCouponClaimApiContractTest 改行为断言(B-213-5);⑥ 窗口若出现 src 变更,后端由承采转全量实跑。
| 套件 | 命令 | 结果 | 耗时 |
|---|---|---|---|
| 后端全量/编译 | 窗口零 src,承采 R214 实测 | 501 类 / 4342 例 / 89.86%;compile EXIT=0 | 承采 |
| admin E2E · 189 | node .tdd/_r215_189_admin.cjs(git reset → npx playwright test -c playwright.config.live.js --project=admin-desktop) |
3过/2失败(环境链路) | 1m4s |
| admin E2E · 本机 | 同上 --project=admin-desktop |
5/5 全绿 | ~50s |
| frontend E2E | --project=frontend-mobile(真实站点) |
6/6 | 46.4s |
| shop / dx | --project=shop-api / --project=dx-bridge |
4/4 · 2 跳(404 三复) | 8s / ~5s |
| health | npx playwright test -c playwright.config.health.js |
13/13(匿名全 401) | ~7s |
| 线上 API | npx playwright test <api-smoke/nonfunc-security/nonfunc-perf-compat/traceability> -c playwright.config.api.js |
25 过 / 7 跳 / 32 | ~20s |
| cfc-web | cd cfc-web && npx jest --silent |
132/132(21 套) | 12.19s |
| cfc-frontend | cd cfc-frontend && npx jest --silent |
644/4/12/660(46 套) | 16.7s |
| 根级 | npx jest --silent(tests 目录) |
7 过 / 16 红 / 23 | 2.4s |
| langgraph@251 | node .tdd/_r215_251_lg.cjs(timeout 700 pytest tests --ignore=qna,chat) |
40 过 / 3 红 / 43 | 207.56s |
| 189 探活 | curl http://192.168.16.189:4090 |
200 恢复(第 8 轮首次) | — |
| 台账 | discover_tests.py + test_inventory.py |
EXIT=0;556/2021=27.5%;跨源 5721 | ~1m |
| 项 | 值 |
|---|---|
| 本轮窗口 | R214 8ed9cf583 → 远端 1e7b852e4(auto bump [skip ci],零 src) |
| 检出新提交 | git fetch → 远端仅 +1 auto bump(版本/CHANGELOG 元数据),无代码提交 |
| 推送状态 | R210~R214 全部已在远端(FETCH_HEAD == 本地 HEAD == 8ed9cf583 + auto bump) |