automation-run-2026-11-15-R209.md 7.3 KB

自动化执行日志 R209(2026-11-15 06:10 ~ 07:20,定时巡检)

角色:测试负责人(自动化测试闭环 / 软件测试专家团·陆谨)|全程静默无人值守。 基线:R208 db9e6a9a1 → 远端 77fe318d0(窗口仅 1 提交:chore: auto bump version and changelog [skip ci],零 src/文档变更)。 窗口特征:无 SRS/场景变更 → G12 用例零更新(已复核);本轮为「基线维持 + 红集双跑锁定」轮。

一、节点探活与派发

节点 结果
本机(浏览器节点) ✅ admin 5/5 实测、fe 6/6、shop 4/4、health 13/13(4 project + health 独立配置)
251:4096(opencode,langgraph 专用) ✅ pytest 实派成功(_r209_251_lg.cjs kick + _r209_251_read.cjs 读 /tmp/r209_pytest.log),32 passed / 11 failed / 119.93s;派发前清理 3 个残留进程(1847684/1847701/1847702 → 0 残留)
189(浏览器节点) ❌ DNS 失效(Resolve-DnsName cfc.iwintrue.com → 公网 111.228.2.33;curl /admin → 502);本轮不派发,由本机交叉覆盖(B-208-1 第 2 轮)
本机 9082(cfc-backend) ❌ closed(B-36 承袭第 87 轮,根级黑盒 16 红源)
cfc.iwintrue.com/admin、/frontend ✅ 可达(本机 hosts 指向 192.168.16.251)

二、本轮实测(全量实跑,无采信项)

1. 后端 Maven 全量(39m41s,JAVA_HOME=/d/jdk1.8.0_25 /d/maven/apache-maven-3.6.1/bin/mvn -o -B clean test)

  • 497 类 / 4316 例 / 3876 过 / 415F / 21E / 4S = 89.81%(_r209_agg.json:classes=497 tests=4316 pass_rate=89.81 red_classes=75 red_cases=436)
  • 较 R208(493 类 / 4295 例 / 90.12%):类 +4、例 +21,全部来自新增契约测试(口径性回落,非回归)
  • 红集归因(436 红 = 75 类):
    • 契约前瞻 412 例 / 65 类(*Contract*,预期 RED,实现未落地)
    • 确定性非契约 16 例 / 8 类(与 R208 逐类一致):EnergySystemFlowTest 6F、UserServiceWechatLoginTest 3E、WebConfigGrowthExcludeRemovedTest 2E、GuideModuleIntegrationTest 1E、OrchestrationEngineTest 1F、OrchestrationIntegrationTest 1F、MembershipPaySwitchTest 1F、PaymentServiceORDRoutingTest 1F
    • 全量并行串扰 8 例 / 3 类(TaskCheckinWebhookReminderTaskTest 7E、VirtualPayTimeoutTaskTest 1E、GlobalSearchScP82ContractTest 3E → B-209-1)
  • 隔离复验(双跑锁定红集边界):
    • 串扰 3 类:mvn -o -B test -Dtest='TaskCheckinWebhookReminderTaskTest,VirtualPayTimeoutTaskTest,GlobalSearchScP82ContractTest' → 17 例全绿 EXIT=0
    • 非契约 10 类:54 例中 10F + 6E 逐类复现(与 R208 完全一致)→ 16 例确定性红坐实

2. 浏览器(用户核心指令:admin/frontend + 三角色节点不越界;每节点 1 浏览器任务)

  • 本机 admin-desktop:5/5 — TC-A-U01~U05(登录页三角色/密码+微信扫码/滑块/真实登录/菜单),连续 2 轮本机绿
  • 本机 frontend-mobile:6/6 — TC-F-U01~U06
  • 本机 shop-api:4/4 — TC-S-U01~U04(排序契约)
  • 本机 health(独立配置 tests/playwright.config.health.js):13/13 — 含匿名端点 6/6=401
  • dx-bridge:2 skip(404,B-DX-1 第 42 轮)

浏览器全量:28/28 + 2 skip,零失败(与 R208 持平)

3. cfc-web Jest(实跑,本机工作区口径)

  • 132/132(21 套件,33.5s)——较远端基线 119/119 多 13 例,全部来自 3 个仅存在于本机工作区的未入库文件(FamilyWorkbench.contract.spec.js/Families.familyWorkbench.spec.js/familyWorkbench.api.test.js,B-208-5/B-WIP-200 第 6 轮)

4. cfc-frontend Jest(实跑)

  • 635 过 / 4 红 / 12 跳 / 651 总(45 套件,32.1s)——较 R208(627/4/12,43 套)+8 例(新增契约);4 红逐例一致:growthHistory.dayGroupView RED-A7、recommendation.viewKeyAndDelete、signature.consignee AC-R1/AC-R2

5. 根级黑盒 Jest(实跑)

  • npx jest -c tests/jest.config.js → 7 过 / 16 红 / 23(全 ECONNREFUSED 127.0.0.1:9082,B-36 第 87 轮)

6. langgraph@251(实派)

  • pytest(tests --ignore=tests/qna --ignore=tests/test_chat.py):32 passed / 11 failed(119.93s),红 = analyze 2 + auto_tag 5 + intent 4,与 R203~R208 红集完全一致(第 7 轮)
  • 日志根因实证:429 rate_limit_exceeded(AgnesAI 今日文本配额耗尽) + 401 api key ****ab12 invalid(记忆召回) → 环境红非回归(B-208-3/B-199-1 延续)

7. 189 探活

  • _r209_probe189_result.log:Resolve-DnsName cfc.iwintrue.com → 111.228.2.33(公网);curl /admin → 502 Bad Gateway(8s)→ B-208-1 第 2 轮未修复

三、门禁(终值)

门禁 标准 R209 实测 结论
G1 通过率 ≥95%(剔 skip) 90.96%(4697/5164);剔 412 预期红 + 8 串扰 = 99.01% ❌(全量)/⚠(剔预期红成立)
G2 红例数 0(剔预期红契约) 47(后端确定性 16 + fe 4 + 根级 16 + lg 11) ❌
G3 浏览器 28/28 28/28 + 2 跳 ✅
G4 编译 0 错 0 错(497 类) ✅
G5 XML 无沉默 497/497 类 均有 XML ✅
G6 流水线 EXIT 符合预期 浏览器 4 套 EXIT=0;后端/lg EXIT=1(预期) ✅
G7 langgraph 43/43 32/43(11 环境红,第 7 轮) ❌
G8 匿名端点 6/6=401 6/6=401 ✅
G9 锚点率 ≥60% ~13%(承袭) ❌
G10 节点 本机+189 双绿 本机 ✅ / 251 ✅ / 189 ❌(502) ❌
G11 CI 清单 全绿 无 CI(仅本地 pre-push=test-compile) ❌
G12 SRS 合规 变更→用例同步 窗口零 SRS/场景变更 → 用例零更新(已复核) ✅
G13 存量零漂移 连续零漂移 第 32 次(后端 16 非契约逐类、fe 4 逐例、lg 11、根级 7/16、浏览器 28 绿) ✅
G14 场景映射 ≥80% ~64-72%(承袭) ❌

门禁结论:不通过(有条件) —— ✅ G3/G4/G5/G6/G8/G12/G13;❌ G1/G2/G7/G9/G10/G11/G14;⚠ G1(剔预期红口径成立)。

变化对比(R208→R209):

  • 后端:493/4295/90.12% → 497/4316/89.81%(+4 类 +21 例全为契约预期红,口径性回落)
  • 新增观测:全量 3 类 8 例串扰 → 隔离复验 17/17 全绿(B-209-1,不计红)
  • 浏览器 / cfc-frontend 4 红 / 根级 / langgraph:持平(逐例零漂移)
  • 窗口零源码变更 → 无任何确定性回归

四、未实测项(如实标注)

  • 压测/SAST/DAST/依赖扫描(未授权联网);JaCoCo/PIT 变异(无工具/时长权衡)
  • 兼容多浏览器 / 无障碍 / UAT-BDD
  • 189 浏览器执行(DNS 502,本机交叉覆盖);G9/G14 锚点(承袭未重算)

五、产出文件

  • docs/tdd/orchestration/report-test-2026-11-15-R209.md(主报告,模板 v1.1 结构)
  • docs/tdd/test/notice-2026-11-15-R209-研发通知.md(结果口径有变化 → commit+push + 通知研发)
  • docs/tdd/test/blockers.md(追加 R209 段:B-209-1 串扰澄清 / B-208-x 第 2 轮延续 / R209 门禁)
  • 临时产物:_r209_agg.json / _r209_mvn_full.log / _r209_isolated.log / _r209_noncontract_rerun.log / _r209_251_lg.cjs / _r209_251_read.cjs / _r209_probe189_result.log(不入库)