From a54f80c65000dfd49c024e6ce50817a2f2124b09 Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?=E9=BB=84=E8=87=AA=E8=BE=BE?= <980324341@qq.com> Date: Mon, 19 Oct 2026 16:54:37 +0800 Subject: [PATCH] =?UTF-8?q?refactor(phase-3):=203C=20=E7=AC=AC=E4=B8=89?= =?UTF-8?q?=E5=A4=84=20writeJson=20=E5=B9=B6=E6=A1=A3=E2=80=94=E2=80=94per?= =?UTF-8?q?sistStats=20=E7=9A=84=E6=8D=95=E8=8E=B7=E9=9D=A2=E6=94=B6?= =?UTF-8?q?=E5=9B=9E=E5=BA=8F=E5=88=97=E5=8C=96=EF=BC=8CRETHROW=20?= =?UTF-8?q?=E4=B8=8B=E9=99=90=E6=8C=89=E5=AE=9E=E6=B5=8B=E9=92=89=E5=88=B0?= =?UTF-8?q?=20380?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit 用户拍板「按顺序」第①项。CollectDataService.persistStats 那段 try 包 15 行 payload.put 加一次 writeValueAsString 并进底座 writeJson(ObjectMapper, Object, String),文案 「保存采集统计失败」、异常类型与不带 cause 三条线协议事实逐字带到调用点——回传 golden 那 15 段每段都过这一格,非写模式逐字节复现就是等值证明。 并档顺带把捕获面从「建 map+序列化」收回到「序列化」:LinkedHashMap.put 对这些值不可能 抛,所以没有一处出口被改回吞掉。RETHROW_FLOOR 381→380,出处点名续在同一处注释里。 读数按上一笔定下的复现办法当场取(上限压 0、下限抬 99999 各单跑一次本类,探完五个 常量逐格还原):整树 total=997、rethrow=380,与上一笔读到的 998/381 各差 1,正好等于 本笔摘掉的那一处。不重抛/只 log/空体三格是上限且常量等于上一次记录的实测值,绿即证 未涨过那一数。 行数:本支棘轮 2111→2107,对在册基线 2209 累计净减 102。基线一格未改、--write 未跑。 门禁:定向 349 例/0 红/2 skipped(含 ratchet、wiring、SourceScan、两套 golden); 后端全量 4533 例/0 红/14 skipped/BUILD SUCCESS(真实 rc=0);ops ruff All checks passed、readability 棘轮 8 passed/1 failed——那一记红仍是另一路 80f92c38 落地的 AppearancePatentLlmClient 1419→1465(基线未同步),本笔不代收、不回写。 --- .../service/CollectDataService.java | 42 +++++++++---------- .../config/CatchSilenceRatchetTest.java | 12 +++++- 2 files changed, 30 insertions(+), 24 deletions(-) diff --git a/backend-java/src/main/java/com/nanri/aiimage/modules/collectdata/service/CollectDataService.java b/backend-java/src/main/java/com/nanri/aiimage/modules/collectdata/service/CollectDataService.java index c0f7ec3f4..fc292ca9f 100644 --- a/backend-java/src/main/java/com/nanri/aiimage/modules/collectdata/service/CollectDataService.java +++ b/backend-java/src/main/java/com/nanri/aiimage/modules/collectdata/service/CollectDataService.java @@ -1401,29 +1401,25 @@ public class CollectDataService extends AbstractFileTaskPipeline payload = new LinkedHashMap<>(); - payload.put("totalRows", stats.totalRows); - payload.put("receivedRows", stats.receivedRows); - payload.put("processedRows", stats.processedRows); - payload.put("collectStage", stats.collectStage); - payload.put("currentKeyword", stats.currentKeyword); - payload.put("searchCurrentPage", stats.searchCurrentPage); - payload.put("searchTotalPages", stats.searchTotalPages); - payload.put("detailProcessedAsins", stats.detailProcessedAsins); - payload.put("detailTotalAsins", stats.detailTotalAsins); - payload.put("currentChunkRows", stats.currentChunkRows); - payload.put("dedupeFilteredCount", stats.dedupeFilteredCount); - payload.put("invalidFilteredCount", stats.invalidFilteredCount); - payload.put("brandRejectedCount", stats.brandRejectedCount); - payload.put("brandQueryFailedCount", stats.brandQueryFailedCount); - payload.put("finalRowCount", stats.finalRowCount); - // 持久化 Python 携带的关键词级聚合;后续 processResultFileJob 阶段读取用于落 Excel - payload.put("summaries", stats.summaries == null ? List.of() : stats.summaries); - task.setResultJson(objectMapper.writeValueAsString(payload)); - } catch (Exception ex) { - throw new BusinessException("保存采集统计失败"); - } + Map payload = new LinkedHashMap<>(); + payload.put("totalRows", stats.totalRows); + payload.put("receivedRows", stats.receivedRows); + payload.put("processedRows", stats.processedRows); + payload.put("collectStage", stats.collectStage); + payload.put("currentKeyword", stats.currentKeyword); + payload.put("searchCurrentPage", stats.searchCurrentPage); + payload.put("searchTotalPages", stats.searchTotalPages); + payload.put("detailProcessedAsins", stats.detailProcessedAsins); + payload.put("detailTotalAsins", stats.detailTotalAsins); + payload.put("currentChunkRows", stats.currentChunkRows); + payload.put("dedupeFilteredCount", stats.dedupeFilteredCount); + payload.put("invalidFilteredCount", stats.invalidFilteredCount); + payload.put("brandRejectedCount", stats.brandRejectedCount); + payload.put("brandQueryFailedCount", stats.brandQueryFailedCount); + payload.put("finalRowCount", stats.finalRowCount); + // 持久化 Python 携带的关键词级聚合;后续 processResultFileJob 阶段读取用于落 Excel + payload.put("summaries", stats.summaries == null ? List.of() : stats.summaries); + task.setResultJson(writeJson(objectMapper, payload, "保存采集统计失败")); } private String normalizeAsin(String value) { diff --git a/backend-java/src/test/java/com/nanri/aiimage/config/CatchSilenceRatchetTest.java b/backend-java/src/test/java/com/nanri/aiimage/config/CatchSilenceRatchetTest.java index af6dfec09..d6242c32c 100644 --- a/backend-java/src/test/java/com/nanri/aiimage/config/CatchSilenceRatchetTest.java +++ b/backend-java/src/test/java/com/nanri/aiimage/config/CatchSilenceRatchetTest.java @@ -119,7 +119,17 @@ class CatchSilenceRatchetTest { // 单跑本类一次,断言文案里就是当前整树实测值。本笔读到的数是 **total=998、rethrow=381**; // 与 1004 差的那 6 格里本笔只占 2(另 4 处是更早几笔静默摘掉的,不在本笔账上、也无从追认)。 // 判据一格未放宽:本格仍按实测下限钉住,四格上限原样不动(要收紧得逐处记名另笔请示)。 - static final int RETHROW_FLOOR = 381; + // 10-19 再下调 381 -> 380,出处点名(同一项授权的续笔,用户 2026-10-19 拍板「按顺序」第①项): + // 3C 第五笔把 CollectDataService 的**第三处**同形状序列化 catch 并进同一枚底座件—— + // `persistStats` 那段 `try { 15 行 payload.put(…) … task.setResultJson(writeValueAsString(payload)) } + // catch (Exception ex) { throw new BusinessException("保存采集统计失败") }`。文案、异常类型、 + // 不带 cause 三条线协议事实逐字带到调用点(回传 15 段 golden 逐字节复现,那 15 段每段都过这一格)。 + // 并档顺带把捕获面从「建 map +序列化」收回「序列化」:LinkedHashMap.put 对这些值不可能抛, + // 所以没有出口被改回吞掉;不重抛/只 log/空体三格同批复跑仍在上限内(三格上限等于上一次 + // 记录的实测值,绿即证未涨)。 + // 整树实测(复现办法同上:上限压 0、下限抬 99999 各单跑本类一次):**total=997、rethrow=380** + // (上一笔读的是 998/381,本笔各 −1,与本笔摘掉的那一处 RETHROW 形状对得上账)。 + static final int RETHROW_FLOOR = 380; /** * 10-17 抬 559 -> 561,逐处记名(两处都是新增的 fail-open 证据读写,不是把已有出口改回吞掉): * 1){@code TaskHeartbeatLivenessService.stamp()}:心跳证据写失败只 WARN——心跳接口不许因为