fix(tasks): 单片/单文件读不到跳过它,缺数据不许冒充已收齐
三处"一颗坏项拖垮整批"与一处假绿本体: - BrandTaskStorageService:一片载荷读不到就整份聚合丢掉,而三个调用方 (finalizeTask/abort/tryRecoverCompletedRunningTask)都没有就地 try;改逐片跳过长 WARN,并把 receivedChunkCount/completed 的判据从 chunks.size()(DB 行数)改成 真正读到的片数——拿行数比 chunkTotal 正是"118/119 行没数据仍判已完成"的形状; 解析缓存与汇总状态两处同型"整批抛出"一并改成逐条跳过。 - AppearancePatentLlmBatchPipeline:候选收集跑在批循环之前,一抛就走不到循环体内 那道 finally releaseRowInspection,本轮已申领的行要挂满处理中 TTL(15 分钟), 且 terminalizeRoundExhaustedRows 跟着不执行(轮次到顶的行因此永不判死);改逐片容错。 - TransientPayloadStorageService:跨实例判据枚成 public 常量并提供 cause 链走法。 resolvePayload 会把真实原因 rewrap 成「<errorMessage>: <pointer>」,消费端只摸顶层 消息时「only exists on instance=」「does not exist」两处判定恒 false——跨实例留痕 从未下过笔、"跳过该分片"分支是死代码。消费端(ChunkPayloadSupport/ HistoryAssembler/ResultRowReader)全部改走共享常量+cause 链。 - SimilarAsinHistoryAssemblerTest 的假绿桩删除:改前它桩的是生产者早已不再产出的 英文旧串,断言照旧绿;现在跑真实 resolvePayload 取异常(只 mock RustFS 边界), 改前 15 跑 1 红、改后 15/15 绿。 - SimilarAsinStaleReopenSupport:客户端卡死尾句枚成常量、整句文案唯一出口,生产者 与重开白名单共用;此前只是碰巧被前缀命中,生产者一改前缀就会"永不重开"。
This commit is contained in:
@@ -51,7 +51,8 @@ class CatchSilenceRatchetTest {
|
||||
// 10-25 B15 join 无界收口抬 564 -> 569,逐处出处见 STRICT_NOT_RETHROW 上方注释。
|
||||
// 10-26 第二轮 CR-Fix 2 抬 569 -> 573,逐处出处见 STRICT_NOT_RETHROW 上方注释(4 处必要 fail-open)。
|
||||
static final int GIVEN_TOTAL = 1000;
|
||||
static final int GIVEN_NOT_RETHROW = 573;
|
||||
// 10-27 「整表都要跑完」专项抬 573 -> 577(2 枚新增不重抛 + 2 枚既有整批抛出改逐条跳过,逐处记名见 STRICT_TOTAL 上方)。
|
||||
static final int GIVEN_NOT_RETHROW = 577;
|
||||
static final int GIVEN_LOG_ONLY = 249;
|
||||
static final int GIVEN_EMPTY = 56;
|
||||
|
||||
@@ -141,8 +142,30 @@ class CatchSilenceRatchetTest {
|
||||
* </ul>
|
||||
* 9 处均为 CR-02/05/10/20 的必要出口,不是把已有异常改回吞掉;同批实测 total 1024、
|
||||
* notRethrow 573、logOnly 179、empty 56。
|
||||
*
|
||||
* <p>10-27 整表跑完专项抬 1024 -> 1026(用户口径:整表都要跑完,单项坏了跳过它继续下一项,
|
||||
* 只有 LLM 密钥欠费/失效那一类才允许直接判任务失败),逐处记名:
|
||||
* <ul>
|
||||
* <li>{@code BrandTaskStorageService.rebuildAggregate} 一枚:单片载荷读不到时
|
||||
* log.warn+记跳片号+{@code continue}(NOT_RETHROW)。此前一片抛就把整份聚合丢掉,
|
||||
* 而三个调用方(finalizeTask/abort/tryRecoverCompletedRunningTask)都没有就地 try,
|
||||
* 一个坏分片=整任务不产出;同批把 {@code completed} 的判据从 {@code chunks.size()}
|
||||
* (DB 行数)改成「真正读到的片数」,缺数据不再被判成已收齐。</li>
|
||||
* <li>{@code AppearancePatentLlmBatchPipeline.collectPendingLlmCandidates} 一枚:
|
||||
* 同为 log.warn+计数+{@code continue}(NOT_RETHROW)。collect 跑在批循环<b>之前</b>,
|
||||
* 一抛就走不到循环体内那道 {@code finally releaseRowInspection},本轮已申领的行要挂满
|
||||
* 处理中 TTL(15 分钟),且 {@code terminalizeRoundExhaustedRows} 跟着一起不执行。</li>
|
||||
* </ul>
|
||||
* 另有两枚<b>既有</b> RETHROW 出口按同一口径改成「跳过该项」,形状从 RETHROW 迁入气味两格
|
||||
* (total 不变、rethrow −2、notRethrow +2、logOnly +2):{@code BrandTaskStorageService.getParsedPayload}
|
||||
* 与 {@code BrandTaskStorageService.getAllFileAggregates}——两处此前一个文件的缓存/聚合读不到
|
||||
* 就整批抛,把已读到的其余文件一起抹掉;改后逐条 WARN 跳过,调用方按「尚未收齐」可重试。
|
||||
* ⚠ 这两处不是把异常静默吞掉:跳过都带 {@code [brand-storage]} 锚点 WARN,且
|
||||
* {@code BrandTaskStorageServiceFaultToleranceTest} 钉住「其余项照常出」与
|
||||
* 「全项坏掉仍大声抛」两条,缺数据一律不得冒充已完成。
|
||||
* 同批实测 total 1026、rethrow 393(仍高于下限 380,本格不动)、notRethrow 577、logOnly 181、empty 56。
|
||||
*/
|
||||
static final int STRICT_TOTAL = 1024;
|
||||
static final int STRICT_TOTAL = 1026;
|
||||
/**
|
||||
* 重抛型 catch 的**下限**(不是上限):本轮把两处吞异常改成重抛之后实测 388。
|
||||
* 这一格只能涨不能跌——它是"异常会往外走"的总量,把它钉成"只许减"就等于拦着别人修吞异常。
|
||||
@@ -234,8 +257,13 @@ class CatchSilenceRatchetTest {
|
||||
* {@code OssStorageService.downloadWorkbenchClientObjectToTempFile} 内层清理(同上)、
|
||||
* {@code CostGuardScheduler}(平台自费告警推送失败 log+return,保留基线待下轮重试)。
|
||||
* 四处的误差方向都是「不让清理/告警失败掩盖主错误」,不是把异常静默吞掉。
|
||||
* 10-27 抬 573 -> 577(「整表都要跑完」专项,4 处不重抛,逐处记名见 STRICT_TOTAL 上方注释):
|
||||
* 新增 {@code BrandTaskStorageService.rebuildAggregate} 与
|
||||
* {@code AppearancePatentLlmBatchPipeline.collectPendingLlmCandidates} 两枚逐片跳过;
|
||||
* 另有 {@code BrandTaskStorageService.getParsedPayload}/{@code getAllFileAggregates} 两枚
|
||||
* 既有「整批抛出」出口按同口径改成逐条跳过(自 RETHROW 迁入本格)。
|
||||
*/
|
||||
static final int STRICT_NOT_RETHROW = 573;
|
||||
static final int STRICT_NOT_RETHROW = 577;
|
||||
/**
|
||||
* 10-17 抬 172 -> 173,出处就是上面点名过的 {@code TaskHeartbeatLivenessService.stamp()}:
|
||||
* 块体只有「取到 key 名 + log.warn」一句,写心跳证据失败时既不重试也不抛出——
|
||||
@@ -251,8 +279,12 @@ class CatchSilenceRatchetTest {
|
||||
* 10-26 抬 176 -> 179(第二轮 CR-Fix 2,3 处新增 log-only):{@code WorkbenchClientPackageService}
|
||||
* 的 removeRejectedObject/deleteTempQuietly 与 {@code OssStorageService} 的临时文件清理内层,
|
||||
* 三处都只 WARN 且带 path/objectKey 锚点;主错误由外层重抛,清理失败不得盖掉它。
|
||||
* 10-27 抬 179 -> 181(「整表都要跑完」专项,2 处):{@code BrandTaskStorageService.getParsedPayload}
|
||||
* 与 {@code getAllFileAggregates} 的逐条跳过出口——块体各只有一句带 {@code [brand-storage]}
|
||||
* 锚点的 WARN。两处此前是「一个文件坏 ⇒ 整批抛出」,改后其余文件照常返回,坏的那条点名可查;
|
||||
* 同批 {@code rebuildAggregate} 与外观专利候选收集因块内另有计数/continue 只进 NOT_RETHROW。
|
||||
*/
|
||||
static final int STRICT_LOG_ONLY = 179; // 严格口径:块内每条顶层语句都是 log 调用才算
|
||||
static final int STRICT_LOG_ONLY = 181; // 严格口径:块内每条顶层语句都是 log 调用才算
|
||||
static final int STRICT_EMPTY = 56;
|
||||
|
||||
/**
|
||||
|
||||
Reference in New Issue
Block a user