fix(品牌任务): 无结果回传判死线去掉静默 continue,改按处理位置三分

`failNoUploadStaleRunningTasks` 里 `last_result_at <= 0`(从未上报结果分片)原先无条件
continue 且零日志——这是 2026-10-06 任务 2626 挂到 9 小时不被判死的出口之一:客户端在 30 轮
失败重跑里心跳照打,`updated_at` 恒新鲜,30 分钟心跳线 / 180 分钟无结果线 / 120 分钟 repair
三条全部躲过。

改为用 TaskHeartbeatPositionService 区分三种情形:
- 位置仍在推进 ⇒ 只是攒着没回传(首批较慢的正常任务),INFO 后跳过;
- 位置长时间停在原地 ⇒ 判死,errorMessage 写进「停在哪个位置」;
- 完全没有位置信息(老客户端不传 progressText)⇒ 证据不足,保守跳过但留 WARN。

BrandTaskStaleCheckTest 8 例(隔离 worktree 跑,避开并发 mvn):品牌包 36 例绿;
把 BrandTaskService 换回本笔前版本后 3 例红(Wanted but not invoked: markFailed)⇒ 用例有牙。
同形状的静默出口还剩 4 处未接上:AppearancePatentTaskService / CollectDataService /
DeleteBrandStaleTaskService / PublishTaskService(各模块回传节奏不同,需逐模块核窗口)。
This commit is contained in:
2026-10-07 01:57:30 +08:00
parent 34113aff8b
commit 98bf6f63a6
2 changed files with 233 additions and 2 deletions
@@ -1576,7 +1576,9 @@ public class BrandTaskService {
* <p>既有心跳线候选条件是 updated_at/last_heartbeat_at 陈旧,而前端心跳会持续刷新它们——
* 主线程卡死时心跳线程照发,任务永远命不中(与生产 28131 同型缺口)。
* 本线候选取「心跳新鲜 + 创建超过 N 分钟」,判据用结果上报时写入 progress hash 的
* last_result_at(仅 saveProgressFromResult 写);从未上报(无该字段)跳过,避免误杀首批较慢的正常任务。
* last_result_at(仅 saveProgressFromResult 写);从未上报(无该字段)不再静默跳过,
* 而是用「处理位置是否仍在推进」区分「首批较慢」与「主线程停在原地」——
* 2026-10-06 任务 2626 正是靠无条件跳过挂到 9 小时。无位置信息时仍保守跳过。
*/
private void failNoUploadStaleRunningTasks() {
long minutes = brandProgressProperties.getNoResultUploadTimeoutMinutes();
@@ -1603,7 +1605,30 @@ public class BrandTaskService {
} catch (Exception ignored) {
}
if (lastResultAt <= 0L) {
// 从未上报结果:保守跳过(首批可能较慢)
// 从未上报结果分片:原先这里无条件 continue,是 2026-10-06 任务 2626
// 挂 9 小时不被判死的出口之一——客户端在 30 轮失败重跑里心跳照打,
// updated_at 永远新鲜,三条判死线全部躲过。现改按「处理位置是否仍在推进」判:
// 在推进 = 只是攒着没回传(首批较慢的正常任务),跳过;
// 停在原地 = 采集主线程没进展,判死;
// 完全没有位置信息(老客户端不传 progressText)= 证据不足,保守跳过但留日志。
String position = taskHeartbeatPositionService.describe(task.getId());
if (taskHeartbeatPositionService.isClientAdvancing(task.getId(), minutes)) {
log.info("[brand-stale-check] no-result skip because client still advancing "
+ "taskId={} position={} createdBefore={} minutes={}",
task.getId(), position, task.getCreatedAt(), minutes);
continue;
}
if (position == null || position.isBlank()) {
log.warn("[brand-stale-check] no-result skip without position evidence "
+ "taskId={} createdBefore={} minutes={}",
task.getId(), task.getCreatedAt(), minutes);
continue;
}
log.warn("[brand-stale-check] no-result failing taskId={} position={} timeoutMinutes={}",
task.getId(), position, minutes);
failStaleRunningTask(task.getId(),
"任务创建至今超过 " + minutes + " 分钟无任何结果回传,处理位置长时间停在「"
+ position + "」未推进,疑似客户端任务卡死,任务已自动失败");
continue;
}
LocalDateTime lastResult = LocalDateTime.ofInstant(Instant.ofEpochMilli(lastResultAt), ZoneId.systemDefault());