fix(品牌任务): 无结果回传判死线去掉静默 continue,改按处理位置三分
`failNoUploadStaleRunningTasks` 里 `last_result_at <= 0`(从未上报结果分片)原先无条件 continue 且零日志——这是 2026-10-06 任务 2626 挂到 9 小时不被判死的出口之一:客户端在 30 轮 失败重跑里心跳照打,`updated_at` 恒新鲜,30 分钟心跳线 / 180 分钟无结果线 / 120 分钟 repair 三条全部躲过。 改为用 TaskHeartbeatPositionService 区分三种情形: - 位置仍在推进 ⇒ 只是攒着没回传(首批较慢的正常任务),INFO 后跳过; - 位置长时间停在原地 ⇒ 判死,errorMessage 写进「停在哪个位置」; - 完全没有位置信息(老客户端不传 progressText)⇒ 证据不足,保守跳过但留 WARN。 BrandTaskStaleCheckTest 8 例(隔离 worktree 跑,避开并发 mvn):品牌包 36 例绿; 把 BrandTaskService 换回本笔前版本后 3 例红(Wanted but not invoked: markFailed)⇒ 用例有牙。 同形状的静默出口还剩 4 处未接上:AppearancePatentTaskService / CollectDataService / DeleteBrandStaleTaskService / PublishTaskService(各模块回传节奏不同,需逐模块核窗口)。
This commit is contained in:
+27
-2
@@ -1576,7 +1576,9 @@ public class BrandTaskService {
|
||||
* <p>既有心跳线候选条件是 updated_at/last_heartbeat_at 陈旧,而前端心跳会持续刷新它们——
|
||||
* 主线程卡死时心跳线程照发,任务永远命不中(与生产 28131 同型缺口)。
|
||||
* 本线候选取「心跳新鲜 + 创建超过 N 分钟」,判据用结果上报时写入 progress hash 的
|
||||
* last_result_at(仅 saveProgressFromResult 写);从未上报(无该字段)跳过,避免误杀首批较慢的正常任务。
|
||||
* last_result_at(仅 saveProgressFromResult 写);从未上报(无该字段)不再静默跳过,
|
||||
* 而是用「处理位置是否仍在推进」区分「首批较慢」与「主线程停在原地」——
|
||||
* 2026-10-06 任务 2626 正是靠无条件跳过挂到 9 小时。无位置信息时仍保守跳过。
|
||||
*/
|
||||
private void failNoUploadStaleRunningTasks() {
|
||||
long minutes = brandProgressProperties.getNoResultUploadTimeoutMinutes();
|
||||
@@ -1603,7 +1605,30 @@ public class BrandTaskService {
|
||||
} catch (Exception ignored) {
|
||||
}
|
||||
if (lastResultAt <= 0L) {
|
||||
// 从未上报结果:保守跳过(首批可能较慢)
|
||||
// 从未上报结果分片:原先这里无条件 continue,是 2026-10-06 任务 2626
|
||||
// 挂 9 小时不被判死的出口之一——客户端在 30 轮失败重跑里心跳照打,
|
||||
// updated_at 永远新鲜,三条判死线全部躲过。现改按「处理位置是否仍在推进」判:
|
||||
// 在推进 = 只是攒着没回传(首批较慢的正常任务),跳过;
|
||||
// 停在原地 = 采集主线程没进展,判死;
|
||||
// 完全没有位置信息(老客户端不传 progressText)= 证据不足,保守跳过但留日志。
|
||||
String position = taskHeartbeatPositionService.describe(task.getId());
|
||||
if (taskHeartbeatPositionService.isClientAdvancing(task.getId(), minutes)) {
|
||||
log.info("[brand-stale-check] no-result skip because client still advancing "
|
||||
+ "taskId={} position={} createdBefore={} minutes={}",
|
||||
task.getId(), position, task.getCreatedAt(), minutes);
|
||||
continue;
|
||||
}
|
||||
if (position == null || position.isBlank()) {
|
||||
log.warn("[brand-stale-check] no-result skip without position evidence "
|
||||
+ "taskId={} createdBefore={} minutes={}",
|
||||
task.getId(), task.getCreatedAt(), minutes);
|
||||
continue;
|
||||
}
|
||||
log.warn("[brand-stale-check] no-result failing taskId={} position={} timeoutMinutes={}",
|
||||
task.getId(), position, minutes);
|
||||
failStaleRunningTask(task.getId(),
|
||||
"任务创建至今超过 " + minutes + " 分钟无任何结果回传,处理位置长时间停在「"
|
||||
+ position + "」未推进,疑似客户端任务卡死,任务已自动失败");
|
||||
continue;
|
||||
}
|
||||
LocalDateTime lastResult = LocalDateTime.ofInstant(Instant.ofEpochMilli(lastResultAt), ZoneId.systemDefault());
|
||||
|
||||
Reference in New Issue
Block a user