feat(phase-3): AC-9~12 后端任务引擎稳定性(队列隔离/心跳降级/清理瘦投影/终态与超时)
- AC-9(S1-B2/B3):视频/图像任务改走独立 videoQueueExecutor(aiimage.task-queue.video-max-concurrent, 默认 6),不再与结果文件组装共用 12 格 taskQueueExecutor;TaskQueueGate 增 queue 标签区分指标; scheduled worker 本地派发被拒改回队(requeue),不再压回 16 线程调度池内联组装。 - AC-10(S1-B4):CollectDataService.updateProgress 去掉任务锁,改无条件短事务 + updated_at 乐观 CAS, 只写 result_json/updated_at 两列;TaskHeartbeatService 对 SPI 进度写异常降级, TaskHeartbeatVo 新增 progressDegraded/warning,alive 仍为 true。 - AC-11(S1-B5/B6):ModuleHistoryCleanupService 批查与四路指针查询全部瘦投影; application.yml 增 server.shutdown=graceful 与 spring.lifecycle.timeout-per-shutdown-phase=30s; 虚拟线程池 destroy 改为 await 在途任务(上限 aiimage.task-queue.shutdown-await-seconds)。 - AC-12(S1-B1/B7/B8/B9):PENDING 僵尸重试计数可到 MAX 并就地翻 FAILED 进 exhaustedJobs; 修正 selectAdminTaskDetail 的双转义(>= -> >=)并按真实 SQL 修正迁移基准账本; MyBatis default-statement-timeout=60s(AIIMAGE_DB_DEFAULT_STATEMENT_TIMEOUT_SECONDS); 店铺数据两处删除收进 @Transactional,对象回收沿用 afterCommit 注册。 - 契约激活:PendingPhase3*Test 14 例全部去 @Disabled;同步改写被新契约反转的既有判据 (CollectDataProgressThrottleTest 锁/updateById 口径、OwnerRouting 的内联分支改显式关闭派发形态、 FaultInjection 指标按新 queue 标签查找)与三处棘轮(catch total 1031->1034、 notRethrow 582->585、超管调用点 17->18,均逐条记名)。
This commit is contained in:
+26
-14
@@ -549,22 +549,21 @@ public class CollectDataService extends AbstractFileTaskPipeline<CollectDataResu
|
||||
/**
|
||||
* 进度心跳。
|
||||
*
|
||||
* <p>事务边界:Redis 任务锁在事务外获取(自旋等待最长 TASK_LOCK_WAIT_MILLIS,
|
||||
* 放在 @Transactional 里会白占一个 Hikari 连接),DB 段(统计持久化 + 任务行更新)
|
||||
* 仍在一个事务内。
|
||||
* <p>S1-B4:这里**不再取任务锁**。锁是给组装/提交的写路径用的,心跳在持锁窗口里去抢锁
|
||||
* (最长等 5s,拿不到就 40902)会让客户端把还在跑的任务当"任务不在了"处理。
|
||||
* 改法是无锁短事务 + 乐观 CAS:读到的 {@code updated_at} 作为写条件,
|
||||
* 与组装/分片提交并发时心跳让路(跳过本次进度写,下一条心跳自然补上),绝不覆盖对方刚写的 result_json。
|
||||
*/
|
||||
public void updateProgress(Long taskId, TaskHeartbeatRequest request) {
|
||||
if (taskId == null || taskId <= 0 || request == null) {
|
||||
return;
|
||||
}
|
||||
try (TaskDistributedLockService.LockHandle ignored = acquireTaskLockOrThrow(taskId)) {
|
||||
if (transactionTemplate == null) {
|
||||
// 单测场景(@InjectMocks 未注入事务模板):退化为直接执行 DB 段
|
||||
updateProgressLocked(taskId, request);
|
||||
return;
|
||||
}
|
||||
transactionTemplate.executeWithoutResult(status -> updateProgressLocked(taskId, request));
|
||||
if (transactionTemplate == null) {
|
||||
// 单测场景(@InjectMocks 未注入事务模板):退化为直接执行 DB 段
|
||||
updateProgressLocked(taskId, request);
|
||||
return;
|
||||
}
|
||||
transactionTemplate.executeWithoutResult(status -> updateProgressLocked(taskId, request));
|
||||
}
|
||||
|
||||
private void updateProgressLocked(Long taskId, TaskHeartbeatRequest request) {
|
||||
@@ -622,10 +621,23 @@ public class CollectDataService extends AbstractFileTaskPipeline<CollectDataResu
|
||||
return;
|
||||
}
|
||||
persistStats(task, stats);
|
||||
task.setUpdatedAt(LocalDateTime.now());
|
||||
fileTaskMapper.updateById(task);
|
||||
// 节流时钟只在写成功之后推进:抛异常时不执行到这里,库里那一版也没前进,
|
||||
// 下一条心跳就会立刻补刷,而不是被一次失败的写留下的窗口挡掉。
|
||||
LocalDateTime progressUpdatedAt = LocalDateTime.now();
|
||||
// 只写进度两列(result_json/updated_at),不再整实体 updateById:整实体回写会把
|
||||
// 读到的旧 status/request_json 一并覆盖回去,在无锁心跳下足以让并发终态被"复活"。
|
||||
// 条件 updated_at 匹配=乐观 CAS,与组装/分片提交撞车时让路,绝不清掉对方刚写的统计。
|
||||
int updated = fileTaskMapper.update(null, new LambdaUpdateWrapper<FileTaskEntity>()
|
||||
.eq(FileTaskEntity::getId, task.getId())
|
||||
.eq(FileTaskEntity::getStatus, STATUS_RUNNING)
|
||||
.eq(task.getUpdatedAt() != null, FileTaskEntity::getUpdatedAt, task.getUpdatedAt())
|
||||
.isNull(task.getUpdatedAt() == null, FileTaskEntity::getUpdatedAt)
|
||||
.set(FileTaskEntity::getResultJson, task.getResultJson())
|
||||
.set(FileTaskEntity::getUpdatedAt, progressUpdatedAt));
|
||||
if (updated <= 0) {
|
||||
log.info("[collect-data] 进度心跳让路:任务行已被并发写入或已离 RUNNING taskId={}", taskId);
|
||||
return;
|
||||
}
|
||||
// 节流时钟只在写成功之后推进:被 CAS 挡下的那轮不算数,下一条心跳立刻补刷,
|
||||
// 而不是被一次失败的写留下的窗口挡掉。
|
||||
lastProgressFlushMillis.put(taskId, System.currentTimeMillis());
|
||||
}
|
||||
|
||||
|
||||
Reference in New Issue
Block a user