看板(心跳位置补进度): 跟价/定时匹配这类无快照的行不再恒画「—」
客户端心跳位置此前只喂 progress/light(客户端进度条),后台任务中心的进度列仍按 10-04 那条 「没分母就画 —」走,于是同一个在跑的跟价任务,客户端有条、看板是「—」。 - TaskCenterQueryService 注入位置服务:只对「无快照 + 不是行内已计数的三个模块 + 非终态」的行 批量读位置;这个判据抽成 wantsHeartbeatPosition 一处共用——收集与填充各写一遍的话, 改一处就会让另一处静默拿到 null,又退成「安静地没有条」 - 封顶与页大小同源(BOARD_POSITION_LOOKUPS=100):沿用 light 那个 20 的话,第 21 行之后的 在跑任务永远读不到进度 - 心跳新增 progressGrain 一并入库;看板按它把 units 的「国家数×1000 摊平当量」折算回自然计数, 否则管理员会读到「已完成 1222 / 总 5000」。客户端那条仍吃原始千分位(要的是平滑), 所以折算做成 Position#displayUnits() 显式一步,不是一处改两边 - 快照优先不变:位置只是执行器自述,服务端算出来的快照更权威 - 用例:displayUnits 折算/钳位/分母不塌 0、grain 存取、老客户端不报粒度按自然计数原样通过; 看板三例(在跑行用心跳、终态一次都不读、有快照不许被覆盖)。TaskCenterQueryServiceTest 37 例绿
This commit is contained in:
+63
-4
@@ -1,7 +1,9 @@
|
||||
package com.nanri.aiimage.modules.taskcenter.service;
|
||||
|
||||
import com.nanri.aiimage.common.task.TaskStatuses;
|
||||
import com.nanri.aiimage.common.util.UserMessages;
|
||||
import com.nanri.aiimage.common.module.TaskModuleRegistry;
|
||||
import com.nanri.aiimage.modules.task.service.TaskHeartbeatPositionService;
|
||||
import com.nanri.aiimage.modules.taskcenter.mapper.TaskCenterQueryMapper;
|
||||
import com.nanri.aiimage.modules.taskcenter.model.dto.TaskCenterCollectStatsRow;
|
||||
import com.nanri.aiimage.modules.taskcenter.model.dto.TaskCenterCountryRow;
|
||||
@@ -49,11 +51,17 @@ public class TaskCenterQueryService {
|
||||
private static final long ACTIVE_TASK_SCAN_CAP = 500;
|
||||
private static final long DEFAULT_PAGE_SIZE = 20;
|
||||
private static final long MAX_PAGE_SIZE = 100;
|
||||
/**
|
||||
* 心跳位置读取封顶,与页大小同源:看板一页最多 100 行、30 秒一轮。
|
||||
* 沿用 light 侧那个 20 的话,第 21 行之后的在跑任务永远读不到进度。
|
||||
*/
|
||||
private static final int BOARD_POSITION_LOOKUPS = (int) MAX_PAGE_SIZE;
|
||||
|
||||
/** 进行中状态与 mapper SQL 同源,避免「计数说在跑、卡住判定说不在跑」。 */
|
||||
private static final Set<String> ACTIVE_STATUSES = TaskCenterQueryMapper.ACTIVE_STATUS_SET;
|
||||
|
||||
private final TaskCenterQueryMapper queryMapper;
|
||||
private final TaskHeartbeatPositionService taskHeartbeatPositionService;
|
||||
|
||||
public TaskCenterOverviewVo overview(TaskCenterScopeService.ScopeContext scope) {
|
||||
LocalDateTime now = LocalDateTime.now();
|
||||
@@ -204,7 +212,8 @@ public class TaskCenterQueryService {
|
||||
: selectCollectStats(List.of(row), snapshots);
|
||||
|
||||
TaskCenterTaskDetailVo vo = fillRow(new TaskCenterTaskDetailVo(), row, usernames, deviceNames,
|
||||
snapshots, collectStats, collectShops(bizIds), collectCountries(bizIds), LocalDateTime.now());
|
||||
snapshots, collectStats, collectShops(bizIds), collectCountries(bizIds),
|
||||
readHeartbeatPositions(List.of(row), snapshots), LocalDateTime.now());
|
||||
vo.setShops(shopStats(row));
|
||||
vo.setErrorMessage(row.getErrorMessage());
|
||||
return vo;
|
||||
@@ -257,16 +266,35 @@ public class TaskCenterQueryService {
|
||||
Map<Long, TaskCenterCollectStatsRow> collectStats = selectCollectStats(rows, snapshots);
|
||||
Map<Long, List<String>> shops = collectShops(bizIds);
|
||||
Map<Long, String> countries = collectCountries(bizIds);
|
||||
Map<Long, TaskHeartbeatPositionService.Position> positions = readHeartbeatPositions(rows, snapshots);
|
||||
|
||||
LocalDateTime now = LocalDateTime.now();
|
||||
List<TaskCenterTaskRowVo> items = new ArrayList<>(rows.size());
|
||||
for (TaskCenterTaskRow row : rows) {
|
||||
items.add(fillRow(new TaskCenterTaskRowVo(), row, usernames, Map.of(), snapshots,
|
||||
collectStats, shops, countries, now));
|
||||
collectStats, shops, countries, positions, now));
|
||||
}
|
||||
return items;
|
||||
}
|
||||
|
||||
/**
|
||||
* 批量读「还在跑、又没有快照」那几行的心跳位置。
|
||||
*
|
||||
* <p>封顶按页大小给(看板一页最多 {@code MAX_PAGE_SIZE} 行、30 秒一轮):若沿用 light 的 20,
|
||||
* 第 21 行之后的任务永远读不到进度——又退成「安静地没有条」那个最难发现的形态。
|
||||
*/
|
||||
private Map<Long, TaskHeartbeatPositionService.Position> readHeartbeatPositions(
|
||||
List<TaskCenterTaskRow> rows, Map<String, TaskCenterSnapshotRow> snapshots) {
|
||||
List<Long> ids = new ArrayList<>();
|
||||
for (TaskCenterTaskRow row : rows) {
|
||||
if (wantsHeartbeatPosition(row, snapshots)) {
|
||||
ids.add(row.getId());
|
||||
}
|
||||
}
|
||||
return ids.isEmpty() ? Map.of()
|
||||
: taskHeartbeatPositionService.readDrawablePositions(ids, BOARD_POSITION_LOOKUPS);
|
||||
}
|
||||
|
||||
private static Map<Long, String> toUserNames(List<TaskCenterUserRow> rows) {
|
||||
Map<Long, String> map = new HashMap<>();
|
||||
for (TaskCenterUserRow row : rows) {
|
||||
@@ -382,6 +410,7 @@ public class TaskCenterQueryService {
|
||||
Map<Long, TaskCenterCollectStatsRow> collectStats,
|
||||
Map<Long, List<String>> shops,
|
||||
Map<Long, String> countries,
|
||||
Map<Long, TaskHeartbeatPositionService.Position> positions,
|
||||
LocalDateTime now) {
|
||||
vo.setId(row.getId());
|
||||
vo.setTaskNo(row.getTaskNo());
|
||||
@@ -406,7 +435,7 @@ public class TaskCenterQueryService {
|
||||
vo.setCurrentScope(snapshot.getCurrentScopeKey());
|
||||
vo.setMessage(UserMessages.orFallback(snapshot.getMessage(), ""));
|
||||
} else {
|
||||
fillFallbackProgress(vo, row, collectStats.get(row.getId()));
|
||||
fillFallbackProgress(vo, row, collectStats.get(row.getId()), positions.get(row.getId()));
|
||||
}
|
||||
|
||||
// 品牌检测按关键字执行、不落店铺;品牌行的 current_scope_key 是品牌名,不能当店铺用。
|
||||
@@ -431,8 +460,29 @@ public class TaskCenterQueryService {
|
||||
* 旧的「输入文件数」回退让单文件任务恒显示 0/1,是误导。</li>
|
||||
* </ul>
|
||||
*/
|
||||
/** 这三个模块的行内计数/关键词统计已足够画出进度,不用心跳位置再补一层。 */
|
||||
private static final Set<String> IN_ROW_PROGRESS_MODULES = Set.of("PUBLISH", "DELETE_BRAND", "COLLECT_DATA");
|
||||
|
||||
/**
|
||||
* 哪些行该用心跳位置补进度:无快照、不是上面那三个模块、且还在跑。
|
||||
*
|
||||
* <p>「收集要读的 id」与「填充时决定用不用」共用这一个判据。两处各写一遍的话,改一处
|
||||
* 就会让另一处静默拿到 null,表现又是最难发现的那种形态——安静地没有进度条。
|
||||
*/
|
||||
static boolean wantsHeartbeatPosition(TaskCenterTaskRow row, Map<String, TaskCenterSnapshotRow> snapshots) {
|
||||
if (row.isBrand() || row.getId() == null
|
||||
|| snapshots.containsKey(snapshotKey(row.getId(), row.getModuleType()))) {
|
||||
return false;
|
||||
}
|
||||
if (IN_ROW_PROGRESS_MODULES.contains(row.getModuleType())) {
|
||||
return false;
|
||||
}
|
||||
return row.getStatus() != null && !TaskStatuses.FileTask.TERMINAL.contains(row.getStatus());
|
||||
}
|
||||
|
||||
private static void fillFallbackProgress(TaskCenterTaskRowVo vo, TaskCenterTaskRow row,
|
||||
TaskCenterCollectStatsRow collectStat) {
|
||||
TaskCenterCollectStatsRow collectStat,
|
||||
TaskHeartbeatPositionService.Position position) {
|
||||
String module = row.getModuleType();
|
||||
if (row.isBrand() || "PUBLISH".equals(module) || "DELETE_BRAND".equals(module)) {
|
||||
vo.setProgressTotal(nullToZero(row.getTotalCount()));
|
||||
@@ -449,6 +499,15 @@ public class TaskCenterQueryService {
|
||||
vo.setProgressFailed(0);
|
||||
return;
|
||||
}
|
||||
// 客户端心跳位置:跟价、定时匹配这些「执行器原本没有进度条」的模块,现在把上报的
|
||||
// 读数折算成自然当量画出来(units 那一档要除以 1000,否则看板会显示「已完成 1222 / 总 5000」)。
|
||||
if (position != null) {
|
||||
TaskHeartbeatPositionService.Position shown = position.displayUnits();
|
||||
vo.setProgressTotal(shown.total());
|
||||
vo.setProgressSuccess(shown.current() == null ? 0 : shown.current());
|
||||
vo.setProgressFailed(0);
|
||||
return;
|
||||
}
|
||||
vo.setProgressTotal(0);
|
||||
vo.setProgressSuccess(0);
|
||||
vo.setProgressFailed(0);
|
||||
|
||||
Reference in New Issue
Block a user