feat(采集数据): 品牌检测失败自动补测队列,限流窗口后自动重查并补结果(V140)

WIPO 限流窗口内 queryFailed 的品牌按任务排队(biz_collectdata_brand_recheck,同任务同品牌幂等),Scheduler 按指数退避自动补测:补出无侵权→行补进结果文件,判出侵权→落无效品牌表,连续耗尽→EXHAUSTED 并通知。只存品牌不存行,注入按 payload_hash 幂等。
This commit is contained in:
2026-10-03 00:22:07 +08:00
parent 68b19f22b3
commit 005cda9379
21 changed files with 1642 additions and 11 deletions
@@ -129,6 +129,47 @@ public class NotificationDispatchService {
"task_partial_admin:" + taskId, userId);
}
/**
* 「品牌补测出结论」通知:补测队列(biz_collectdata_brand_recheck)在一轮里把
* 查询失败的品牌重查出结论并补进结果文件 / 无效品牌表后,告诉用户结果变了。
*
* <p>只推用户不推管理员:这是部分缺失(task_partial)的自动修复跟进,管理员侧
* 已经在缺失发生时知晓,补测成功属于正向收敛——再扇出一份只放大铃铛噪声。
* 同任务同自然日一条(dedupe_key 带日期):补测按轮推进,同一轮内多品牌合并成一条。
*/
public void pushRecheckOutcome(Long userId, Long taskId, String moduleType, String taskNo,
int injectedRows, int rejectedRows, int pendingRows, int exhaustedRows) {
if (userId == null || userId <= 0 || taskId == null) {
return;
}
boolean fixed = injectedRows > 0 || rejectedRows > 0;
if (!fixed && exhaustedRows <= 0) {
// 本轮没有任何品牌出结论、也没有条目收口:纯排队推进,不打扰用户
return;
}
String label = TaskModuleRegistry.labelOf(moduleType);
String displayTaskNo = taskNo == null || taskNo.isBlank() ? "#" + taskId : taskNo.trim();
String title;
String content;
if (fixed) {
title = label + "任务品牌补测完成";
content = "任务 " + displayTaskNo + ":此前品牌检测未返回结果的行已自动补测出结论"
+ ",新增结果 " + injectedRows + " 行、判定无效品牌 " + rejectedRows + " 行"
+ (pendingRows > 0 ? ",仍有 " + pendingRows + " 行待后续补测" : "")
+ "。结果文件已更新,可在「历史任务」重新下载。";
} else {
title = label + "任务品牌补测未能完成";
content = "任务 " + displayTaskNo + ":品牌检测连续多轮自动补测仍未成功,共 " + exhaustedRows
+ " 行未能补出结论(上游商标库持续不可用)。建议稍后重新提交采集任务重跑这些 ASIN。";
}
String level = fixed && pendingRows <= 0
? NotificationService.LEVEL_INFO : NotificationService.LEVEL_WARNING;
notificationService.pushOrRefresh(userId, NotificationService.AUDIENCE_USER,
NotificationService.SCENE_TASK_FAILED, level, title, content,
"collect_recheck:" + taskId + ":" + java.time.LocalDate.now()
.format(java.time.format.DateTimeFormatter.BASIC_ISO_DATE));
}
/** 解析管理员受众:全部超管 + 管理员(非管理员角色一律排除),并预取各管理员可见用户集。 */
public AdminAudience prepareAdminAudience() {
List<AdminUserEntity> candidates = adminUserMapper.selectList(new LambdaQueryWrapper<AdminUserEntity>()