feat(credential): 凭据不可自愈 ⇒ 行失败 + 整单终态 + 用户端弹窗(服务端五面)

用户口径(2026-11-12,34061 取证后):没余额要退成失败、直接中断任务、并弹窗提示;
所有涉及代理 IP / LLM 密钥的特性都一样。范围=服务端全部特性,客户端下批。

- 判据唯一出处 common/retry/CredentialFatalClassifier(致命:LLM 欠费/密钥失效、
  代理未配置/套餐到期/余额不足/密钥无效;非致命:channel_busy、无空闲通道、冷却、
  超时、5xx、限流、出口被拒、技术性、上游不可用);落终态唯一出口
  modules/task/service/CredentialFatalTaskCloser(重读现状态、拒碰 TERMINAL、可重入)。
  外观专利与相似ASIN 原先逐字重复的 terminalizeOnFatalLlmFailure 改为委托,不留第二份。
- 五面接线:外观专利/相似ASIN、跟价 updateTaskStatusFromLatestRows、
  店铺采集 tryFinalizeTask、采集数据 submitResult。判死后回执一律回读库里状态
  (采集数据内存 task 停在 RUNNING 会让采集端继续为死路买出口 IP)。
- 行级诚实:凭据致命行不计入已判,回退路不再拿原始标题伪造「侵权/成功」。
- 用户端:credential-fatal-notice.ts(判据)+ credential-fatal-alert.ts(按 taskId:kind
  去重)+ CredentialFatalAlert.vue 挂 App.vue;轻量轮询不带文案 ⇒ 跟价/采集数据在失败
  终态补一次重型 batch,店铺 batch 补任务级 taskErrorMessage(只给 FAILED、截断 300 字)。
- 三处真死日志按巡检签名正形写「改判死」(scripts/_prod_watch.py 只认 改判死|接管判死),
  否则判死数不进账本。
- TaskFailureCategoryGuardrailTest:写点搬进收口器 ⇒ 登记 CredentialFatalTaskCloser,
  下限 47→46、updateById 总量 160→159(搬点,不是新增写法)。

判据:CredentialFatalClassifierTest(16)、CollectDataCredentialFatalTest(3)、
PriceTrackTaskServiceTest(8)、ShopDataCrawlScopeMergeTest(11)、
ShopDataCrawlProgressQueryTest(9)、credential-fatal-notice.test.ts(9)、
credential-fatal-alert.test.ts(6)。后端整量 5,464 例 / 0 失败 / 19 skipped。

未纳入本笔:BrandAppearancePatentTab.vue、BrandSimilarAsinTab.vue、TaskItemCard.vue
与两个 Tab 里的按钮/徽章 CSS —— 另一路会话在飞改动,按并发纪律不卷进来。
This commit is contained in:
2026-11-12 18:10:10 +08:00
parent f5f40cd2ea
commit 64e94458c9
37 changed files with 1781 additions and 111 deletions
@@ -0,0 +1,151 @@
package com.nanri.aiimage.common.retry;
import com.nanri.aiimage.modules.brand.support.BrandCheckFailureNotice;
import com.nanri.aiimage.modules.task.service.TaskRetryEligibility;
import java.util.List;
import java.util.Locale;
/**
* 「凭据坏了、再跑多少次都是同一个结果」这一类失败的唯一判据,以及该给用户看的那句动作。
*
* <p>用户口径(2026-11-12,34061 取证后):任何特性只要用到 LLM 密钥或代理 IP,遇到<b>不可自愈</b>的
* 凭据故障都必须三件事一起做——行落失败并写真实原因、任务立即中断为终态、用户端弹窗一次。
* 判据只此一处:外观专利、货源查询、跟价、店铺采集、采集数据都从这里取,不各自抄一份字面量表
* (抄了就会改一处静默失效,与 {@link TaskRetryEligibility} 的注释同一条理由)。
*
* <p>代理侧的分档<b>不另立词汇表</b>:{@link BrandCheckFailureNotice} 已经按"未配置 / 套餐耗尽 /
* 冷却 / 出口被拒 / 技术性 / 上游"六档分过品牌检测的原始原因(2026-10-20 起就是那张表)。
* 这里只认它的前两档为致命,后四档一律继续重试——冷却与出口被拒是短时现象、上游不可用会自己恢复,
* 拿它们判死就是让用户整单给一次抖动陪葬(铁律 27(c))。
*
* <p>LLM 那半边走 {@link TaskRetryEligibility.Category#BALANCE}(欠费与密钥失效同族)。
* LLM 专属字样<b>先于</b>品牌侧判:品牌侧的「余额不足」与 LLM 的「余额欠费」都落在同一批中文词上,
* 顺序反了就会把"代理套餐没钱了"说成"上游 LLM 账户欠费"——2026-10-27 用户点名要避免的那种误导。
*/
public final class CredentialFatalClassifier {
/** 凭据故障的两种来源:给用户的那句动作不同。 */
public enum Kind {
/** 上游 LLM 账户欠费/额度耗尽,或 LLM 密钥本身失效。 */
LLM_CREDENTIAL,
/** 代理提取:套餐到期、余额不足、密钥/链接不可用,或根本没配置。 */
PROXY_CREDENTIAL
}
/**
* LLM 侧「钱/密钥」硬字样:与 {@code LlmBalanceGuard} 的余额识别、{@code TaskRetryEligibility.KEY_MARKERS}
* 同一套词,加 {@code 余额欠费}/{@code 额度不足} 这两个中文签。
*
* <p>刻意<b>不</b>收裸「llm」或裸「余额不足」:任何一条 LLM 报错都带 {@code LLM} 三个字母
* ({@code LLM 网关无应答}、{@code LLM http 502}),拿它当凭据判据会把一次抖动判成终态;
* 「余额不足」是品牌侧套餐与 LLM 侧欠费共用的词,得靠品牌词汇表先分档。
*/
private static final List<String> LLM_CREDENTIAL_MARKERS = List.of(
"insufficient_user_quota", "insufficient_quota", "insufficient balance", "insufficient_funds",
"wallet balance insufficient", "quota exceeded",
"预扣费额度", "余额欠费", "额度不足",
"密钥无效", "密钥失效", "无效的密钥", "密钥不可用",
"invalid api key", "invalid_api_key", "api key 无效", "apikey 无效");
/**
* 代理侧「凭据本身不可用」的硬字样:与品牌侧词汇表无关的那些提供商失败码。
*
* <p>必须先于 {@link BrandCheckFailureNotice} 判:青果的 {@code API_AUTH_DENY} 常和「提取失败」
* 出现在同一句里,而品牌侧把「提取失败」归 TECHNICAL(补测轮会再来)——顺序反了,
* 一条注定失败的鉴权错就被说成"技术性失败、等等再试"。
*/
private static final List<String> PROXY_HARD_CREDENTIAL_MARKERS = List.of(
"未配置代理", "代理地址为空", "代理链接为空",
"invalid_key", "unavailable_key", "key_block", "api_auth_deny", "access_deny");
/** 代理侧专名/字面:只用于把一句泛化的「余额不足」判给代理而不是 LLM。 */
private static final List<String> PROXY_CREDENTIAL_MARKERS = List.of(
"代理", "提取链接", "提取分钟数", "青果", "qg.net", "jikip", "极客", "套餐",
"invalid_key", "unavailable_key", "key_block", "api_auth_deny", "access_deny");
/**
* 明确「外部自己会恢复」的字样:命中一律不致命。
*
* <p>刻意<b>不</b>放裸数字(429/502/503/504):上游欠费原文里带着账户号({@code 用户[151502]}),
* 裸 {@code contains("502")} 会把一条真欠费判成 5xx 抖动——放过这一单,用户就又回到"只见失败、不见原因"。
*/
private static final List<String> SELF_HEALING_MARKERS = List.of(
"no_available_channel", "没有可用的空闲通道", "channel_busy", "通道被占", "通道已满",
"冷却", "cooldown", "稍后重试",
"timeout", "timed out", "超时",
"too many requests", "rate limited", "限流",
"bad gateway", "service unavailable", "gateway timeout",
"connection refused", "连接被拒绝", "不可达", "unreachable",
"页面无效", "风控墙", "人机验证");
/** 代理侧终态动作句(与 {@link LlmBalanceGuard#TASK_TERMINAL_GUIDANCE} 同形:谁的问题、做了什么、下一步)。 */
public static final String PROXY_TERMINAL_GUIDANCE =
"任务已终止:代理 IP 套餐已到期或余额不足、或提取链接不可用(未配置/密钥无效),"
+ "不是你本次上传的数据问题;已停止后续采集与检测,以免继续空跑并消耗额度。"
+ "请到账号的代理设置里充值、续期或更换提取链接后重新发起任务。";
private CredentialFatalClassifier() {
}
/** @return null=可以继续重试;非 null=不可自愈,按该档处置 */
public static Kind kind(String failureMessage) {
if (failureMessage == null || failureMessage.isBlank()) {
return null;
}
// 本仓自己写下的两条终态句先认出来(原文比对,模板里有大写 LLM/IP):它们各自都提到
// 「密钥/代理出口」,让下面的词汇表去猜,存量单重读时就会在 LLM 与代理之间来回翻。
if (failureMessage.contains(LlmBalanceGuard.TASK_TERMINAL_GUIDANCE)) {
return Kind.LLM_CREDENTIAL;
}
if (failureMessage.contains(PROXY_TERMINAL_GUIDANCE)) {
return Kind.PROXY_CREDENTIAL;
}
String text = failureMessage.toLowerCase(Locale.ROOT);
if (containsAny(text, SELF_HEALING_MARKERS)) {
return null;
}
if (containsAny(text, LLM_CREDENTIAL_MARKERS)) {
return Kind.LLM_CREDENTIAL;
}
if (containsAny(text, PROXY_HARD_CREDENTIAL_MARKERS)) {
return Kind.PROXY_CREDENTIAL;
}
BrandCheckFailureNotice.Kind brand = BrandCheckFailureNotice.classify(failureMessage);
if (brand == BrandCheckFailureNotice.Kind.PROXY_NOT_CONFIGURED
|| brand == BrandCheckFailureNotice.Kind.PROXY_PACKAGE_EXHAUSTED) {
return Kind.PROXY_CREDENTIAL;
}
// 品牌侧认得的技术性/冷却/出口被拒三类:补测轮会自己再来,不进终态。
if (brand != BrandCheckFailureNotice.Kind.UPSTREAM) {
return null;
}
// 兜底:还没被任何一张词汇表认出来的欠费/密钥形状,按走 BALANCE 判死,
// 靠有没有代理专名决定给哪句动作。判不出 BALANCE 就是普通可重试失败。
if (TaskRetryEligibility.forceMajeureCategory(failureMessage) != TaskRetryEligibility.Category.BALANCE) {
return null;
}
return containsAny(text, PROXY_CREDENTIAL_MARKERS) ? Kind.PROXY_CREDENTIAL : Kind.LLM_CREDENTIAL;
}
/** 只要"要不要判死"的那一问。 */
public static boolean isFatal(String failureMessage) {
return kind(failureMessage) != null;
}
/** 给定档位的终态动作句;这是写进 {@code biz_file_task.error_message} 尾巴的那一段。 */
public static String guidance(Kind kind) {
return kind == Kind.PROXY_CREDENTIAL
? PROXY_TERMINAL_GUIDANCE
: LlmBalanceGuard.TASK_TERMINAL_GUIDANCE;
}
private static boolean containsAny(String text, List<String> markers) {
for (String marker : markers) {
if (text.contains(marker)) {
return true;
}
}
return false;
}
}
@@ -11,6 +11,7 @@ import com.nanri.aiimage.config.AppearancePatentProperties;
import com.nanri.aiimage.config.HttpClientPool;
import com.nanri.aiimage.metrics.ExternalCallMetricsRecorder;
import com.nanri.aiimage.modules.appearancepatent.model.dto.AppearancePatentResultRowDto;
import com.nanri.aiimage.modules.appearancepatent.service.support.AppearancePatentRowOutcome;
import com.nanri.aiimage.modules.appearancepatent.service.support.AppearancePatentSheetBuilder;
import com.nanri.aiimage.modules.brand.client.BrandCheckClient;
import com.nanri.aiimage.modules.usersecret.service.UserSecretUsageService;
@@ -60,7 +61,8 @@ public class AppearancePatentLlmClient {
private static final int MAX_LLM_RESPONSE_BYTES = 16 * 1024 * 1024;
private static final String INFRINGEMENT = "侵权";
private static final String NO_INFRINGEMENT = "无侵权";
private static final String BRAND_QUERY_FAILED = "商标查询失败";
/** 文案唯一定义在 {@link AppearancePatentRowOutcome}(出表侧要用同一串判"这格是不是判定")。 */
private static final String BRAND_QUERY_FAILED = AppearancePatentRowOutcome.BRAND_QUERY_FAILED;
/**
* 整批待查词无一返回结果时的文案,与逐行的「商标查询失败」区分开。
*
@@ -83,14 +85,16 @@ public class AppearancePatentLlmClient {
private static final int LLM_CONNECT_FAILURE_EVIDENCE = 2;
/** 连接层判定不可达时交付给行级的原因文案:说清是运维故障,不是这行数据的问题。 */
static final String REASON_LLM_UNREACHABLE = "LLM 服务不可达(连接未建立,非本行数据问题)";
private static final String APPEARANCE_ANOMALY = "外观识别异常";
private static final String APPEARANCE_ANOMALY = AppearancePatentRowOutcome.APPEARANCE_ANOMALY;
/**
* 我们<b>根本没发出图片请求</b>时的外观维标签(无图片/无标题,或商标维先失败跳过外观那一步)。
* 与 {@link #APPEARANCE_ANOMALY}(发了请求、上游没给出可用结论)必须分开:
* 2026-11-12 任务 34061 的交付件里 987 行外观维写着「外观识别异常」、而「外观原因」整格空白,
* 用户只能把它读成图片识别没认出来,真实原因(LLM 上游欠费、外观那一步压根没跑)得运维去翻日志。
*/
static final String APPEARANCE_NOT_RUN = "未执行外观检测";
static final String APPEARANCE_NOT_RUN = AppearancePatentRowOutcome.APPEARANCE_NOT_RUN;
/** 商标维命中但外观维没跑时的结论后缀(结论列不许写成裸「侵权」,见 {@link #buildConclusion})。 */
static final String APPEARANCE_NOT_RUN_SUFFIX = "外观维未执行";
static final String APPEARANCE_SKIPPED_NO_DATA = "未执行外观检测:本行没有标题或图片链接,未发出图片识别请求";
static final String PATENT_SKIPPED_REASON = "未执行专利检测:外观维未执行";
/** 商标维先失败时跳过外观那一步的原因前缀,后面接商标维自己的原话。 */
@@ -1250,9 +1254,17 @@ public class AppearancePatentLlmClient {
}
String buildConclusion(String titleRisk, String appearanceRisk, String fallbackConclusion) {
if (isInfringement(titleRisk) || isInfringement(appearanceRisk)) {
if (isInfringement(appearanceRisk)) {
return INFRINGEMENT;
}
if (isInfringement(titleRisk)) {
// 商标维命中是真的(品牌库确实回了词),但外观维压根没跑时不许把整行结论写成裸「侵权」:
// 34061 里 158 行就是这么变成「成功」的——图片识别一次没做,结论列却只说侵权。
// 写成「商标侵权·外观维未执行」既保住命中的信息,又让它读起来就是一次没跑完的检测。
return hasAppearanceVerdict(appearanceRisk)
? INFRINGEMENT
: "商标" + INFRINGEMENT + APPEARANCE_NOT_RUN_SUFFIX;
}
if (isNoInfringement(titleRisk) && isNoInfringement(appearanceRisk)) {
return NO_INFRINGEMENT;
}
@@ -1268,6 +1280,14 @@ public class AppearancePatentLlmClient {
return firstNonBlank(fallbackConclusion, "");
}
/** 外观维真的判过才配当"整行结论"的一半;判据与出表侧同一句话。 */
private boolean hasAppearanceVerdict(String appearanceRisk) {
String normalized = normalize(appearanceRisk);
return !normalized.isBlank()
&& !AppearancePatentSheetBuilder.isTechnicalLlmFailure(normalized)
&& !AppearancePatentRowOutcome.isNoVerdictText(normalized);
}
private static final Pattern NO_INFRINGEMENT_WORDING = Pattern.compile(
"(?:无侵权|未侵权|不侵权|没有侵权|非侵权|(?:未发现|无明显|不存在|不构成|未构成|不涉及|未涉及)[^。;;]*侵权)"); // 否定措辞优先,裸 contains("侵权") 会反判
private boolean isInfringement(String value) {
@@ -194,7 +194,7 @@ public class AppearancePatentLlmBatchPipeline {
apiHost, () -> llmClient.inspectRows(batchRows, prompt, apiKey));
} catch (Exception ex) {
String message = firstNonBlank(ex.getMessage(), "LLM 检测失败");
if (AppearancePatentResultJobSupport.isFatalLlmArrearsFailure(message)) {
if (AppearancePatentResultJobSupport.isFatalCredentialFailure(message)) {
fatalLlmMessage = message;
}
log.warn("[appearance-patent] llm batch failed taskId={} jobId={} rows={} batch={}/{} fatalLlmArrears={} err={}",
@@ -240,7 +240,7 @@ public class AppearancePatentLlmBatchPipeline {
// 按次付费买出口 IP(2026-10-27 B46 现网形状)。所以这里既停批(不再发下一批),
// 又把「落终态」交给宿主:FileTaskMapper 与收尾口径在它手里,且这一步发生在
// 作业执行线程,不是心跳线程(铁律 8)。
log.warn("[appearance-patent] LLM 上游欠费/密钥失效,停止后续批次并把任务落终态"
log.warn("[appearance-patent] LLM 上游欠费/密钥失效或代理不可用,停止后续批次并把任务落终态"
+ " taskId={} jobId={} batch={}/{} pendingRows={} err={}",
task.getId(), job.getId(), batchIndex, batchTotal,
Math.max(0, submitLimit - i), fatalLlmMessage);
@@ -2,7 +2,6 @@ package com.nanri.aiimage.modules.appearancepatent.service.support;
import com.baomidou.mybatisplus.core.conditions.query.LambdaQueryWrapper;
import com.nanri.aiimage.common.exception.BusinessException;
import com.nanri.aiimage.common.retry.LlmBalanceGuard;
import com.nanri.aiimage.common.task.TaskStatuses;
import com.nanri.aiimage.common.task.GroupResultPropagator;
import com.nanri.aiimage.config.AppearancePatentProperties;
@@ -23,10 +22,11 @@ import com.nanri.aiimage.modules.task.model.entity.FileTaskEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskChunkEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskFileJobEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskScopeStateEntity;
import com.nanri.aiimage.common.retry.CredentialFatalClassifier;
import com.nanri.aiimage.modules.task.service.CredentialFatalTaskCloser;
import com.nanri.aiimage.modules.task.service.TaskDistributedLockService;
import com.nanri.aiimage.modules.task.service.TaskFileJobService;
import com.nanri.aiimage.modules.task.service.TaskFinalizeSupport;
import com.nanri.aiimage.modules.task.service.TaskRetryEligibility;
import com.nanri.aiimage.modules.task.service.support.TaskFailureLedger;
import lombok.extern.slf4j.Slf4j;
import org.apache.poi.xssf.streaming.SXSSFWorkbook;
@@ -52,6 +52,8 @@ public class AppearancePatentResultJobSupport {
private static final String STATUS_RUNNING = TaskStatuses.FileTask.RUNNING;
private static final String STATUS_FAILED = TaskStatuses.FileTask.FAILED;
/** 日志前缀与模块内其余落点同形。 */
private static final String LOG_TAG = "appearance-patent";
private static final String CONTENT_TYPE_XLSX = "application/vnd.openxmlformats-officedocument.spreadsheetml.sheet";
private static final String CONTENT_TYPE_ZIP = "application/zip";
@@ -265,18 +267,19 @@ public class AppearancePatentResultJobSupport {
}
/**
* 只认「上游账户欠费 / LLM 密钥失效」这一类不可自愈的失败。分类口径复用
* {@link TaskRetryEligibility}(它已经是"不可抗力不克隆重跑"的唯一判据),不再抄第二份字面量表。
* 只认「凭据不可自愈」这一类失败:上游 LLM 账户欠费/密钥失效、代理提取套餐/链接不可用。
* 判据在 {@link CredentialFatalClassifier} 一处(2026-11-12 起外观专利、货源、跟价、店铺采集、
* 采集数据共用它),不再抄第二份字面量表。
*
* <p>刻意只取 {@code BALANCE}:连接不可达({@code SERVICE_DOWN})、429 限流、5xx 抖动、
* 抓取缺口都属「外部会自己恢复或补传能救」,判宽了就是拿用户的任务给一次网络抖动陪葬。
* <p>刻意放行连通性失败({@code SERVICE_DOWN})、429 限流、5xx 抖动、通道被占、风控墙与抓取缺口:
* 它们属「外部会自己恢复或补传能救」,判宽了就是拿用户的任务给一次网络抖动陪葬。
*/
static boolean isFatalLlmArrearsFailure(String errorMessage) {
return TaskRetryEligibility.forceMajeureCategory(errorMessage) == TaskRetryEligibility.Category.BALANCE;
static boolean isFatalCredentialFailure(String errorMessage) {
return CredentialFatalClassifier.isFatal(errorMessage);
}
/**
* 上游余额欠费/密钥失效 → 任务<b>立即</b>落终态 FAILED。
* 凭据不可自愈 → 任务<b>立即</b>落终态 FAILED。
*
* <p>为什么必须由 Java 侧落终态(2026-10-27 现网):{@code f3445c21} 只做到「行级不再重试三次、
* 归因写对」,任务本身仍停在 RUNNING/WAIT_LLM 等 Python 继续回传分片。采集端
@@ -286,46 +289,14 @@ public class AppearancePatentResultJobSupport {
*
* <p>判定发生在作业执行线程(LLM 批次就在这里跑),不在心跳线程(铁律 8)。
* 写之前重读一次库里的现状态:已 SUCCESS/COMPLETED/CANCELLED/FAILED 的一律不动(铁律 14),
* 本方法因此可重入,停放期间同一任务被多个入口命中欠费也只写一次。
* 落库与文案在 {@link CredentialFatalTaskCloser},本方法因此可重入。
*/
public void terminalizeOnFatalLlmFailure(FileTaskEntity task, String failureMessage) {
if (task == null || task.getId() == null) {
return;
}
if (!isFatalLlmArrearsFailure(failureMessage)) {
// 兜底闸:调用方判宽了也不许把可恢复的失败写成终态
return;
}
FileTaskEntity current = fileTaskMapper.selectById(task.getId());
String currentStatus = current != null ? current.getStatus() : task.getStatus();
if (TaskStatuses.FileTask.TERMINAL.contains(currentStatus)) {
log.info("[appearance-patent] 任务已是终态,欠费归因不改写状态 taskId={} status={}",
task.getId(), currentStatus);
return;
}
String terminalMessage = fatalLlmTerminalMessage(failureMessage);
task.setStatus(STATUS_FAILED);
task.setSuccessFileCount(0);
task.setFailedFileCount(1);
task.setErrorMessage(terminalMessage);
task.setFailureCategory(TaskFailureLedger.categoryOf(task.getErrorMessage()));
task.setUpdatedAt(LocalDateTime.now());
task.setFinishedAt(LocalDateTime.now());
fileTaskMapper.updateById(task);
taskCacheService.deleteTaskCache(task.getId());
log.warn("[appearance-patent] LLM 上游欠费/密钥失效,任务落终态 FAILED 以停止为空转的行继续买出口 IP"
+ " taskId={} err={}", task.getId(), terminalMessage);
credentialFatalCloser().closeIfFatal(task, failureMessage);
}
/**
* 终态文案 = 生产者原文(客户端的欠费归因 + 上游 lastErr)+ 可执行动作,
* 原文一个字都不在这里重写;文案里没有「稍后重试」,欠费不会被说成抖动。
*/
static String fatalLlmTerminalMessage(String failureMessage) {
String raw = failureMessage == null ? "" : failureMessage.trim();
return raw.isEmpty()
? LlmBalanceGuard.TASK_TERMINAL_GUIDANCE
: raw + ";" + LlmBalanceGuard.TASK_TERMINAL_GUIDANCE;
private CredentialFatalTaskCloser credentialFatalCloser() {
return new CredentialFatalTaskCloser(LOG_TAG, fileTaskMapper, taskCacheService::deleteTaskCache);
}
public FileResultEntity findOrCreateResultRecordForAssembly(FileTaskEntity task, int rowCount) {
@@ -44,6 +44,20 @@ public final class AppearancePatentRowOutcome {
public static final String NO_DATA_TEXT = "该行未采集到数据(标题与图片都没有),无法检测";
/**
* 「这一格不是判定,而是没判成」的三族文案(唯一定义处,客户端与出表侧都引这里)。
*
* <p>2026-11-12 任务 34061:上游 LLM 余额见底,外观维一步都没发出去,但这三族文案此前都被
* {@link #isUsableField} 当成「有结论」——覆盖率算满、状态列还可能写「成功」(回退行拿整条标题
* 去品牌库蒙到一个「侵权」)。用户口径:没跑就是没跑,行必须是失败。
*/
/** 商标维查询失败(含整批不可用的长文案),前缀保持不变:状态列与补检都按它判。 */
public static final String BRAND_QUERY_FAILED = "商标查询失败";
/** 我们<b>根本没发出图片请求</b>时的外观维标签。 */
public static final String APPEARANCE_NOT_RUN = "未执行外观检测";
/** 请求发出去了、上游没给出可用结论。 */
public static final String APPEARANCE_ANOMALY = "外观识别异常";
private AppearancePatentRowOutcome() {
}
@@ -65,7 +79,27 @@ public final class AppearancePatentRowOutcome {
public static boolean isUsableField(String value) {
String normalized = AppearancePatentSheetBuilder.normalize(value);
return !normalized.isBlank() && !AppearancePatentSheetBuilder.isTechnicalLlmFailure(normalized);
return !normalized.isBlank()
&& !AppearancePatentSheetBuilder.isTechnicalLlmFailure(normalized)
&& !isNoVerdictText(normalized);
}
/**
* 这一格是不是「没判成」而不是判定:商标查询失败、外观没跑、外观异常、未取得结果、未完成检测。
*
* <p>单独成方法是为了让"覆盖率算不算这行"与"状态列写不写成功"共用同一句话,
* 而不是两处各写一遍字面量(34061 里两处就各判各的:覆盖率算满,状态列写成功)。
*/
public static boolean isNoVerdictText(String value) {
String normalized = AppearancePatentSheetBuilder.normalize(value);
if (normalized.isBlank()) {
return true;
}
return normalized.contains(BRAND_QUERY_FAILED)
|| normalized.contains(APPEARANCE_NOT_RUN)
|| normalized.contains(APPEARANCE_ANOMALY)
|| normalized.contains(AppearancePatentSheetBuilder.NO_RESULT_TEXT)
|| normalized.contains(NOT_INSPECTED_TEXT);
}
/**
@@ -126,7 +126,7 @@ public final class AppearancePatentSheetBuilder {
row.createCell(col++).setCellValue(titleRiskCell);
row.createCell(col++).setCellValue(appearanceRiskCell);
row.createCell(col++).setCellValue(conclusionCell);
row.createCell(col).setCellValue(resolveResultStatus(conclusionCell));
row.createCell(col).setCellValue(resolveResultStatus(conclusionCell, appearanceRiskCell));
}
writeReasonSheet(workbook, headerStyle, rowsToWrite, resultMap, finder);
}
@@ -294,8 +294,29 @@ public final class AppearancePatentSheetBuilder {
* 历史缺陷:曾按「结论非空即成功」,于是结论列写着"商标查询失败"、状态列却写"成功"。
* 带 {@link #PENDING_REVIEW_SUFFIX} 的结论含「侵权」二字,必须排在字面判定之前判掉,
* 否则「外观无侵权·商标待复核」会被读成成功。
*
* <p>单参版本只看结论串,保留给只拿到结论的历史调用方与单测;出表侧走
* {@link #resolveResultStatus(String, String)},多读一眼外观维(34061 那 158 行就是这么漏的)。
*/
public static String resolveResultStatus(String conclusion) {
return resolveResultStatus(conclusion, null);
}
/**
* 状态列口径(带外观维读数):<b>外观检测压根没跑的行不许写「成功」</b>。
*
* <p>2026-11-12 任务 34061 的反面样本:上游 LLM 余额见底,外观维一步都没发出去,
* 但回退路拿整条原始标题去品牌库查了一次,命中「阿凡达」的行 titleRisk=侵权 ⇒ 结论列=侵权,
* 状态列于是写成「成功」——1000 行里有 158 行是"图片识别一次没做却显示成功"。
* 结论列含「侵权」是必要不充分条件:外观维必须真的给出过判定(不是「未执行外观检测」/
* 「外观识别异常」/「未取得检测结果」/技术性失败)。
*
* @param appearanceRisk 外观维格子最终写给用户的那串字;null=调用方只给结论(历史单参口径)
*/
public static String resolveResultStatus(String conclusion, String appearanceRisk) {
if (appearanceRisk != null && !hasAppearanceVerdict(appearanceRisk)) {
return "失败";
}
String normalized = conclusion == null ? "" : conclusion.trim();
if (normalized.isBlank() || isTechnicalLlmFailure(normalized)) {
return "失败";
@@ -306,6 +327,14 @@ public final class AppearancePatentSheetBuilder {
return normalized.contains("侵权") ? "成功" : "失败";
}
/** 外观维有没有真的判过:判据在 {@link AppearancePatentRowOutcome#isNoVerdictText},与覆盖率同一句话。 */
public static boolean hasAppearanceVerdict(String appearanceRisk) {
String normalized = normalize(appearanceRisk);
return !normalized.isBlank()
&& !isTechnicalLlmFailure(normalized)
&& !AppearancePatentRowOutcome.isNoVerdictText(normalized);
}
/**
* 只按当前直连 LLM 客户端会写入的文案判定技术性失败。早期 Coze 工作流特征串已随直连改造移除:
* 按 "coze" 子串匹配会把品牌词 "Cozee Bay" 误判成调用失败,真结论被清空。
@@ -63,6 +63,8 @@ import com.nanri.aiimage.modules.task.model.entity.TaskChunkEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskFileJobEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskResultItemEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskScopeStateEntity;
import com.nanri.aiimage.common.retry.CredentialFatalClassifier;
import com.nanri.aiimage.modules.task.service.CredentialFatalTaskCloser;
import com.nanri.aiimage.modules.task.service.TaskDistributedLockService;
import com.nanri.aiimage.modules.task.service.TaskFileJobService;
import com.nanri.aiimage.modules.task.service.TaskHeartbeatPositionService;
@@ -979,6 +981,15 @@ public class CollectDataService extends AbstractFileTaskPipeline<CollectDataResu
return buildSubmitVo(task, result, chunkIndex, chunkTotal, request, 0);
}
// 凭据不可自愈(未配置代理/套餐到期/余额不足):这一批的品牌检测整批查不了,
// 后面每一批都会在同一条死路上再跑一遍。整单立即判死,让采集端下一跳收手
// (2026-11-12 用户口径「没余额要退成失败,且直接中断任务」)。
if (!brandOutcome.queryFailed().isEmpty() && closeOnFatalCredential(task, brandOutcome.reason())) {
// 内存里的 task 还停在上面刚翻成的 RUNNING,收口器只改了库里的行。
// 回执里的 taskStatus 是采集端决定"还要不要下一批"的唯一信号,必须回读。
return buildSubmitVo(fileTaskMapper.selectById(taskId), result, chunkIndex, chunkTotal, request, 0);
}
CollectDataStats stats = loadStats(task);
stats.receivedRows += rows.size();
stats.currentChunkRows = rows.size();
@@ -1469,6 +1480,27 @@ public class CollectDataService extends AbstractFileTaskPipeline<CollectDataResu
return count != null && count > 0L;
}
/**
* 品牌检测整批查不了且原因不可自愈(未配置代理/套餐耗尽/密钥不可用)→ 整单判死。
*
* <p>为什么不能只留下 `brandQueryFailedCount` 让它跑成成功:2026-11-12 的用户口径是
* 「没余额要退成失败」——那一整批行既不进结果也不算无效品牌,用户拿到的是一张空表 +
* 一句「会在补测轮重试」,而补测轮对配置类原因重跑一万次都一样(现网 32573 两轮 0 净增)。
* 判据共用 {@link CredentialFatalClassifier};冷却/出口被拒/上游不可用照旧只补测不判死。
*
* @return true=本次已把任务写成终态
*/
private boolean closeOnFatalCredential(FileTaskEntity task, String rawReason) {
CredentialFatalClassifier.Kind kind = CredentialFatalClassifier.kind(rawReason);
if (kind == null) {
return false;
}
log.warn("[collect-data] 品牌检测命中凭据不可自愈({}),整单改判死 taskId={} reason={}",
kind, task.getId(), rawReason);
return new CredentialFatalTaskCloser("collect-data", fileTaskMapper, null)
.close(task, rawReason, kind);
}
private CollectDataSubmitResultVo buildSubmitVo(FileTaskEntity task,
FileResultEntity result,
int chunkIndex,
@@ -33,6 +33,8 @@ import com.nanri.aiimage.modules.task.model.entity.FileResultEntity;
import com.nanri.aiimage.modules.task.model.entity.FileTaskEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskFileJobEntity;
import com.nanri.aiimage.modules.task.service.AbstractModuleTaskCacheService;
import com.nanri.aiimage.common.retry.CredentialFatalClassifier;
import com.nanri.aiimage.modules.task.service.CredentialFatalTaskCloser;
import com.nanri.aiimage.modules.task.service.TaskDistributedLockService;
import com.nanri.aiimage.modules.task.service.TaskFileJobService;
import com.nanri.aiimage.modules.task.service.TaskFinalizeSupport;
@@ -2216,6 +2218,15 @@ public class PriceTrackTaskService extends AbstractShopPayloadTaskPipeline<Price
}
private void updateTaskStatusFromLatestRows(FileTaskEntity task, List<FileResultEntity> latest) {
// 凭据不可自愈(LLM 欠费/密钥失效、代理套餐/链接不可用):整单立即判死,
// 不等剩余店铺跑完——剩下的每一家都会在同一条死路上再跑一遍,白等还白烧出口
// (2026-11-12 用户口径「没余额要退成失败,且直接中断任务」)。
if (closeOnFatalCredential(task, latest)) {
// 内存里的 task.status 还是 RUNNING(收口器只改了库),清缓存要按刚落定的终态问
cleanupTaskCacheIfTerminal(task.getId(), "FAILED");
priceTrackLoopRunService.syncLoopRunAfterChildTerminal(task.getId());
return;
}
String oldStatus = task.getStatus();
int ok = 0;
int fail = 0;
@@ -2297,6 +2308,34 @@ public class PriceTrackTaskService extends AbstractShopPayloadTaskPipeline<Price
}
}
/**
* 任一结果行带着「不可自愈的凭据故障」就整单判死。
*
* <p>行级 error 是客户端回传的原话(LLM 欠费的 403 原文、代理套餐到期、未配置代理),
* 判据共用 {@link CredentialFatalClassifier}——跟价与外观专利、货源的判据必须是同一套,
* 否则同一句话在两面一边判死一边继续跑。库里已是终态时返回 false,交回既有行账逻辑(铁律 14)。
*/
private boolean closeOnFatalCredential(FileTaskEntity task, List<FileResultEntity> latest) {
if (task == null || latest == null || latest.isEmpty()) {
return false;
}
for (FileResultEntity row : latest) {
String error = row == null ? null : row.getErrorMessage();
CredentialFatalClassifier.Kind kind = CredentialFatalClassifier.kind(error);
if (kind == null) {
continue;
}
log.warn("[price-track] 结果行命中凭据不可自愈({}),整单改判死 taskId={} err={}",
kind, task.getId(), error);
return credentialFatalCloser().close(task, error, kind);
}
return false;
}
private CredentialFatalTaskCloser credentialFatalCloser() {
return new CredentialFatalTaskCloser("price-track", fileTaskMapper, null);
}
private boolean isResultAwaitingFileAssembly(FileResultEntity result, TaskFileJobEntity job) {
if (result == null) {
return false;
@@ -57,6 +57,17 @@ public class ShopDataCrawlResultItemVo {
@Schema(description = "抓取或任务失败原因;无错误时为空", example = "紫鸟页面加载超时")
private String error;
/**
* 任务级失败原因(截断 300 字),只在任务落 FAILED 时带。
*
* <p>为什么不能只靠上面那个行级 {@code error}:凭据不可自愈(未配置代理/套餐到期/LLM 欠费)
* 是<b>整单</b>判死(2026-11-12 铁律 29),收口器只写 {@code biz_file_task.error_message},
* 每个店铺行本身没有被标失败。没有这个字段,用户端在终态那刻拿不到任何原因,
* 「已中断」就变成一句话都不说的静默失败。
*/
@Schema(description = "任务级失败原因(整单判死时为那句话,截断 300 字);任务未失败时为空", example = "任务已终止:代理 IP 套餐已到期…")
private String taskErrorMessage;
@Schema(description = "结果记录创建时间,ISO 本地日期时间", example = "2026-07-25T10:00:00")
private LocalDateTime createdAt;
@@ -41,6 +41,8 @@ import com.nanri.aiimage.modules.task.model.entity.FileTaskEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskFileJobEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskScopeStateEntity;
import com.nanri.aiimage.modules.task.service.AbstractModuleTaskCacheService;
import com.nanri.aiimage.common.retry.CredentialFatalClassifier;
import com.nanri.aiimage.modules.task.service.CredentialFatalTaskCloser;
import com.nanri.aiimage.modules.task.service.TaskDistributedLockService;
import com.nanri.aiimage.modules.task.service.TaskFileJobService;
import com.nanri.aiimage.modules.task.service.TaskFinalizeSupport;
@@ -102,6 +104,8 @@ public class ShopDataCrawlTaskService extends AbstractFileTaskPipeline<ShopDataC
private static final int MAX_DAILY_AGGREGATION_ATTEMPTS = 3;
/** 历史列表单页条数上限。 */
private static final int HISTORY_MAX_PAGE_SIZE = 100;
/** 进度批量里任务级失败原因的截断长度:够说清是哪一处要改,不把轮询响应体撑大。 */
private static final int TASK_FAILED_REASON_MAX = 300;
private static final String INTERRUPTED_MESSAGE = "Python 在该店铺结果提交完成前中断";
private static final String PARTIAL_RESULT_MESSAGE = "Python 中断,已保留已回传的部分数据";
private static final String RESULT_CHUNK_SCOPE_PREFIX = "result-chunks:";
@@ -807,6 +811,11 @@ public class ShopDataCrawlTaskService extends AbstractFileTaskPipeline<ShopDataC
mergePayloadIntoSnapshot(snapshot, cached);
if (!blank(cached.getError())) {
// 凭据不可自愈(代理套餐/链接不可用、LLM 欠费):整单立即判死。
// 剩下的店铺会在同一条死路上各跑一遍,白等还白烧出口(2026-11-12 用户口径)。
if (closeOnFatalCredential(task, cached.getError())) {
return true;
}
markResultFailed(row, cached.getError());
applyFailureToSnapshot(snapshot, cached.getError());
taskCacheService.removeShopMergedPayload(taskId, row.getSourceFilename());
@@ -1393,6 +1402,7 @@ public class ShopDataCrawlTaskService extends AbstractFileTaskPipeline<ShopDataC
item.setTaskStatus(task == null ? null : task.getStatus());
item.setSuccess(toSuccessFlag(row.getSuccess(), null));
item.setError(row.getErrorMessage());
item.setTaskErrorMessage(taskFailedReason(task));
item.setCreatedAt(row.getCreatedAt());
item.setFinishedAt(task == null ? null : task.getFinishedAt());
item.setOutputFilename(row.getResultFilename());
@@ -1403,6 +1413,23 @@ public class ShopDataCrawlTaskService extends AbstractFileTaskPipeline<ShopDataC
return list;
}
/**
* 任务级失败原因,只给已 FAILED 的任务带(截断 300 字)。
*
* <p>整单判死(凭据不可自愈)只写 {@code biz_file_task.error_message},每个店铺行本身没有被标失败,
* 所以进度批量必须把这句话带出去,否则用户端在终态那刻拿不到任何原因。
*/
private static String taskFailedReason(FileTaskEntity task) {
if (task == null || !"FAILED".equals(task.getStatus())) {
return null;
}
String message = task.getErrorMessage();
if (message == null || message.isBlank()) {
return null;
}
return message.length() <= TASK_FAILED_REASON_MAX ? message : message.substring(0, TASK_FAILED_REASON_MAX);
}
private Map<Long, ShopDataCrawlResultItemVo> indexSnapshotByResultId(List<ShopDataCrawlResultItemVo> snapshots) {
Map<Long, ShopDataCrawlResultItemVo> map = new LinkedHashMap<>();
if (snapshots == null) {
@@ -1416,6 +1443,23 @@ public class ShopDataCrawlTaskService extends AbstractFileTaskPipeline<ShopDataC
return map;
}
/**
* 店铺级 error 命中「不可自愈的凭据故障」就整单判死(2026-11-12 用户口径:没余额/没代理要退成失败
* 且直接中断)。判据共用 {@link CredentialFatalClassifier},与外观专利、货源、跟价同一套。
*
* @return true=本次已把任务写成终态(调用方立即返回,别再用行账覆盖)
*/
private boolean closeOnFatalCredential(FileTaskEntity task, String rowError) {
CredentialFatalClassifier.Kind kind = CredentialFatalClassifier.kind(rowError);
if (kind == null) {
return false;
}
log.warn("[shop-data-crawl] 店铺回传命中凭据不可自愈({}),整单改判死 taskId={} err={}",
kind, task.getId(), rowError);
return new CredentialFatalTaskCloser("shop-data-crawl", fileTaskMapper, null)
.close(task, rowError, kind);
}
private void updateTaskStatusFromRows(FileTaskEntity task, List<FileResultEntity> rows) {
long successCount = rows.stream().filter(row -> Integer.valueOf(RESULT_SUCCESS).equals(row.getSuccess())).count();
long failedCount = rows.stream().filter(row -> Integer.valueOf(RESULT_FAILED).equals(row.getSuccess())).count();
@@ -8,7 +8,6 @@ import com.fasterxml.jackson.databind.JsonNode;
import com.fasterxml.jackson.databind.ObjectMapper;
import com.nanri.aiimage.common.exception.BusinessException;
import com.nanri.aiimage.common.security.AdminAuthSupport;
import com.nanri.aiimage.common.retry.LlmBalanceGuard;
import com.nanri.aiimage.common.task.TaskStatuses;
import com.nanri.aiimage.common.task.LockSkipWitness;
import com.nanri.aiimage.common.service.DistributedJobLockService;
@@ -67,11 +66,12 @@ import com.nanri.aiimage.modules.task.model.entity.FileTaskEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskFileJobEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskChunkEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskScopeStateEntity;
import com.nanri.aiimage.common.retry.CredentialFatalClassifier;
import com.nanri.aiimage.modules.task.service.CredentialFatalTaskCloser;
import com.nanri.aiimage.modules.task.service.TaskFileJobService;
import com.nanri.aiimage.modules.task.service.TaskDistributedLockService;
import com.nanri.aiimage.modules.task.service.TaskHeartbeatPositionService;
import com.nanri.aiimage.modules.task.service.TaskProgressSnapshotService;
import com.nanri.aiimage.modules.task.service.TaskRetryEligibility;
import com.nanri.aiimage.modules.task.service.support.TaskFailureLedger;
import com.nanri.aiimage.modules.task.service.TaskVisibleFailureNotice;
import com.nanri.aiimage.modules.task.service.TransientPayloadStorageService;
@@ -113,6 +113,8 @@ import java.util.function.Supplier;
public class SimilarAsinTaskService implements SimilarAsinPipelineHost {
public static final String MODULE_TYPE = "SIMILAR_ASIN";
/** 日志前缀(共用件的日志里要能分清是哪一面落的口)。 */
private static final String LOG_TAG = "similar-asin";
private static final String STATUS_PENDING = "PENDING";
private static final String STATUS_RUNNING = "RUNNING";
private static final String STATUS_SUCCESS = "SUCCESS";
@@ -1591,49 +1593,23 @@ public class SimilarAsinTaskService implements SimilarAsinPipelineHost {
}
/**
* 上游 LLM 账户欠费/密钥失效 → 任务<b>立即</b>落终态 FAILED(2026-10-31,口径与外观专利 2026-10-27 那条一致)。
* 凭据不可自愈(上游 LLM 账户欠费/密钥失效、代理套餐/链接不可用)→ 任务<b>立即</b>落终态 FAILED
* (2026-10-31 与外观专利同口径;2026-11-12 起判据与落库都收进共用件)。
*
* <p>为什么必须由 Java 侧落终态:{@code maixiang similar_worker} 只看 {@code /task/heartbeat} 的
* {@code alive}({@code similar_worker.py:249}),任务还停在 RUNNING 它就看不到判决,会继续为
* 永远进不了 LLM 的行<b>按次付费买出口 IP</b>。任务一终态,{@code TaskHeartbeatService} 才对该任务
* 回 {@code alive=false},worker 下一跳收手。
*
* <p>判据只取 {@link TaskRetryEligibility.Category#BALANCE}(欠费与 LLM 密钥失效同族,复用既有唯一
* 判据、不抄第二份字面量表):连接不可达(SERVICE_DOWN)、429 限流、5xx 抖动、抓取缺口都属
* "外部会自己恢复或补传能救",判宽了就是拿用户的整单给一次网络抖动陪葬。写之前重读库里现状态,
* 已终态的一律不动(铁律 14),本方法因此可重入。
* <p>判据在 {@link CredentialFatalClassifier}(唯一出处),落库与文案在
* {@link CredentialFatalTaskCloser};连接不可达、429 限流、5xx 抖动、通道被占、抓取缺口都属
* "外部会自己恢复或补传能救",不会被判死。写之前重读库里现状态,已终态的一律不动(铁律 14),
* 本方法因此可重入。
*/
@Override
public void terminalizeOnFatalLlmFailure(FileTaskEntity task, String failureMessage) {
if (task == null || task.getId() == null) {
return;
}
if (TaskRetryEligibility.forceMajeureCategory(failureMessage) != TaskRetryEligibility.Category.BALANCE) {
return;
}
FileTaskEntity current = fileTaskMapper.selectById(task.getId());
String currentStatus = current != null ? current.getStatus() : task.getStatus();
if (TaskStatuses.FileTask.TERMINAL.contains(currentStatus)) {
log.info("[similar-asin] 任务已是终态,欠费归因不改写状态 taskId={} status={}", task.getId(), currentStatus);
return;
}
String raw = failureMessage == null ? "" : failureMessage.trim();
task.setStatus(STATUS_FAILED);
task.setSuccessFileCount(0);
task.setFailedFileCount(1);
// 生产者原文一个字都不在这里重写(支持同学要对着上游响应体查根因);界面上那句中文由
// TaskVisibleFailureNotice 在出口处给,英文原文与上游账户号不进界面。
String terminalText = raw.isEmpty()
? LlmBalanceGuard.TASK_TERMINAL_GUIDANCE
: raw + ";" + LlmBalanceGuard.TASK_TERMINAL_GUIDANCE;
task.setErrorMessage(terminalText);
task.setFailureCategory(TaskFailureLedger.categoryOf(terminalText));
task.setUpdatedAt(LocalDateTime.now());
task.setFinishedAt(LocalDateTime.now());
fileTaskMapper.updateById(task);
taskCacheService.deleteTaskCache(task.getId());
log.warn("[similar-asin] LLM 上游欠费/密钥失效,任务落终态 FAILED 以停止为空转的行继续买出口 IP"
+ " taskId={} err={}", task.getId(), task.getErrorMessage());
new CredentialFatalTaskCloser(LOG_TAG, fileTaskMapper, taskCacheService::deleteTaskCache)
.closeIfFatal(task, failureMessage);
}
@Override
@@ -1,6 +1,7 @@
package com.nanri.aiimage.modules.similarasin.service.support;
import com.nanri.aiimage.modules.similarasin.model.dto.SimilarAsinResultRowDto;
import com.nanri.aiimage.common.retry.CredentialFatalClassifier;
import java.util.ArrayList;
import java.util.Collection;
@@ -152,6 +153,12 @@ public final class SimilarAsinResultTextSupport {
if (row == null) {
return "失败";
}
// 凭据不可自愈(LLM 欠费/密钥失效、代理套餐/链接不可用):图片采到了也没判过,
// 行必须是失败并带上真因——2026-11-12 用户口径「没余额要退成失败」。排在图片判定之前,
// 否则采集端拿到的货源图会把一行"从没检测过"的行染成成功。
if (CredentialFatalClassifier.isFatal(row.getError()) || CredentialFatalClassifier.isFatal(row.getReason())) {
return "失败";
}
if (hasText(row.getMainUrl()) || hasText(row.getPuzzleImg1()) || hasText(row.getPuzzleImg2())) {
return "成功";
}
@@ -0,0 +1,103 @@
package com.nanri.aiimage.modules.task.service;
import com.nanri.aiimage.common.retry.CredentialFatalClassifier;
import com.nanri.aiimage.common.task.TaskStatuses;
import com.nanri.aiimage.modules.task.mapper.FileTaskMapper;
import com.nanri.aiimage.modules.task.model.entity.FileTaskEntity;
import com.nanri.aiimage.modules.task.service.support.TaskFailureLedger;
import lombok.extern.slf4j.Slf4j;
import java.time.LocalDateTime;
import java.util.function.LongConsumer;
/**
* 凭据不可自愈(LLM 欠费/密钥失效、代理套餐/链接不可用)→ 任务<b>立即</b>落终态 FAILED。
*
* <p>为什么必须由 Java 侧落终态(2026-10-27 外观专利、2026-10-31 货源查询两笔现网的共同结论):
* 采集端只看 {@code /task/heartbeat} 的 {@code alive},看不到终态就会继续为那些永远进不了 LLM
* 的行<b>按次付费买出口 IP</b>。任务一终态,心跳对其返回 {@code alive=false},worker 下一跳收手。
* 2026-11-12 用户据此把这条从"外观专利/货源查询两步"扩成"所有涉及 LLM 密钥与代理 IP 的特性"。
*
* <p>判据与文案都从 {@link CredentialFatalClassifier} 取,本类只管"写下去"这一件事:
* 重读库里现状态(已终态的一律不动,铁律 14,因此可重入)、置 FAILED/successFileCount=0/
* failedFileCount=1/errorMessage/failureCategory/finishedAt、清模块缓存。
*
* <p>无状态、按调用现取(与外观专利 {@code resultJobSupport()} 同一先例):缓存清理是模块自己的事,
* 由调用方以 {@code cacheEvictor} 交进来,不在这个类里认任何一个模块的缓存实现。
*/
@Slf4j
public final class CredentialFatalTaskCloser {
private static final String STATUS_FAILED = TaskStatuses.FileTask.FAILED;
private final String logTag;
private final FileTaskMapper fileTaskMapper;
private final LongConsumer cacheEvictor;
/**
* @param logTag 模块日志前缀(如 {@code appearance-patent}),与各面既有日志同形
* @param cacheEvictor 模块任务缓存清理;没有就传 null
*/
public CredentialFatalTaskCloser(String logTag, FileTaskMapper fileTaskMapper, LongConsumer cacheEvictor) {
this.logTag = logTag;
this.fileTaskMapper = fileTaskMapper;
this.cacheEvictor = cacheEvictor;
}
/**
* 判据+落终态一步到位。
*
* @return true=本次真的把任务写成了终态;false=不致命或库里已是终态
*/
public boolean closeIfFatal(FileTaskEntity task, String failureMessage) {
CredentialFatalClassifier.Kind kind = CredentialFatalClassifier.kind(failureMessage);
return kind != null && close(task, failureMessage, kind);
}
/**
* 已确定档位时直接落终态(调用方自己已经判过,避免同一句话判两遍)。
*/
public boolean close(FileTaskEntity task, String failureMessage, CredentialFatalClassifier.Kind kind) {
if (task == null || task.getId() == null) {
return false;
}
if (kind == null) {
// 兜底闸:调用方判宽了也不许把可恢复的失败写成终态
return false;
}
FileTaskEntity current = fileTaskMapper.selectById(task.getId());
String currentStatus = current != null ? current.getStatus() : task.getStatus();
// 空状态的实体(测试/未落库形状)没有终态可言;TERMINAL 是不可变 Set,contains(null) 直接 NPE
if (currentStatus != null && TaskStatuses.FileTask.TERMINAL.contains(currentStatus)) {
log.info("[{}] 任务已是终态,凭据归因不改写状态 taskId={} status={}", logTag, task.getId(), currentStatus);
return false;
}
String terminalMessage = terminalMessage(failureMessage, kind);
task.setStatus(STATUS_FAILED);
task.setSuccessFileCount(0);
task.setFailedFileCount(1);
task.setErrorMessage(terminalMessage);
task.setFailureCategory(TaskFailureLedger.categoryOf(terminalMessage));
LocalDateTime now = LocalDateTime.now();
task.setUpdatedAt(now);
task.setFinishedAt(now);
fileTaskMapper.updateById(task);
if (cacheEvictor != null) {
cacheEvictor.accept(task.getId());
}
log.warn("[{}] 凭据不可自愈({}),任务落终态 FAILED 以停止为空转的行继续买出口 IP"
+ " taskId={} err={}", logTag, kind, task.getId(), terminalMessage);
return true;
}
/**
* 终态文案 = 生产者原文(支持同学要对着上游响应体查根因)+ 可执行动作。
* 原文一个字都不在这里重写;文案里没有「稍后重试」,欠费不会被说成抖动。
* 界面那一层由 {@link TaskVisibleFailureNotice} 换成纯中文动作句(原文里的账户号与余额不进界面)。
*/
public static String terminalMessage(String failureMessage, CredentialFatalClassifier.Kind kind) {
String raw = failureMessage == null ? "" : failureMessage.trim();
String guidance = CredentialFatalClassifier.guidance(kind);
return raw.isEmpty() ? guidance : raw + ";" + guidance;
}
}
@@ -50,11 +50,20 @@ public final class TaskRetryEligibility {
}
}
/** 余额/套餐类:覆盖 jikip 代理与 LLM 中转两种欠费文案。 */
/**
* 余额/套餐类:覆盖 jikip 代理与 LLM 中转两种欠费文案。
*
* <p>2026-11-12 补三族:① 钱包型欠费({@code insufficient_funds} / {@code wallet balance insufficient},
* 2026-11-11 现网形状,{@code LlmBalanceGuard} 已认、这里漏了,自动重试会照跑);② 代理套餐
* {@code 套餐到期};③ 根本没配代理(品牌检测回的原文,见 {@code BrandCheckClient.NO_PROXY_REASON})——
* 这三族都是「不修外部条件、重跑必然同结果」,放进本类才不会被 {@code TaskResumeService} 反复复位。
*/
private static final List<String> BALANCE_MARKERS = List.of(
"余额不足", "欠费", "套餐不存在", "套餐已过期", "套餐过期", "未开通",
"insufficient_user_quota", "insufficient_quota", "quota exceeded",
"预扣费额度");
"余额不足", "欠费", "套餐不存在", "套餐已过期", "套餐过期", "套餐到期", "未开通",
"insufficient_user_quota", "insufficient_quota", "insufficient_funds",
"wallet balance insufficient", "quota exceeded",
"预扣费额度",
"未配置代理", "代理地址为空", "代理链接为空");
/** LLM 密钥本身失效(区别于欠费)。 */
private static final List<String> KEY_MARKERS = List.of(
@@ -1,5 +1,6 @@
package com.nanri.aiimage.modules.task.service;
import com.nanri.aiimage.common.retry.CredentialFatalClassifier;
import com.nanri.aiimage.common.retry.LlmBalanceGuard;
import com.nanri.aiimage.modules.task.model.entity.FileTaskEntity;
@@ -34,7 +35,7 @@ public final class TaskVisibleFailureNotice {
*/
public static String forHistoryRow(FileTaskEntity task, String rowError) {
String stored = task == null ? null : task.getErrorMessage();
if (isFatalArrears(stored)) {
if (isWholeTaskVerdict(stored)) {
return forStoredMessage(stored);
}
String row = trimToNull(rowError);
@@ -46,11 +47,17 @@ public final class TaskVisibleFailureNotice {
if (raw == null) {
return null;
}
if (raw.contains(CredentialFatalClassifier.PROXY_TERMINAL_GUIDANCE)) {
// 代理侧那句是 2026-11-12 起由 CredentialFatalTaskCloser 写进尾巴的本仓文案:
// 前半截原文可能带着上游英文码与用户代理链接片段,同样不该进界面。换成本仓的纯中文句,
// 且必须是代理那一句——换成 LLM 那句就是 2026-10-27 用户点名要避免的误导。
return CredentialFatalClassifier.PROXY_TERMINAL_GUIDANCE;
}
return isFatalArrears(raw) ? LlmBalanceGuard.TASK_TERMINAL_GUIDANCE : raw;
}
/**
* 这条库里原文是不是<b>整单</b>的不可抗力结论(上游账户欠费 / LLM 密钥失效)。
* 这条库里原文是不是<b>整单</b>的不可抗力结论(上游账户/密钥欠费、代理套餐或链接不可用)。
*
* <p>收尾路径拿它决定「新文案能不能覆盖旧结论」:欠费判死的单后来被一次带空错误串的收尾
* 盖掉,界面上就又回到「只见失败、不见原因」,采集端也会以为这单还能跑。
@@ -60,8 +67,8 @@ public final class TaskVisibleFailureNotice {
}
/**
* 这条库里原文是不是<b>本仓自己写下</b>的 LLM 欠费/密钥失效归因(生产者句 {@code REASON_LLM_BALANCE_DUE}
* 或终态句 {@code TASK_TERMINAL_GUIDANCE} 命中其一)。
* 这条库里原文是不是<b>本仓自己写下</b>的凭据终态结论(LLM 那两句 {@code REASON_LLM_BALANCE_DUE} /
* {@code TASK_TERMINAL_GUIDANCE},或代理那句 {@code PROXY_TERMINAL_GUIDANCE})。
*
* <p>刻意<b>不</b>用 {@link TaskRetryEligibility.Category#BALANCE} 当这里的判据:那一类还涵盖
* jikip <b>代理 IP</b>欠费与套餐过期("余额不足"/"套餐不存在"),拿它换句子会把"代理出口没钱了"
@@ -73,7 +80,8 @@ public final class TaskVisibleFailureNotice {
return false;
}
return errorMessage.contains(LlmBalanceGuard.REASON_LLM_BALANCE_DUE)
|| errorMessage.contains(LlmBalanceGuard.TASK_TERMINAL_GUIDANCE);
|| errorMessage.contains(LlmBalanceGuard.TASK_TERMINAL_GUIDANCE)
|| errorMessage.contains(CredentialFatalClassifier.PROXY_TERMINAL_GUIDANCE);
}
private static String trimToNull(String value) {
@@ -0,0 +1,168 @@
package com.nanri.aiimage.common.retry;
import com.nanri.aiimage.modules.brand.client.BrandCheckClient;
import com.nanri.aiimage.modules.task.service.TaskResumeService;
import org.junit.jupiter.api.Test;
import static org.assertj.core.api.Assertions.assertThat;
/**
* 凭据致命档的判据台账(2026-11-12,34061 取证后用户口径)。
*
* <p>这一档决定三件事:行落失败并写真实原因、任务立即中断、用户端弹窗。判宽了用户整单给一次
* 网络抖动陪葬;判窄了 34061 那种"余额见底 → 整单跑完 → 交付表只有一句没头没脑的异常"就会重演。
* 所以两条边界都要有正本:
* <ul>
* <li>欠费/密钥/未配置代理 → 致命,且分得清是哪一面(给的动作不同);</li>
* <li>通道被占、冷却、出口被拒、解密失败、上游不可用、超时、5xx、限流 → 不致命。</li>
* </ul>
*/
class CredentialFatalClassifierTest {
/** 现网 403 原文(外部世界的字符串,不是本仓文案)。 */
private static final String QUOTA_403_BODY = "{\"error\":{\"message\":\"预扣费额度失败, 用户[151502]剩余额度: "
+ "฿0.030492, 需要预扣费额度: ฿0.032412\",\"code\":\"insufficient_user_quota\"}}";
// ===== 致命:LLM 侧 =====
@Test
void upstreamQuotaBodyIsLlmCredential() {
assertThat(CredentialFatalClassifier.kind(QUOTA_403_BODY))
.isEqualTo(CredentialFatalClassifier.Kind.LLM_CREDENTIAL);
}
@Test
void producerCopyWrappedByTheClientIsStillLlmCredential() {
String producer = LlmBalanceGuard.REASON_LLM_BALANCE_DUE + ";lastErr=" + QUOTA_403_BODY;
assertThat(CredentialFatalClassifier.kind(producer))
.isEqualTo(CredentialFatalClassifier.Kind.LLM_CREDENTIAL);
}
@Test
void invalidLlmKeyIsLlmCredential() {
assertThat(CredentialFatalClassifier.kind("LLM http 401: invalid api key"))
.isEqualTo(CredentialFatalClassifier.Kind.LLM_CREDENTIAL);
assertThat(CredentialFatalClassifier.kind("密钥无效(401)"))
.isEqualTo(CredentialFatalClassifier.Kind.LLM_CREDENTIAL);
}
/** 2026-11-11 现网的钱包型欠费:与 {@code insufficient_user_quota} 拼写完全不同,不能漏。 */
@Test
void walletStyleArrearsIsAlsoFatal() {
assertThat(CredentialFatalClassifier.kind("LLM 402: {\"code\":\"insufficient_funds\"}"))
.as("钱包型欠费")
.isEqualTo(CredentialFatalClassifier.Kind.LLM_CREDENTIAL);
assertThat(CredentialFatalClassifier.kind("wallet balance insufficient"))
.as("钱包型欠费的另一种拼写(没有连续 insufficient balance)")
.isEqualTo(CredentialFatalClassifier.Kind.LLM_CREDENTIAL);
}
// ===== 致命:代理侧(品牌检测的原始原因分六档,只有前两档判死) =====
@Test
void missingProxyConfigurationIsProxyCredential() {
assertThat(CredentialFatalClassifier.kind(BrandCheckClient.NO_PROXY_REASON))
.as("没配代理=根本没得查,重跑一万次都一样")
.isEqualTo(CredentialFatalClassifier.Kind.PROXY_CREDENTIAL);
}
@Test
void proxyPackageExhaustedIsProxyCredential() {
assertThat(CredentialFatalClassifier.kind("提取失败:套餐已过期"))
.isEqualTo(CredentialFatalClassifier.Kind.PROXY_CREDENTIAL);
assertThat(CredentialFatalClassifier.kind("供应商拒付:余额不足"))
.as("同一句「余额不足」在品牌侧是代理套餐,不能按 LLM 欠费解释")
.isEqualTo(CredentialFatalClassifier.Kind.PROXY_CREDENTIAL);
}
@Test
void qingguoAuthDenyIsProxyCredential() {
assertThat(CredentialFatalClassifier.kind("青果提取失败 API_AUTH_DENY"))
.as("账密档没填或鉴权被切走:用户必须去改链接")
.isEqualTo(CredentialFatalClassifier.Kind.PROXY_CREDENTIAL);
}
// ===== 不致命:短时/技术性/上游(这条半边与致命半边同等重要) =====
@Test
void channelBusyIsNotFatalEvenThoughItsCopyMentionsThePackage() {
String copy = com.nanri.aiimage.modules.usersecret.service.UserApiSecretCheckService.CHANNEL_BUSY_MESSAGE;
assertThat(copy).contains("套餐到期");
assertThat(CredentialFatalClassifier.kind(copy))
.as("通道被占是「等几分钟再来」,同句里的「套餐到期」是排查建议,不是结论")
.isNull();
}
@Test
void brandCooldownAndEgressRejectedAreNotFatal() {
assertThat(CredentialFatalClassifier.kind("该 key 处于冷却窗口")).isNull();
assertThat(CredentialFatalClassifier.kind("拒绝代理出口,请换 IP 重试")).isNull();
}
@Test
void brandTechnicalFailuresAreNotFatal() {
assertThat(CredentialFatalClassifier.kind("解密失败: Malformed UTF-8 data")).isNull();
assertThat(CredentialFatalClassifier.kind("代理请求失败")).isNull();
assertThat(CredentialFatalClassifier.kind("未返回可用 IP")).isNull();
}
@Test
void upstreamUnavailableAndServiceDownAreNotFatal() {
assertThat(CredentialFatalClassifier.kind("品牌库上游整体不可用(本批待查词无一返回结果)")).isNull();
assertThat(CredentialFatalClassifier.kind("LLM http 502: Bad Gateway")).isNull();
assertThat(CredentialFatalClassifier.kind("LLM 服务不可达(连接未建立):Connection refused")).isNull();
assertThat(CredentialFatalClassifier.kind("LLM http 429: Too Many Requests")).isNull();
assertThat(CredentialFatalClassifier.kind("任务心跳超时,已自动失败")).isNull();
}
/**
* 任何一条 LLM 报错都带 {@code LLM} 三个字母:拿这个裸词当凭据判据,一次网关抖动就会判死整单
* (2026-11-12 实现当天就被 {@code AppearancePatentRowMarkTimingTest} 撞出来,NPE 在终态闸上)。
*/
@Test
void bareLlmWordingIsNotACredentialVerdict() {
assertThat(CredentialFatalClassifier.kind("LLM 网关无应答")).isNull();
assertThat(CredentialFatalClassifier.kind("LLM 检测失败")).isNull();
assertThat(CredentialFatalClassifier.kind("LLM http 500: internal error")).isNull();
}
@Test
void deliveryAndStoppedCopiesAreNotCredentialFatal() {
assertThat(CredentialFatalClassifier.kind("结果文件生成多次失败")).isNull();
assertThat(CredentialFatalClassifier.kind(TaskResumeService.DUPLICATE_STOP_REASON)).isNull();
}
@Test
void blankMessageIsNeverFatal() {
assertThat(CredentialFatalClassifier.kind(null)).isNull();
assertThat(CredentialFatalClassifier.kind(" ")).isNull();
assertThat(CredentialFatalClassifier.isFatal("")).isFalse();
}
// ===== 本仓自己写下的终态句:重读时不许在两面之间翻 =====
@Test
void ownTerminalSentencesKeepTheirSideOnReread() {
String llmStored = QUOTA_403_BODY + ";" + LlmBalanceGuard.TASK_TERMINAL_GUIDANCE;
String proxyStored = "用户未配置代理;" + CredentialFatalClassifier.PROXY_TERMINAL_GUIDANCE;
assertThat(CredentialFatalClassifier.kind(llmStored))
.as("LLM 终态句里也提到「代理出口额度」,重读必须仍判 LLM")
.isEqualTo(CredentialFatalClassifier.Kind.LLM_CREDENTIAL);
assertThat(CredentialFatalClassifier.kind(proxyStored))
.as("代理终态句里也提到「密钥无效」,重读必须仍判代理")
.isEqualTo(CredentialFatalClassifier.Kind.PROXY_CREDENTIAL);
}
@Test
void guidanceFollowsTheKindAndNeverSaysRetryLater() {
for (CredentialFatalClassifier.Kind kind : CredentialFatalClassifier.Kind.values()) {
String guidance = CredentialFatalClassifier.guidance(kind);
assertThat(guidance).as("%s 的终态动作句", kind)
.contains("任务已终止")
.doesNotContain("稍后重试");
}
}
}
@@ -68,6 +68,20 @@ import static org.mockito.Mockito.when;
*/
class AppearancePatentTaskServiceDelegationTest {
/**
* 「继续」复位现在会经 {@code LambdaUpdateWrapper<FileResultEntity>} 清直链,用得到 MyBatis 的
* lambda 缓存。此前这一格只在别的用例类先把 {@code FileResultEntity} 登记进 TableInfo 时才绿
* (整包跑绿、单类跑红=假绿,2026-11-12 实测),所以本类自己登记一次,不再靠收集顺序。
*/
@org.junit.jupiter.api.BeforeAll
static void initializeMybatisMetadata() {
org.apache.ibatis.builder.MapperBuilderAssistant assistant =
new org.apache.ibatis.builder.MapperBuilderAssistant(
new com.baomidou.mybatisplus.core.MybatisConfiguration(), "");
com.baomidou.mybatisplus.core.metadata.TableInfoHelper.initTableInfo(
assistant, com.nanri.aiimage.modules.task.model.entity.FileResultEntity.class);
}
private FileTaskMapper fileTaskMapper = mock(FileTaskMapper.class);
private FileResultMapper fileResultMapper = mock(FileResultMapper.class);
private TaskScopeStateMapper taskScopeStateMapper = mock(TaskScopeStateMapper.class);
@@ -175,6 +175,39 @@ class AppearancePatentRowOutcomeTest {
assertFalse(AppearancePatentRowOutcome.isUsableField("request timeout"));
}
/**
* 凭据坏掉的三族文案都不是判定:商标查询失败、外观没跑、外观异常。
*
* <p>2026-11-12 任务 34061 里三处各判各的——覆盖率算满(这三族被当"有结论")、
* 状态列还可能写「成功」——用户口径是「没余额要退成失败」,所以三处必须同一句话。
*/
@Test
void credentialFailureTextsAreNotJudgements() {
for (String text : java.util.List.of(
AppearancePatentRowOutcome.BRAND_QUERY_FAILED,
AppearancePatentRowOutcome.BRAND_QUERY_FAILED + ":品牌库上游整体不可用",
AppearancePatentRowOutcome.APPEARANCE_NOT_RUN,
AppearancePatentRowOutcome.APPEARANCE_ANOMALY,
AppearancePatentSheetBuilder.NO_RESULT_TEXT,
AppearancePatentRowOutcome.NOT_INSPECTED_TEXT)) {
assertTrue(AppearancePatentRowOutcome.isNoVerdictText(text), "应判为没结论: " + text);
assertFalse(AppearancePatentRowOutcome.isUsableField(text), "不许算进已判: " + text);
}
}
/** 回退行:商标维命中、外观维没跑 → 不算判定(覆盖率掉下去),而不是"齐了"。 */
@Test
void fallbackRowWithOnlyBrandHitIsNotJudged() {
AppearancePatentParsedRowVo parsed = sheetRowWithData("1", "B0A", "阿凡达 玩具", "https://img/1.jpg");
AppearancePatentResultRowDto row = judgedRow("1", "B0A", "阿凡达 玩具", "https://img/1.jpg");
row.setTitleRisk("侵权");
row.setAppearanceRisk(AppearancePatentRowOutcome.APPEARANCE_NOT_RUN);
row.setConclusion("商标侵权·外观维未执行");
assertEquals(AppearancePatentRowOutcome.Kind.NOT_INSPECTED,
AppearancePatentRowOutcome.classify(parsed, row));
}
// ---------- 2. 三句文案不许互相顶替 ----------
@Test
@@ -366,9 +366,45 @@ class AppearancePatentSheetBuilderTest {
assertEquals("失败", AppearancePatentSheetBuilder.resolveResultStatus("外观无侵权·商标待复核"));
}
/**
* 图片识别一步都没跑的行,状态列不许写「成功」——哪怕商标维命中了侵权词。
*
* <p>2026-11-12 任务 34061:上游 LLM 余额见底,外观维一次没发出去,回退路却拿整条原始标题
* 去品牌库蒙到「侵权」,结论列写成侵权、状态列写成成功(1000 行里 158 行)。
*/
@Test
void test_sheet_builder_blank_asin_reason_row_skipped() throws Exception {
void test_sheet_builder_success_requires_the_image_step_to_have_run() throws Exception {
try (Workbook wb = new XSSFWorkbook()) {
AppearancePatentParsedRowVo p = parsedRow("2_1", "B01A", "US", "阿凡达 玩具", "https://img/1.jpg", "");
AppearancePatentResultRowDto r = resultRow("2_1", "B01A", "US");
r.setTitleRisk("侵权");
r.setAppearanceRisk(AppearancePatentRowOutcome.APPEARANCE_NOT_RUN);
r.setConclusion("商标侵权·外观维未执行");
r.setTitleReason("LLM 服务余额欠费(上游账户额度不足,非本行数据问题)");
AppearancePatentSheetBuilder.buildResultSheet(wb, List.of(p), Map.of(
AppearancePatentSheetBuilder.rowKey(r), r));
Row data = wb.getSheet("外观专利检测结果").getRow(1);
assertEquals(AppearancePatentRowOutcome.APPEARANCE_NOT_RUN,
data.getCell(10).getStringCellValue(), "外观维如实写「没跑」");
assertEquals("失败", data.getCell(12).getStringCellValue(),
"图片识别没做,一行就不许算成功: " + data.getCell(11).getStringCellValue());
}
}
@Test
void test_sheet_builder_status_gate_reads_the_appearance_column() {
assertEquals("成功", AppearancePatentSheetBuilder.resolveResultStatus("侵权", "无侵权"));
assertEquals("失败", AppearancePatentSheetBuilder.resolveResultStatus("侵权", AppearancePatentRowOutcome.APPEARANCE_NOT_RUN));
assertEquals("失败", AppearancePatentSheetBuilder.resolveResultStatus("侵权", AppearancePatentRowOutcome.APPEARANCE_ANOMALY));
assertEquals("失败", AppearancePatentSheetBuilder.resolveResultStatus("侵权", AppearancePatentSheetBuilder.NO_RESULT_TEXT));
assertEquals("失败", AppearancePatentSheetBuilder.resolveResultStatus("侵权", "LLM http 503: overloaded"));
// 单参历史口径不变:只拿到结论串时仍按结论判
assertEquals("成功", AppearancePatentSheetBuilder.resolveResultStatus("侵权"));
}
@Test
void test_sheet_builder_blank_asin_reason_row_skipped() throws Exception { try (Workbook wb = new XSSFWorkbook()) {
AppearancePatentParsedRowVo p = parsedRow("2_1", " ", "US", "t", "", "");
AppearancePatentSheetBuilder.buildResultSheet(wb, List.of(p), Map.of());
@@ -0,0 +1,186 @@
package com.nanri.aiimage.modules.collectdata.service;
import com.baomidou.mybatisplus.core.MybatisConfiguration;
import com.baomidou.mybatisplus.core.metadata.TableInfoHelper;
import com.fasterxml.jackson.databind.ObjectMapper;
import com.nanri.aiimage.modules.asincache.service.AsinResultCacheService;
import com.nanri.aiimage.modules.collectdata.model.dto.CollectDataSubmitResultRequest;
import com.nanri.aiimage.modules.collectdata.model.dto.CollectDataSubmitRowDto;
import com.nanri.aiimage.modules.collectdata.model.vo.CollectDataResultRowVo;
import com.nanri.aiimage.modules.collectdata.model.vo.CollectDataSubmitResultVo;
import com.nanri.aiimage.modules.collectdata.util.CollectDataBatchQuery;
import com.nanri.aiimage.modules.collectdata.util.CollectDataBrandBatchFilter;
import com.nanri.aiimage.modules.task.mapper.FileResultMapper;
import com.nanri.aiimage.modules.task.mapper.FileTaskMapper;
import com.nanri.aiimage.modules.task.mapper.TaskChunkMapper;
import com.nanri.aiimage.modules.task.mapper.TaskScopeStateMapper;
import com.nanri.aiimage.modules.task.model.entity.FileResultEntity;
import com.nanri.aiimage.modules.task.model.entity.FileTaskEntity;
import com.nanri.aiimage.common.retry.CredentialFatalClassifier;
import com.nanri.aiimage.modules.task.service.TaskDistributedLockService;
import com.nanri.aiimage.modules.task.service.TransientPayloadStorageService;
import com.nanri.aiimage.modules.usersecret.service.UserApiSecretCheckService;
import org.apache.ibatis.builder.MapperBuilderAssistant;
import org.junit.jupiter.api.BeforeAll;
import org.junit.jupiter.api.BeforeEach;
import org.junit.jupiter.api.Test;
import org.junit.jupiter.api.extension.ExtendWith;
import org.mockito.InjectMocks;
import org.mockito.Mock;
import org.mockito.Spy;
import org.mockito.junit.jupiter.MockitoExtension;
import org.springframework.test.util.ReflectionTestUtils;
import java.time.LocalDateTime;
import java.util.List;
import static org.assertj.core.api.Assertions.assertThat;
import static org.mockito.ArgumentMatchers.any;
import static org.mockito.ArgumentMatchers.anyLong;
import static org.mockito.ArgumentMatchers.anyString;
import static org.mockito.ArgumentMatchers.eq;
import static org.mockito.Mockito.lenient;
import static org.mockito.Mockito.verify;
import static org.mockito.Mockito.when;
/**
* 采集数据:品牌校验整批查不了且原因<b>不可自愈</b>时,整单立即判死(2026-11-12 用户口径
* 「没余额要退成失败,且直接中断任务」)。
*
* <p>为什么必须整单判死而不是只记 {@code brandQueryFailedCount}:这些行既不进结果、也不算无效品牌,
* 用户拿到的是一张空表加一句「补测轮会重试」;而补测轮对「未配置代理/套餐到期/密钥无效」重跑
* 一万次都是同一句话(现网 32573 两轮 0 净增)。判宽了会把一次供应商抖动变成整单失败,
* 所以本类成对钉住:{@code 未配置代理} 判死、{@code 通道被占} 照旧继续。
*
* <p>夹具走 {@code service.submitResult} 这条生产接线,不反射调私有方法——判据要证明的是
* 「守卫挂在回传路径上」,不是「私有方法自己会写库」。
*/
@ExtendWith(MockitoExtension.class)
class CollectDataCredentialFatalTest {
private static final Long TASK_ID = 32601L;
private static final Long RESULT_ID = 42601L;
@Mock private FileTaskMapper fileTaskMapper;
@Mock private FileResultMapper fileResultMapper;
@Mock private TaskChunkMapper taskChunkMapper;
@Mock private TaskScopeStateMapper taskScopeStateMapper;
@Mock private TaskDistributedLockService taskDistributedLockService;
@Mock private TaskDistributedLockService.LockHandle lockHandle;
@Mock private TransientPayloadStorageService transientPayloadStorageService;
@Mock private CollectDataBatchQuery collectDataBatchQuery;
@Mock private CollectDataBrandBatchFilter brandBatchFilter;
@Mock private AsinResultCacheService asinResultCacheService;
@Mock private CollectDataBrandRecheckService collectDataBrandRecheckService;
@Spy private ObjectMapper objectMapper = new ObjectMapper();
@InjectMocks private CollectDataService service;
@BeforeAll
static void initializeMybatisMetadata() {
MapperBuilderAssistant assistant = new MapperBuilderAssistant(new MybatisConfiguration(), "");
TableInfoHelper.initTableInfo(assistant, FileTaskEntity.class);
TableInfoHelper.initTableInfo(assistant, FileResultEntity.class);
}
@BeforeEach
void setUp() {
ReflectionTestUtils.setField(service, "staleTimeoutMinutes", 30L);
lenient().when(transientPayloadStorageService.isSharedWriteEnabled()).thenReturn(true);
// 分片落 RustFS:本类只观察凭据判据,指针形状给最小可过的一份
lenient().when(transientPayloadStorageService.storeChunkPayloadVersioned(
anyString(), anyLong(), anyString(), any(), anyString())).thenReturn("rustfs:chunk-1");
lenient().when(transientPayloadStorageService.extractPointer(anyString())).thenReturn("rustfs:chunk-1");
lenient().when(taskDistributedLockService.acquire(eq(CollectDataService.MODULE_TYPE), anyLong(), anyLong()))
.thenReturn(lockHandle);
lenient().when(fileTaskMapper.selectById(TASK_ID)).thenAnswer(invocation -> task);
lenient().when(fileResultMapper.selectOne(any())).thenAnswer(invocation -> result);
lenient().when(fileResultMapper.updateById(any(FileResultEntity.class))).thenReturn(1);
lenient().when(fileTaskMapper.updateById(any(FileTaskEntity.class))).thenReturn(1);
// 去重闸原样放行本批:真正要观察的是品牌检测那一格
lenient().when(collectDataBatchQuery.filter(any(), any())).thenAnswer(invocation ->
new CollectDataBatchQuery.FilterResult(invocation.getArgument(0), 0, 0, List.of()));
}
@Test
void unconfiguredProxyMakesTheWholeTaskFailInsteadOfEndingAsAnEmptySuccess() {
calledBackWith("用户未配置代理");
assertThat(task.getStatus())
.as("凭据不可自愈必须整单判死,不许跑成一张空表")
.isEqualTo("FAILED");
assertThat(task.getFinishedAt()).isNotNull();
assertThat(task.getSuccessFileCount()).isZero();
assertThat(task.getFailedFileCount()).isEqualTo(1);
assertThat(task.getErrorMessage()).contains(CredentialFatalClassifier.PROXY_TERMINAL_GUIDANCE);
verify(fileTaskMapper).updateById(task);
}
@Test
void proxyPackageExhaustedAlsoFailsTheTask() {
calledBackWith("代理套餐已过期");
assertThat(task.getStatus()).isEqualTo("FAILED");
assertThat(task.getErrorMessage()).contains(CredentialFatalClassifier.PROXY_TERMINAL_GUIDANCE);
}
/**
* 反向半边:通道被占(青果 {@code NO_AVAILABLE_CHANNEL} 那一族)是可自愈的供应商状态,
* 句子本身含「套餐」字样,绝不能因此判死整单(铁律 25② 的边界)。
*/
@Test
void channelBusyKeepsTheTaskRunningAndOnlyCountsTheMissedRows() {
calledBackWith(UserApiSecretCheckService.CHANNEL_BUSY_MESSAGE);
assertThat(task.getStatus()).as("通道被占是可自愈的,不许判死").isEqualTo("RUNNING");
assertThat(task.getFinishedAt()).isNull();
assertThat(task.getErrorMessage()).isNull();
// 走上来的仍是普通进度落库那一格(同一个实体、RUNNING),不是收口器那笔终态写
verify(fileTaskMapper).updateById(task);
}
// ===== 夹具 =====
private FileTaskEntity task;
private FileResultEntity result;
private void calledBackWith(String brandQueryFailedReason) {
task = new FileTaskEntity();
task.setId(TASK_ID);
task.setUserId(7L);
task.setModuleType(CollectDataService.MODULE_TYPE);
task.setStatus("RUNNING");
task.setResultJson("{\"totalRows\":1,\"receivedRows\":0}");
task.setCreatedAt(LocalDateTime.now());
task.setUpdatedAt(LocalDateTime.now());
result = new FileResultEntity();
result.setId(RESULT_ID);
result.setTaskId(TASK_ID);
result.setUserId(7L);
result.setModuleType(CollectDataService.MODULE_TYPE);
CollectDataResultRowVo row = new CollectDataResultRowVo();
row.setAsin("B0A0000001");
row.setBrand("NIKE");
when(brandBatchFilter.filter(any(), any())).thenReturn(
new CollectDataBrandBatchFilter.BrandBatchOutcome(
List.of(), List.of(row), List.of(), brandQueryFailedReason));
CollectDataSubmitRowDto submitted = new CollectDataSubmitRowDto();
submitted.setAsin("B0A0000001");
submitted.setBrand("NIKE");
CollectDataSubmitResultRequest request = new CollectDataSubmitResultRequest();
request.setItems(List.of(submitted));
request.setChunkIndex(1);
request.setChunkTotal(1);
CollectDataSubmitResultVo vo = service.submitResult(TASK_ID, request);
// 回执里的状态是采集端决定「还要不要下一批」的唯一信号,必须是判死后的那条
assertThat(vo.getTaskId()).isEqualTo(TASK_ID);
verify(collectDataBrandRecheckService).enqueue(any(FileTaskEntity.class), any());
verify(lockHandle).close();
}
}
@@ -11,9 +11,11 @@ import com.nanri.aiimage.modules.task.mapper.FileTaskMapper;
import com.nanri.aiimage.modules.task.model.entity.FileResultEntity;
import com.nanri.aiimage.modules.task.model.entity.FileTaskEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskFileJobEntity;
import com.nanri.aiimage.common.retry.CredentialFatalClassifier;
import com.nanri.aiimage.modules.task.service.TaskDistributedLockService;
import com.nanri.aiimage.modules.task.service.TaskFileJobService;
import com.nanri.aiimage.modules.task.service.TaskResultPayloadService;
import com.nanri.aiimage.modules.usersecret.service.UserApiSecretCheckService;
import com.nanri.aiimage.modules.ziniao.service.ZiniaoShopSwitchService;
import org.junit.jupiter.api.Test;
import org.junit.jupiter.api.extension.ExtendWith;
@@ -34,6 +36,7 @@ import static org.mockito.ArgumentMatchers.any;
import static org.mockito.ArgumentMatchers.anyLong;
import static org.mockito.ArgumentMatchers.anyString;
import static org.mockito.ArgumentMatchers.eq;
import static org.mockito.Mockito.lenient;
import static org.mockito.Mockito.mock;
import static org.mockito.Mockito.never;
import static org.mockito.Mockito.times;
@@ -352,6 +355,102 @@ class PriceTrackTaskServiceTest {
assertTrue(task.getErrorMessage() != null && task.getErrorMessage().contains("未跑完"));
}
/**
* 凭据不可自愈(用户没配代理 / 代理套餐到期 / LLM 欠费)⇒ 整单立刻判死,不再等剩下的店铺。
*
* <p>2026-11-12 用户口径「没余额要退成失败,且直接中断任务」。判宽了会把一次抖动变成整单失败,
* 判窄了客户端会继续为每一家店铺买出口 IP——所以这条与下一条 {@code channelBusy...} 必须成对存在。
*/
@Test
void fatalCredentialShopErrorClosesTheWholeTaskInsteadOfWaitingForTheRestOfTheShops() throws Exception {
long taskId = 28501L;
String shopName = "林芳";
String error = "用户未配置代理";
FileTaskEntity task = runningTask(taskId);
FileResultEntity result = pendingResult(taskId, shopName);
PriceTrackSubmitResultRequest.ShopResult shopResult = shopResult(
shopName, Map.of("UK", List.of(asinRow("B0DWX8WJF8", "改价成功", "改价成功"))));
shopResult.setError(error);
PriceTrackSubmitResultRequest request = new PriceTrackSubmitResultRequest();
request.setShops(List.of(shopResult));
TaskFileJobEntity pendingJob = new TaskFileJobEntity();
pendingJob.setTaskId(taskId);
pendingJob.setResultId(result.getId());
pendingJob.setScopeKey(shopName);
pendingJob.setStatus("PENDING");
TaskDistributedLockService.LockHandle lock = mock(TaskDistributedLockService.LockHandle.class);
when(taskDistributedLockService.acquire("PRICE_TRACK", taskId)).thenReturn(lock);
when(priceTrackTaskCacheService.getTaskCacheBatch(List.of(taskId))).thenReturn(Map.of(taskId, task));
when(fileResultMapper.selectList(any())).thenReturn(List.of(result));
when(ziniaoShopSwitchService.normalizeShopName(shopName)).thenReturn(shopName);
when(excelAssemblyService.normalizeCountriesMap(any())).thenAnswer(invocation -> invocation.getArgument(0));
lenient().when(excelAssemblyService.countRows(any())).thenReturn(1);
// 判死分支在行账/文件组装之前返回,这两支只在本用例的反向半边被走到
lenient().when(taskFileJobService.findAssembleJobsByResultIds(anyString(), any()))
.thenReturn(Map.of(result.getId(), pendingJob));
lenient().when(objectMapper.writeValueAsString(any())).thenReturn("[]");
service.submitResult(taskId, request);
assertEquals("FAILED", task.getStatus(), "凭据不可自愈必须整单判死,不许停在 RUNNING 等别的店铺");
assertNotNull(task.getFinishedAt());
assertEquals(0, task.getSuccessFileCount());
assertEquals(1, task.getFailedFileCount());
assertTrue(task.getErrorMessage().contains(CredentialFatalClassifier.PROXY_TERMINAL_GUIDANCE),
"实际: " + task.getErrorMessage());
verify(priceTrackTaskCacheService).deleteTaskCache(taskId);
verify(priceTrackLoopRunService).syncLoopRunAfterChildTerminal(taskId);
verify(lock).close();
}
/**
* 反向半边:通道被占(青果 {@code NO_AVAILABLE_CHANNEL} 那一族)是可自愈的供应商状态,
* 句子本身含「套餐」字样,绝不能因此把整单判死(铁律 25② 的边界)。
*/
@Test
void channelBusyErrorKeepsTaskRunningBecauseItHealsByItself() throws Exception {
long taskId = 28502L;
String shopName = "林芳";
String error = UserApiSecretCheckService.CHANNEL_BUSY_MESSAGE;
FileTaskEntity task = runningTask(taskId);
FileResultEntity result = pendingResult(taskId, shopName);
PriceTrackSubmitResultRequest.ShopResult shopResult = shopResult(
shopName, Map.of("UK", List.of(asinRow("B0DWX8WJF8", "改价成功", "改价成功"))));
shopResult.setError(error);
PriceTrackSubmitResultRequest request = new PriceTrackSubmitResultRequest();
request.setShops(List.of(shopResult));
TaskFileJobEntity pendingJob = new TaskFileJobEntity();
pendingJob.setTaskId(taskId);
pendingJob.setResultId(result.getId());
pendingJob.setScopeKey(shopName);
pendingJob.setStatus("PENDING");
TaskDistributedLockService.LockHandle lock = mock(TaskDistributedLockService.LockHandle.class);
when(taskDistributedLockService.acquire("PRICE_TRACK", taskId)).thenReturn(lock);
when(priceTrackTaskCacheService.getTaskCacheBatch(List.of(taskId))).thenReturn(Map.of(taskId, task));
when(fileResultMapper.selectList(any())).thenReturn(List.of(result));
when(ziniaoShopSwitchService.normalizeShopName(shopName)).thenReturn(shopName);
when(excelAssemblyService.normalizeCountriesMap(any())).thenAnswer(invocation -> invocation.getArgument(0));
when(excelAssemblyService.countRows(any())).thenReturn(1);
when(taskFileJobService.findAssembleJobsByResultIds(anyString(), any()))
.thenReturn(Map.of(result.getId(), pendingJob));
when(objectMapper.writeValueAsString(any())).thenReturn("[]");
service.submitResult(taskId, request);
assertEquals("RUNNING", task.getStatus(), "通道被占是可自愈的,不许判死");
assertNull(task.getFinishedAt());
verify(priceTrackTaskCacheService, never()).deleteTaskCache(taskId);
verify(lock).close();
}
private FileTaskEntity runningTask(long taskId) {
FileTaskEntity task = new FileTaskEntity();
task.setId(taskId);
@@ -50,6 +50,7 @@ import java.util.concurrent.atomic.AtomicInteger;
import java.util.concurrent.atomic.AtomicLong;
import static org.junit.jupiter.api.Assertions.assertEquals;
import static org.junit.jupiter.api.Assertions.assertNull;
import static org.junit.jupiter.api.Assertions.assertThrows;
import static org.junit.jupiter.api.Assertions.assertTrue;
import static org.mockito.ArgumentMatchers.any;
@@ -386,6 +387,36 @@ class ShopDataCrawlProgressQueryTest {
verify(taskDistributedLockService, never()).acquire(anyString(), anyLong());
}
/**
* 任务级失败原因只给已 FAILED 的任务带,且截断 300 字。
*
* <p>为什么进度批量必须有这一格:整单判死(未配置代理/套餐到期/LLM 欠费)只写
* `biz_file_task.error_message`,每个店铺行本身没被标失败,行级 `error` 是空的。
* 用户端在终态那刻靠这一格弹「去哪改」,缺了就是一句原因都没有的静默失败。
*/
@Test
void progressBatchCarriesTheTaskLevelFailureReasonOnlyWhenTheTaskFailed() {
seedHistoryData(2);
String longReason = "任务已终止:代理 IP 套餐已到期或余额不足,请到密钥设置里充值或更换提取链接。".repeat(20);
FileTaskEntity failed = taskStore.get(8101L);
failed.setStatus("FAILED");
failed.setErrorMessage(longReason);
FileTaskEntity running = taskStore.get(8102L);
running.setStatus("RUNNING");
running.setErrorMessage("运行中不该把这句话带出去");
ShopDataCrawlTaskBatchVo batch = service.getTaskProgressBatch(List.of(8101L, 8102L));
Map<Long, ShopDataCrawlResultItemVo> byResultId = new LinkedHashMap<>();
for (ShopDataCrawlResultItemVo item : batch.getItems()) {
byResultId.put(item.getResultId(), item);
}
String failedReason = byResultId.get(8101L).getTaskErrorMessage();
assertEquals(300, failedReason.length(), "截断到 300 字:够说清去哪改,又不撑大轮询响应体");
assertTrue(longReason.startsWith(failedReason), "截断是前缀,不是重写");
assertNull(byResultId.get(8102L).getTaskErrorMessage(), "没落终态的任务不带任务级失败原因");
}
// ---- helpers ----
/** 仿真 fileResultMapper.selectList:按 wrapper 条件查询 task_result 内存表,可注入底层失败。 */
@@ -20,12 +20,14 @@ import com.nanri.aiimage.modules.task.model.entity.FileResultEntity;
import com.nanri.aiimage.modules.task.model.entity.FileTaskEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskChunkEntity;
import com.nanri.aiimage.modules.task.model.entity.TaskScopeStateEntity;
import com.nanri.aiimage.common.retry.CredentialFatalClassifier;
import com.nanri.aiimage.modules.task.service.TaskDistributedLockService;
import com.nanri.aiimage.modules.task.service.TaskFileJobService;
import com.nanri.aiimage.modules.task.service.TaskProgressSnapshotService;
import com.nanri.aiimage.modules.task.service.TaskProgressLightAssembler;
import com.nanri.aiimage.modules.task.service.TaskResultItemService;
import com.nanri.aiimage.modules.task.service.TransientPayloadStorageService;
import com.nanri.aiimage.modules.usersecret.service.UserApiSecretCheckService;
import com.nanri.aiimage.modules.ziniao.service.ZiniaoShopSwitchService;
import org.apache.ibatis.builder.MapperBuilderAssistant;
import org.apache.ibatis.session.Configuration;
@@ -406,6 +408,52 @@ class ShopDataCrawlScopeMergeTest {
verify(taskScopeStateMapper, times(2)).updateById(any(TaskScopeStateEntity.class));
}
/**
* 店铺回传带「不可自愈的凭据故障」⇒ 整单立刻判死,不再等其余店铺。
*
* <p>2026-11-12 用户口径「没余额要退成失败,且直接中断任务」:剩下的每一家都会在同一条死路上
* 各跑一遍,白等还白烧出口。判据共用 {@code CredentialFatalClassifier}。
*/
@Test
void fatalCredentialShopErrorClosesTaskInsteadOfWaitingForTheRestOfTheShops() {
givenRunningTask(1301L, 2301L);
ShopDataCrawlShopPayloadDto payload = legacyChunk(true, "DE", row("2026-07-25", "B001"));
payload.setError("用户未配置代理");
when(taskCacheService.getAllShopMergedPayload(task.getId())).thenReturn(Map.of(SHOP_NAME, payload));
boolean finalized = service.tryFinalizeTask(task.getId(), true);
assertTrue(finalized);
assertEquals("FAILED", task.getStatus());
assertEquals(0, task.getSuccessFileCount());
assertEquals(1, task.getFailedFileCount());
assertTrue(task.getErrorMessage().contains(CredentialFatalClassifier.PROXY_TERMINAL_GUIDANCE),
"实际: " + task.getErrorMessage());
assertTrue(task.getFinishedAt() != null, "终态必须带 finished_at");
assertEquals(-1, result.getSuccess(), "凭据故障的行不许被洗成成功");
}
/**
* 反向半边:通道被占是可自愈的供应商状态(句子本身含「套餐」字样),不许判死整单。
*/
@Test
void channelBusyShopErrorKeepsTaskRunningAndMarksOnlyThatShopFailed() {
givenRunningTask(1302L, 2302L);
ShopDataCrawlShopPayloadDto payload = legacyChunk(true, "DE", row("2026-07-25", "B001"));
payload.setError(UserApiSecretCheckService.CHANNEL_BUSY_MESSAGE);
when(taskCacheService.getAllShopMergedPayload(task.getId())).thenReturn(Map.of(SHOP_NAME, payload));
service.tryFinalizeTask(task.getId(), true);
assertEquals("FAILED", task.getStatus(), "只有这一家店铺失败,任务本身该照旧收口成失败");
assertTrue(task.getErrorMessage().contains("青果") || task.getErrorMessage().contains("空闲通道"),
"原因原样进任务文案: " + task.getErrorMessage());
// 关键反向判据:不是被「凭据不可自愈」那条早退路径判死的(该路径会写固定指引句)
assertTrue(!task.getErrorMessage().contains(CredentialFatalClassifier.PROXY_TERMINAL_GUIDANCE),
"通道被占被误判成凭据不可自愈: " + task.getErrorMessage());
assertEquals(0, task.getSuccessFileCount());
}
private void configureTransientPayloadStorage() {
lenient().when(transientPayloadStorageService.isSharedWriteEnabled()).thenReturn(true);
lenient().when(transientPayloadStorageService.storeChunkPayloadVersioned(
@@ -113,6 +113,32 @@ class SimilarAsinResultTextSupportTest {
assertThat(detail).endsWith("…");
}
/**
* 凭据不可自愈的行,图片采到了也不许算「成功」:它一次都没进 LLM。
*
* <p>2026-11-12 用户口径「没余额要退成失败,且直接中断任务」。这条与
* {@link SimilarAsinResultTextSupport#resolveResultStatus} 的图片优先判据相反,顺序不能反。
*/
@Test
void credentialFatalRowIsFailedEvenWhenImagesWereCollected() {
SimilarAsinResultRowDto quota = row("LLM 服务余额欠费;lastErr={\"code\":\"insufficient_user_quota\"}", "");
quota.setMainUrl("https://img.example.com/1.jpg");
SimilarAsinResultRowDto noProxy = row("", "用户未配置代理");
noProxy.setPuzzleImg1("https://img.example.com/2.jpg");
assertThat(SimilarAsinResultTextSupport.resolveResultStatus(quota))
.as("LLM 欠费")
.isEqualTo("失败");
assertThat(SimilarAsinResultTextSupport.resolveResultStatus(noProxy))
.as("没配代理")
.isEqualTo("失败");
// 反向半边:可自愈的失败照旧按图片算成功(判宽了就是拿整单给抖动陪葬)
SimilarAsinResultRowDto timeout = row("商品页抓取超时", "");
timeout.setMainUrl("https://img.example.com/3.jpg");
assertThat(SimilarAsinResultTextSupport.resolveResultStatus(timeout)).isEqualTo("成功");
}
private static SimilarAsinResultRowDto row(String error, String reason) {
SimilarAsinResultRowDto row = new SimilarAsinResultRowDto();
row.setError(error);
@@ -61,10 +61,14 @@ class TaskFailureCategoryGuardrailTest {
"WithdrawTaskService.java",
"PatrolDeleteTaskService.java",
"ShopDataCrawlTaskService.java",
"DeleteBrandRunService.java");
"DeleteBrandRunService.java",
// 2026-11-12:外观专利/相似ASIN 原来各自内联的那一处「写文案+派生写列」搬进了共用收口器
// (凭据不可自愈 ⇒ 整单终态,铁律 31)。它现在是这一族写点的唯一出口,不登记=最常走的那一处免检;
// 名单上下限随之各减 2、加 1。
"CredentialFatalTaskCloser.java");
/** 名单内在册写点数(第二批 15 +第三批 32:风险 8/店铺匹配 5/查ASIN 3/提现 3/巡删 3/店铺采集 4/巡删品牌 6)。 */
private static final int ENTITY_FACE_MIN_WRITE_SITES = 47;
/** 名单内在册写点数(第二批 15 +第三批 32:风险 8/店铺匹配 5/查ASIN 3/提现 3/巡删 3/店铺采集 4/巡删品牌 6;2026-11-12 收口器 −2+1=46)。 */
private static final int ENTITY_FACE_MIN_WRITE_SITES = 46;
/**
* {@code .updateById(} 写法总量的在册棘轮(B82-01 收口时的换算值:改前 173,本笔把 12 处
@@ -77,8 +81,12 @@ class TaskFailureCategoryGuardrailTest {
* {@code updateById},都值得先审一遍「实体里有没有 ALWAYS 字段、传进去的是不是新鲜实体」。
* 部分字段落库的正本形状是 {@code update(null, wrapper)} 显式 {@code .set}
* ({@code CollectDataService} 结果文件组装的条件更新)。
*
* <p>2026-11-12:外观专利/相似ASIN 两处实体式落库搬进 {@code CredentialFatalTaskCloser},
* 总量 160 − 2 + 1(收口器自己那一处,实体取自 {@code selectById} 的新鲜行,不涉 ALWAYS 抹列)= 159。
* 这是"在册写点被挪走"那一支,不是新增写法。
*/
private static final int REGISTERED_UPDATE_BY_ID_SITES = 160;
private static final int REGISTERED_UPDATE_BY_ID_SITES = 159;
@Test
void 任务失败文案写点必须同笔写分类列() {
@@ -46,9 +46,12 @@ class TaskRetryEligibilityMarkersSnapshotTest {
@Test
void 六组markers逐字快照() {
assertThat(markers("BALANCE_MARKERS")).containsExactly(
"余额不足", "欠费", "套餐不存在", "套餐已过期", "套餐过期", "未开通",
"insufficient_user_quota", "insufficient_quota", "quota exceeded",
"预扣费额度");
"余额不足", "欠费", "套餐不存在", "套餐已过期", "套餐过期", "套餐到期", "未开通",
"insufficient_user_quota", "insufficient_quota", "insufficient_funds",
"wallet balance insufficient", "quota exceeded",
"预扣费额度",
// 2026-11-12:没配代理也是「不修外部条件重跑必然同结果」,不登记就会被自动重试反复复位
"未配置代理", "代理地址为空", "代理链接为空");
assertThat(markers("KEY_MARKERS")).containsExactly(
"密钥无效", "密钥失效", "无效的密钥", "密钥不可用",
"invalid api key", "invalid_api_key", "api key 无效", "apikey 无效");
+2
View File
@@ -4,6 +4,7 @@
<ExpiryNotice />
<ProxyBalanceAlert />
<CostGuardAlert />
<CredentialFatalAlert />
<ForceUpdateGate />
</el-config-provider>
</template>
@@ -20,6 +21,7 @@ import ExpiryNotice from '@/shared/components/ExpiryNotice.vue'
import ForceUpdateGate from '@/shared/components/ForceUpdateGate.vue'
import ProxyBalanceAlert from '@/shared/components/ProxyBalanceAlert.vue'
import CostGuardAlert from '@/shared/components/CostGuardAlert.vue'
import CredentialFatalAlert from '@/shared/components/CredentialFatalAlert.vue'
import { disposeGlobalErrorGuard } from '@/shared/utils/app-error'
import { uninstallUserTokenSync } from '@/shared/auth/user-token-sync'
import { disposeDownloadProgressListener } from '@/shared/utils/download-progress'
@@ -175,6 +175,7 @@ import {
type CollectDataTaskDetailVo,
} from '@/shared/api/java-modules'
import { getPollingProgressBatch } from '@/shared/api/task-progress-polling.ts'
import { reportCredentialFatalAfterFetch } from '@/shared/stores/credential-fatal-alert'
import { formatDateTime } from '@/shared/utils/datetime'
import { taskStatusClass, taskStatusText } from '@/shared/utils/task-status-text'
import { terminalKeywordShortfall } from '@/shared/utils/task-progress-readout'
@@ -320,7 +321,12 @@ const progressLoop = useTaskProgressLoop<CollectDataTaskDetailVo>({
}
patchCurrentItem(taskId, detail.items?.[0], detail.task?.status)
},
onTerminal: async (taskId) => {
onTerminal: async (taskId, detail, status) => {
// 凭据不可自愈时后端已判死整单:弹一次说清去改哪(轻量轮询不带文案 ⇒ 失败终态补一次重型 batch)
if (status === 'FAILED') {
const direct = detail?.task?.errorMessage || detail?.items?.[0]?.error || ''
void reportCredentialFatalAfterFetch(taskId, async () => direct || (await getCollectDataTaskProgressBatch([taskId])).items?.[0]?.task?.errorMessage || '')
}
if (taskSnapshots.value[taskId]) {
const next = { ...taskSnapshots.value }
delete next[taskId]
@@ -279,6 +279,7 @@ import {
type PriceTrackTaskDetailVo,
} from '@/shared/api/java-modules'
import { getPollingProgressBatch } from '@/shared/api/task-progress-polling.ts'
import { reportCredentialFatalAfterFetch } from '@/shared/stores/credential-fatal-alert'
import { liveProgress } from '@/shared/api/task-progress-live.ts'
import { formatDateTime } from '@/shared/utils/datetime'
import { taskStatusClass, taskStatusText } from '@/shared/utils/task-status-text'
@@ -1507,6 +1508,11 @@ async function refreshTaskBatch() {
if (isTerminalTaskStatus(status)) {
console.log(`[price-track] 任务 ${taskId} 已到终态 ${status},移出轮询集合并刷新列表`)
removePollingTask(taskId)
// 凭据不可自愈时后端已判死整单:弹一次说清去改哪(轻量轮询不带文案 ⇒ 失败终态补一次重型 batch)
if (status === 'FAILED') {
const direct = merged.task?.errorMessage || merged.items?.[0]?.error || ''
void reportCredentialFatalAfterFetch(taskId, async () => direct || (await getPriceTrackTaskProgressBatch([taskId])).items?.[0]?.task?.errorMessage || '')
}
settled = true
}
}
@@ -168,6 +168,7 @@ import { runBatchDelete } from '@/shared/utils/batch-delete'
import { useTablePaging } from '@/shared/composables/useTablePaging.ts'
import { getModuleProgressLight } from '@/shared/api/progress-light.ts'
import { createRowsVersionTracker } from '@/shared/api/task-progress-polling.ts'
import { reportCredentialFatal } from '@/shared/stores/credential-fatal-alert'
import { liveProgress } from '@/shared/api/task-progress-live.ts'
import { confirmTaskDeletion } from '@/shared/task-delete-confirm'
@@ -410,7 +411,15 @@ function mergeProgress(detail: ShopDataCrawlTaskDetailVo) {
if (!taskId) return
taskSnapshots.value = { ...taskSnapshots.value, [taskId]: detail }
triggerRef(taskSnapshots)
const incoming = (detail.items || []).map((item) => ({ ...item, taskId: item.taskId || taskId, taskStatus: item.taskStatus || detail.task?.status, error: item.error || detail.task?.errorMessage }))
const incoming = (detail.items || []).map((item) => ({
...item,
taskId: item.taskId || taskId,
taskStatus: item.taskStatus || detail.task?.status,
error: item.error || detail.task?.errorMessage,
// 整单判死(凭据不可自愈)只写任务级原因,每个店铺行本身没被标失败:
// 单独占一格,不冒充「这一家店铺抓取失败」
taskErrorMessage: item.taskErrorMessage || detail.task?.errorMessage,
}))
historyItems.value = mergeHistoryItems(historyItems.value, incoming, {
keyOf: historyKey,
}).items
@@ -439,7 +448,7 @@ async function refreshTaskProgress(taskId: number) {
if (isTaskDetail(row)) {
mergeProgress(row)
} else {
mergeProgress({ task: { id: row.taskId, status: row.taskStatus }, items: [row] })
mergeProgress({ task: { id: row.taskId, status: row.taskStatus, errorMessage: row.taskErrorMessage }, items: [row] })
}
}
return !(batch.missingTaskIds || []).includes(taskId)
@@ -465,7 +474,16 @@ async function waitForTerminal(taskId: number) {
const exists = await refreshTaskProgress(taskId)
if (!exists) return 'FAILED'
const status = activeTaskStatus(taskId)
if (isTerminal(status)) return status
if (isTerminal(status)) {
// 凭据不可自愈(代理套餐/链接不可用、LLM 欠费)时后端已判死整单:弹一次说清去改哪。
// 这一页每轮都会把任务级 errorMessage 落到快照与历史行(mergeProgress),不必再补请求。
if (status === 'FAILED') {
const snapshot = taskSnapshots.value[taskId]?.task
const row = historyItems.value.find((item) => item.taskId === taskId)
reportCredentialFatal(taskId, snapshot?.errorMessage || row?.taskErrorMessage || row?.error)
}
return status
}
} catch (error) {
if (!isTransientError(error)) throw error
queueStatus.value = `任务 ${taskId} 执行中,等待服务恢复...`
@@ -120,6 +120,13 @@ export interface ShopDataCrawlHistoryItem extends ShopDataCrawlShopItem {
taskStatus?: string;
success?: boolean;
error?: string;
/**
* 任务级失败原因(只在任务落 FAILED 时由服务端带,截断 300 字)。
*
* 整单判死(未配置代理/套餐到期/LLM 欠费)不会把每个店铺行标失败,
* 所以行级 `error` 是空的——弹窗要读这一格,缺了它就是一句原因都没有的静默失败。
*/
taskErrorMessage?: string;
fileReady?: boolean;
fileStatus?: string;
downloadUrl?: string;
@@ -0,0 +1,71 @@
<script setup lang="ts">
/**
* 「凭据不可自愈 ⇒ 任务已中断」的一次性弹窗(2026-11-12 用户口径:
* 「没余额要退成失败,且直接中断任务,并弹窗提示」)。
*
* 挂在根组件里与 CostGuardAlert/ProxyBalanceAlert 并列:判据与去重在
* `shared/utils/credential-fatal-notice.ts`(纯函数)与 `shared/stores/credential-fatal-alert.ts`
* (框架无关队列),本组件只负责「把队首那条弹给用户,关掉再取下一条」。
*
* 不弹常驻横幅:这类故障的处置是用户去改配置,不是盯着屏幕;弹一次说清「去哪改」即可。
*/
import { onBeforeUnmount, onMounted } from 'vue'
import { ElMessageBox } from 'element-plus'
import {
credentialFatalQueueLength,
subscribeCredentialFatal,
takeCredentialFatal,
} from '@/shared/stores/credential-fatal-alert'
let disposed = false
let showing = false
let unsubscribe: (() => void) | null = null
async function drain(): Promise<void> {
if (disposed || showing) return
showing = true
try {
for (;;) {
const queued = takeCredentialFatal()
if (!queued || disposed) return
// 关闭/ESC 也是正常路径(用户已经看到了):用 .catch 收掉这个「正常取消」,
// 不写成空 catch 块——那正是静默 catch 棘轮点名要减的形状
await ElMessageBox.alert(queued.notice.body, queued.notice.title, {
type: 'error',
confirmButtonText: '知道了',
closeOnClickModal: false,
closeOnPressEscape: true,
// 文案里有换行(一句结论 + 一段动作),不加这条 Element Plus 会压成一行
customStyle: { whiteSpace: 'pre-line' },
}).catch(() => undefined)
if (disposed) return
if (credentialFatalQueueLength() === 0) return
}
} finally {
showing = false
}
}
onMounted(() => {
unsubscribe = subscribeCredentialFatal(() => void drain())
// 挂载前就入队的那条(例如页面先收到终态、弹窗组件后挂)也要弹
void drain()
})
onBeforeUnmount(() => {
disposed = true
unsubscribe?.()
unsubscribe = null
})
</script>
<template>
<!-- 纯行为组件:内容全部走 ElMessageBox,模板留空 -->
<span class="credential-fatal-alert" aria-hidden="true"></span>
</template>
<style scoped>
.credential-fatal-alert {
display: none;
}
</style>
@@ -9,6 +9,7 @@ import { isTerminalTaskStatus } from '../utils/task-terminal.ts'
import { resolveTaskDeleteTarget } from '../utils/task-delete-target.ts'
import { isRecordMissingError } from '../utils/task-queue-state.ts'
import { confirmTaskDeletion } from '../task-delete-confirm.ts'
import { reportCredentialFatal } from '../stores/credential-fatal-alert.ts'
import type { TaskItemView } from '../components/tasks/types'
/**
@@ -53,7 +54,11 @@ export interface LiveTaskHistoryItem {
/** 批量进度响应的公共形状 */
export interface LiveTaskProgressDetail<TItem extends LiveTaskHistoryItem> {
task?: { id?: number; status?: string }
/**
* 任务摘要。`errorMessage` 与 `error` 都取:两个模块的 summary 都带任务级 errorMessage,
* 而行级 error 在「整批都没有可导出字段」时才是唯一的那句话(凭据判死两处都会写)。
*/
task?: { id?: number; status?: string; errorMessage?: string; error?: string }
items?: TItem[]
}
@@ -441,6 +446,9 @@ export function useLiveTaskBoard<T extends LiveTaskHistoryItem>(
mergeHistoryItem(item)
}
if (isTerminalTaskStatus(task.status)) {
// 凭据不可自愈(欠费/套餐到期/未配置代理)时后端已把任务判死:这里弹一次,
// 说清去哪一处改。判据与去重在各自纯函数里,非致命文案不会弹(2026-11-12 用户口径)。
reportCredentialFatal(task.id, item?.error || task.errorMessage || task.error)
removePollingTask(task.id)
shouldRefreshDashboard = true
if (options.addPendingAfterFinalStatus(task, item)) addPendingFileTask(task.id)
@@ -0,0 +1,111 @@
/**
* 「凭据不可自愈 ⇒ 任务已中断」的全局公告队列(**零框架依赖**,`node --test` 可直测)。
*
* 为什么是队列而不是每页各弹一次:五个特性各自轮询,同一个任务在切换页面/重进时会被反复
* 报到终态(`useLiveTaskBoard` 与各 Tab 都在终态分支里调)。一次故障弹五个窗口是噪声,
* 用户真正需要的是「一条说清去改哪」。
*
* 去重口径按 `(taskId, kind)`:同一任务同一档只弹一次(重进页面、重复轮询都吃掉),
* 但用户重试后又因为**另一档**失败时必须再弹——那是要去改另一处的动作。
*
* 队列不落 localStorage:公告是「这一次会话里的这次故障」,刷新页面后任务本身已是终态,
* 历史列表里的错误文案一直在,不需要再弹。
*/
import {
credentialFatalNotice,
type CredentialFatalKind,
type CredentialFatalNotice,
} from '../utils/credential-fatal-notice.ts'
export interface QueuedCredentialFatalNotice {
taskId: number
notice: CredentialFatalNotice
}
const pending: QueuedCredentialFatalNotice[] = []
const reported = new Set<string>()
const listeners = new Set<() => void>()
/** 一次会话里见过的任务数上界:长驻客户端不刷新时不让这个集合无限长。 */
const MAX_REMEMBERED = 500
function rememberKey(taskId: number, kind: CredentialFatalKind): string {
return `${taskId}:${kind}`
}
function notify(): void {
// 订阅方必须同步、不可抛(本仓唯一订阅者是 `CredentialFatalAlert.vue` 的
// `() => void drain()`):这里刻意不套 try/catch —— 吞掉订阅方异常正是棘轮点名的
// 「静默 catch」,而弹窗这件事漏掉一次就是用户看不到故障原因
listeners.forEach((listener) => listener())
}
/**
* 报告一条任务终态文案:命中「不可自愈」才入队。
*
* @returns true=本次真的入队(交付弹窗),false=不致命或这一任务这一档已经报过
*/
export function reportCredentialFatal(taskId: number, message: string | null | undefined): boolean {
if (!Number.isFinite(taskId) || taskId <= 0) return false
const notice = credentialFatalNotice(message)
if (!notice) return false
const key = rememberKey(taskId, notice.kind)
if (reported.has(key)) return false
reported.add(key)
if (reported.size > MAX_REMEMBERED) {
// Set 保留插入序:先扔最老的那一批,够用且无额外记账
const overflow = reported.size - MAX_REMEMBERED
let dropped = 0
for (const stale of reported) {
if (dropped >= overflow) break
reported.delete(stale)
dropped += 1
}
}
pending.push({ taskId, notice })
notify()
return true
}
/**
* 轻量进度里没有错误文案(白名单刻意瘦)时用:先按 `(taskId, kind)` 判重避免白发请求,
* 再取一次重文案补报。取不到就当没发生——网络抖动不该弹窗。
*/
export async function reportCredentialFatalAfterFetch(
taskId: number,
fetcher: () => Promise<string | null | undefined>,
): Promise<boolean> {
if (!Number.isFinite(taskId) || taskId <= 0) return false
const known = Array.from(reported).some((key) => key.startsWith(`${taskId}:`))
// 已报过一次就不再多打一次请求;但同一任务换档失败的情形只能靠取文案才发现,
// 因此只在**完全没有**该任务记录时短路
if (known) return false
// 取不到文案就当没发生(网络抖动不该弹窗):用 .catch 归一到「没有」,
// 不写成空 catch 块——静默 catch 棘轮连这一处也数
const message = await fetcher().catch(() => null)
return reportCredentialFatal(taskId, message)
}
/** 取队首(弹窗组件一次只展示一条)。 */
export function takeCredentialFatal(): QueuedCredentialFatalNotice | null {
return pending.shift() ?? null
}
/** 队列长度(弹窗组件据此决定还要不要继续取)。 */
export function credentialFatalQueueLength(): number {
return pending.length
}
export function subscribeCredentialFatal(listener: () => void): () => void {
listeners.add(listener)
return () => {
listeners.delete(listener)
}
}
/** 仅测试用:清空队列与去重记忆。 */
export function __resetCredentialFatalAlertForTest(): void {
pending.length = 0
reported.clear()
listeners.clear()
}
@@ -0,0 +1,170 @@
/**
* 「凭据不可自愈 ⇒ 任务已中断」的界面判据(纯函数,零 vue、零 `@/` 别名)。
*
* 单独成文件与本仓 `llm-balance-text.ts` / `proxy-balance-alert.ts` 同一理由:判据要能被
* `node --test` 直接钉住。这两档的错法都是「安静地不弹」——欠费时用户以为任务还在跑,
* 实际上是客户端在按次付费买出口 IP、每一行都必然失败。
*
* **与后端 `CredentialFatalClassifier` 是同一套口径的两份实现**(后端判终态、前端判弹窗)。
* 两边必须同形:新增/删除任一档位要两边一起改,否则会出现「任务已判死但界面不弹」
* (用户只看到一行消失)或「界面弹了但其实还在跑」(拿抖动陪葬)的错位。
*/
export type CredentialFatalKind = 'llm_balance' | 'proxy' | 'key_invalid'
export interface CredentialFatalNotice {
kind: CredentialFatalKind
title: string
body: string
}
/** 后端写进终态文案里的那两句指引(`CredentialFatalClassifier.guidance`)里独有的字样。 */
const TERMINAL_SENTENCE = '任务已终止'
const PROXY_TERMINAL_HINT = '代理 IP'
/**
* 可自愈的供应商状态:先判这一档,命中就**不弹**。
*
* 顺序不能反:青果「没有可用的空闲通道」的原文里带着「套餐到期」字样(它在解释为什么拿不到
* 通道),先判欠费就会把一次约 3 分钟就自愈的占用报成"去充值"。后端同一条顺序(铁律 25②)。
*/
const SELF_HEALING_MARKERS = [
'no_available_channel',
'没有可用的空闲通道',
'channel_busy',
'通道被占',
'通道已满',
'冷却',
'cooldown',
'稍后重试',
'timeout',
'timed out',
'超时',
'too many requests',
'rate limited',
'限流',
'bad gateway',
'service unavailable',
'gateway timeout',
'connection refused',
'连接被拒绝',
'不可达',
'unreachable',
'页面无效',
'风控墙',
'人机验证',
]
/** 代理侧「不修外部条件就永远失败」:没配置、套餐耗尽、提取链接/密钥不可用。 */
const PROXY_MARKERS = [
'未配置代理',
'代理地址为空',
'代理链接为空',
'代理',
'提取链接',
'提取分钟数',
'青果',
'qg.net',
'jikip',
'极客',
'套餐',
'invalid_key',
'unavailable_key',
'key_block',
'api_auth_deny',
'access_deny',
]
/** LLM 侧余额/额度类。 */
const LLM_BALANCE_MARKERS = [
'insufficient_user_quota',
'insufficient_quota',
'insufficient balance',
'insufficient_funds',
'wallet balance insufficient',
'quota exceeded',
'预扣费额度',
'余额欠费',
'欠费',
'额度不足',
'余额不足',
]
/** LLM 侧密钥类(与余额分开:用户要做的动作不同——换密钥而不是充值)。 */
const LLM_KEY_MARKERS = [
'密钥无效',
'密钥失效',
'密钥已失效',
'无效的密钥',
'密钥不可用',
'invalid api key',
'invalid_api_key',
'api key 无效',
'apikey 无效',
'unauthorized',
'http 401',
]
function hit(haystack: string, markers: readonly string[]): boolean {
return markers.some((marker) => haystack.includes(marker))
}
/**
* 文案 → 该不该弹、弹哪一档。不可自愈返回公告,其余(含查不出、可自愈、无凭据字样)返回 null。
*
* 判据刻意不认裸 `429/502/503/504`:上游欠费的原文里带账户号与余额(`用户[151502]`),
* 按数字子串判会把一次正常限流当成欠费弹出来。
*/
export function credentialFatalNotice(message: string | null | undefined): CredentialFatalNotice | null {
const raw = (message ?? '').trim()
if (!raw) return null
const text = raw.toLowerCase()
// 后端已经判死并写了指引句:这句话本身就足够定性,先认它(比逐词猜稳)
if (raw.includes(TERMINAL_SENTENCE)) {
return raw.includes(PROXY_TERMINAL_HINT) ? proxyNotice() : llmBalanceNotice()
}
if (hit(text, SELF_HEALING_MARKERS)) return null
const proxy = hit(text, PROXY_MARKERS)
const llmKey = hit(text, LLM_KEY_MARKERS)
const llmBalance = hit(text, LLM_BALANCE_MARKERS)
// 代理与 LLM 同时命中时取代理:代理拿不到就一次 LLM 都不会调,让用户先去充 LLM 是白跑一趟
if (proxy) return proxyNotice()
if (llmKey) return keyInvalidNotice()
if (llmBalance) return llmBalanceNotice()
return null
}
export function proxyNotice(): CredentialFatalNotice {
return {
kind: 'proxy',
title: '任务已中断:代理 IP 不可用',
body:
'任务已经停止,剩下的采集与检测不再继续——否则每一行都要再买一次出口 IP,而结果依然拿不到。\n\n'
+ '请到「密钥设置 → 代理设置」检查提取链接是否已填写、套餐是否到期、余额是否充足;'
+ '处理好之后重新发起任务。这不是你上传的表格有问题。',
}
}
export function llmBalanceNotice(): CredentialFatalNotice {
return {
kind: 'llm_balance',
title: '任务已中断:LLM 额度不足',
body:
'任务已经停止,后面的行不再送检测——额度不够时每一行都会失败,继续跑只会让你等更久。\n\n'
+ '请到「密钥设置 → LLM 密钥」充值或换一把可用的密钥,处理好之后重新发起任务。'
+ '这不是你上传的表格有问题。',
}
}
export function keyInvalidNotice(): CredentialFatalNotice {
return {
kind: 'key_invalid',
title: '任务已中断:密钥无效',
body:
'任务已经停止。上游拒绝了这把密钥(失效、被禁用或权限不足),继续跑不可能成功。\n\n'
+ '请到「密钥设置 → LLM 密钥」更新密钥后重新发起任务。这不是你上传的表格有问题。',
}
}
@@ -0,0 +1,80 @@
/**
* 弹窗队列的去重与取队首(2026-11-12「凭据不可自愈即中断并弹窗」的下半)。
*
* 靶子是「一次故障弹五次」与「重试后换了原因却不弹」这两头:同一任务同一档只弹一次,
* 但同一任务因**另一档**失败时必须再弹——那是要去改另一处。队列本身零框架依赖,
* 所以能在这里直接钉,不必起 vue 运行时。
*
* 跑法:`cd crawler-plugin/frontend-vue && npm test`
*/
import test from 'node:test'
import assert from 'node:assert/strict'
import {
__resetCredentialFatalAlertForTest,
credentialFatalQueueLength,
reportCredentialFatal,
reportCredentialFatalAfterFetch,
subscribeCredentialFatal,
takeCredentialFatal,
} from '../src/shared/stores/credential-fatal-alert.ts'
test('同一任务同一档只入队一次(重复轮询/重进页面都吃掉)', () => {
__resetCredentialFatalAlertForTest()
assert.equal(reportCredentialFatal(32901, '用户未配置代理'), true)
assert.equal(reportCredentialFatal(32901, '用户未配置代理'), false)
assert.equal(credentialFatalQueueLength(), 1)
})
test('同一任务换了一档要再弹(要去改的是另一处)', () => {
__resetCredentialFatalAlertForTest()
assert.equal(reportCredentialFatal(32901, '用户未配置代理'), true)
assert.equal(reportCredentialFatal(32901, 'insufficient_user_quota'), true)
assert.equal(credentialFatalQueueLength(), 2)
assert.equal(takeCredentialFatal()?.notice.kind, 'proxy')
assert.equal(takeCredentialFatal()?.notice.kind, 'llm_balance')
assert.equal(takeCredentialFatal(), null)
})
test('不致命的文案不入队', () => {
__resetCredentialFatalAlertForTest()
assert.equal(reportCredentialFatal(1, 'LLM http 502: Bad Gateway'), false)
assert.equal(reportCredentialFatal(1, ''), false)
assert.equal(reportCredentialFatal(0, '用户未配置代理'), false, '非法 taskId 不入队')
assert.equal(credentialFatalQueueLength(), 0)
})
test('订阅方在入队时被唤醒(弹窗组件靠它取队首)', () => {
__resetCredentialFatalAlertForTest()
let calls = 0
const off = subscribeCredentialFatal(() => { calls += 1 })
reportCredentialFatal(7, '用户未配置代理')
assert.equal(calls, 1)
off()
reportCredentialFatal(8, '用户未配置代理')
assert.equal(calls, 1, '退订后不再唤醒')
})
test('取不到文案就算没发生:拉取失败不弹窗', async () => {
__resetCredentialFatalAlertForTest()
const failed = await reportCredentialFatalAfterFetch(11, async () => { throw new Error('network') })
assert.equal(failed, false)
assert.equal(credentialFatalQueueLength(), 0)
const got = await reportCredentialFatalAfterFetch(12, async () => '代理套餐已过期')
assert.equal(got, true)
assert.equal(takeCredentialFatal()?.taskId, 12)
})
test('已经报过的任务不再为同一档白发一次请求', async () => {
__resetCredentialFatalAlertForTest()
await reportCredentialFatalAfterFetch(13, async () => '用户未配置代理')
let fetched = 0
const again = await reportCredentialFatalAfterFetch(13, async () => {
fetched += 1
return '用户未配置代理'
})
assert.equal(again, false)
assert.equal(fetched, 0, '已有记录就不该再打一次重型请求')
assert.equal(credentialFatalQueueLength(), 1)
})
@@ -0,0 +1,105 @@
/**
* 「凭据不可自愈 ⇒ 任务已中断」弹窗判据(2026-11-12 用户口径:
* 「没余额要退成失败,且直接中断任务,并弹窗提示」)。
*
* 靶子是**两头的错法**都安静:
* ① 判窄了 → 欠费时任务已判死但界面一句话不说,用户以为还在跑;
* ② 判宽了 → 青果「没有可用的空闲通道」这类约 3 分钟自愈的占用被弹成「去充值」,
* 把用户引去等一个不会来的释放,也把抖动当成故障报。
* 所以每个「该弹」的档位都配一条「不许弹」的反向判据。
*
* 跑法:`cd crawler-plugin/frontend-vue && npm test`
*/
import test from 'node:test'
import assert from 'node:assert/strict'
import { readFileSync } from 'node:fs'
import { fileURLToPath } from 'node:url'
import {
credentialFatalNotice,
type CredentialFatalKind,
} from '../src/shared/utils/credential-fatal-notice.ts'
function kindOf(message: string | null | undefined): CredentialFatalKind | null {
return credentialFatalNotice(message)?.kind ?? null
}
test('上游 LLM 欠费原文弹「额度不足」', () => {
const producer = '{"error":{"message":"预扣费额度失败, 用户[151246]剩余额度: '
+ '฿0.029168, 需要预扣费额度: ฿0.032402","type":"new_api_error","code":"insufficient_user_quota"}}'
assert.equal(kindOf(producer), 'llm_balance')
})
test('后端已判死并写下的指引句按「哪一句」分档', () => {
// 这两句是生产者写进 errorMessage 的(原文 + 指引),前端只认它,不重拼
const llmTerminal = 'LLM 网关返回 403;任务已终止:LLM 账户余额不足或密钥失效,不是表格问题;请充值或更换密钥后重新发起任务。'
const proxyTerminal = '青果提取失败 NO_AVAILABLE_CHANNEL;任务已终止:代理 IP 套餐已到期或余额不足、或提取链接不可用;请充值、续期或更换提取链接后重新发起任务。'
assert.equal(kindOf(llmTerminal), 'llm_balance')
assert.equal(kindOf(proxyTerminal), 'proxy')
})
test('代理侧三类不可自愈都弹「代理 IP 不可用」', () => {
assert.equal(kindOf('用户未配置代理'), 'proxy')
assert.equal(kindOf('代理套餐已过期'), 'proxy')
assert.equal(kindOf('代理余额不足'), 'proxy')
assert.equal(kindOf('青果提取失败 API_AUTH_DENY'), 'proxy')
// 光有「余额不足」分不清是哪一家的余额:兜底按 LLM 额度(后端同一档),弹窗仍会弹
assert.equal(kindOf('余额不足'), 'llm_balance')
})
test('LLM 密钥失效与额度不足分两档(要改的地方不同)', () => {
assert.equal(kindOf('LLM http 401: invalid api key'), 'key_invalid')
assert.equal(kindOf('密钥已失效,请更新'), 'key_invalid')
})
test('可自愈的供应商状态一律不弹', () => {
const selfHealing = [
// 这一条正是判宽了就会误伤的现网文案:它含「套餐到期」字样,但说的是通道被占
'青果回「没有可用的空闲通道」:可能是同账号的其他提取正占着(约 3 分钟释放),也可能是这把 key 的套餐到期/无余量',
'代理冷却中,请稍后重试',
'LLM http 502: Bad Gateway',
'LLM http 429: Too Many Requests',
'Connection refused',
'aiprice 请求超时',
'页面无效:风控墙',
]
for (const message of selfHealing) {
assert.equal(kindOf(message), null, `误弹: ${message}`)
}
})
test('没有凭据字样的失败不弹(抖动不是凭据问题)', () => {
assert.equal(kindOf('LLM 网关无应答'), null)
assert.equal(kindOf('扩展注入失败'), null)
assert.equal(kindOf(''), null)
assert.equal(kindOf(null), null)
assert.equal(kindOf(undefined), null)
})
test('文案本身不许把欠费说成抖动,也不许指错地方', () => {
const notices = ['用户未配置代理', 'insufficient_user_quota', 'invalid api key']
.map((message) => credentialFatalNotice(message))
.filter((notice) => notice !== null)
assert.equal(notices.length, 3)
for (const notice of notices) {
assert.equal(notice!.body.includes('稍后重试'), false)
assert.equal(notice!.body.includes('表格有问题'), true, '要明确告诉用户不是数据问题')
assert.equal(notice!.title.startsWith('任务已中断'), true)
}
})
// ---- 接线绊线:判据写好了但没人调 = 一条永远不会出现的弹窗 ----
test('五个特性的终态分支都接在同一处上报出口上', () => {
const sources: Array<[string, string, string]> = [
['外观专利+相似ASIN 共用面板', '../src/shared/composables/useLiveTaskBoard.ts', 'reportCredentialFatal('],
['跟价', '../src/pages/brand/components/BrandPriceTrackTab.vue', 'reportCredentialFatalAfterFetch('],
['采集数据', '../src/pages/brand/components/BrandCollectDataTab.vue', 'reportCredentialFatalAfterFetch('],
['店铺采集', '../src/pages/brand/components/BrandShopDataCrawlTab.vue', 'reportCredentialFatal('],
['根组件', '../src/App.vue', '<CredentialFatalAlert />'],
]
for (const [label, relative, needle] of sources) {
const text = readFileSync(fileURLToPath(new URL(relative, import.meta.url)), 'utf8')
assert.ok(text.includes(needle), `${label} 没有调用 ${needle}`)
}
})