后端(外观专利逐行送检): 撤掉组代表折叠与兄弟行借用结论,覆盖率分母改成交付行集
现网取证(主机A MinIO 上 6 份已交付 xlsx 逐格数):结果文件里 20.7%~51.3% 的行显示 「未取得检测结果」,且空的是整行三列、这些 ASIN 一个都没被检过、行号连续成块 (10-08 任务 30426:1211 行只有 96 批 960 行有结论;10-09 任务 30455 的 281 行空行 100% 属于"同父号已有一行被判")。两条成因都在判据口径上: 1) 送检只挑组代表行,兄弟行指望发起那一轮复用代表结论 —— 同父号的 2_1/2_2/2_3 各有各的 sku/标题/图片,借用等于成片行永不检测。按用户口径改为逐行申领、逐行送检, 组代表折叠与 expandRows 摊派一并删除(合批省的是调用数,代价是漏检)。 2) 覆盖率闸门的分母按「用户上传表的解析行」有没有标题/图片判该行该不该检,而数据 常在「客户端回传行」上 ⇒ 用户表不带标题列时分母恒 0、整段不判,成品半空而零告警。 判据抽成 AppearancePatentRowOutcome(JUDGED/NOT_INSPECTED/NO_DATA),表格文案、 原因 sheet 与闸门分母共用同一套;候选/工作单位计数也改用交付口径(旧的是 "四字段任一可用",只带专利维度文本的行会被读成已检测,而专利维度根本不入表)。 配套:判失败的任务不再整段跳过闸门(仍按既有口径出部分结果,但必打 「交付行账不完整」锚点并把缺口写进 task.errorMessage);出表前缺口<阈值时撤行级 标记并 requeue 补检一轮(releaseRowInspection 三参版才允许撤完成标记,两参版语义 由老用例钉死不变);llm-coverage-min-ratio 0.5→0.95(Properties 与 application.yml 两处默认值,已查两台既无 env 覆盖也无外置 yml 该键);货源面接上同口径的 「交付行账」度量日志(只数不改行为,阈值等本面实测分布)。 测试:外观专利整包 203 例、加货源共 645 例全绿。新增 AppearancePatentRowOutcomeTest(15)、 AppearancePatentDeliveryGateTest(9)、SimilarAsinDeliveryLedgerTest(3), 并在 RowMarkTimingTest 钉住"同父号子行逐行申领""兄弟行不得继承结论"。
This commit is contained in:
+11
@@ -94,6 +94,17 @@ public final class SimilarAsinResultTextSupport {
|
||||
return !normalized.isBlank() && !isTechnicalLlmFailure(normalized);
|
||||
}
|
||||
|
||||
/**
|
||||
* 交付口径:结果表真正给用户的两个判定列(相似度、是否同款)都得有可用文本,才算这行给出了结论。
|
||||
* 与 {@link #hasResolvedLlmFields} 的区别是后者是「十一个字段任一可用」——只填上 category 或 status
|
||||
* 的行会被读成「已经检测」,而它在表格里两列都是空的。这条先只做度量入口,不改既有行为。
|
||||
*/
|
||||
public static boolean hasDeliverableResult(SimilarAsinResultRowDto row) {
|
||||
return row != null
|
||||
&& hasUsableLlmField(row.getSimilarity())
|
||||
&& hasUsableLlmField(row.getIsConform());
|
||||
}
|
||||
|
||||
public static boolean hasResolvedLlmFields(SimilarAsinResultRowDto row) {
|
||||
if (row == null) {
|
||||
return false;
|
||||
|
||||
+20
-5
@@ -189,11 +189,16 @@ public class SimilarAsinResultWorkbookAssembler {
|
||||
List.of("不符合"),
|
||||
"[similar-asin] taskId=" + task.getId()
|
||||
);
|
||||
long undeliveredRows = captured.rows().stream()
|
||||
.map(row -> SimilarAsinChunkMergeSupport.findResultRow(row, sourceResultMap))
|
||||
.filter(java.util.Objects::nonNull)
|
||||
.filter(resultRow -> !SimilarAsinResultTextSupport.hasDeliverableResult(resultRow))
|
||||
.count();
|
||||
writeResultWorkbook(xlsx, captured.rows(), sourceResultMap, taskImageCache, imageSpool);
|
||||
ensureResultAssemblyNotInterrupted();
|
||||
return new SourceResultWorkbook(
|
||||
xlsx, filename, captured.rows().size(), persistedRows,
|
||||
sourceResultMap.size(), resolvedRows, conformPropagated);
|
||||
sourceResultMap.size(), resolvedRows, conformPropagated, undeliveredRows);
|
||||
}));
|
||||
}
|
||||
try {
|
||||
@@ -235,9 +240,18 @@ public class SimilarAsinResultWorkbookAssembler {
|
||||
int conformPropagated = workbooks.stream()
|
||||
.mapToInt(SourceResultWorkbook::conformPropagated)
|
||||
.sum();
|
||||
log.info("[similar-asin] bounded assemble workbook taskId={} parsedRows={} persistedRows={} resultRows={} resolvedRows={} propagated={} sources={} costMs={}",
|
||||
long undeliveredRows = workbooks.stream()
|
||||
.mapToLong(SourceResultWorkbook::undeliveredRows)
|
||||
.sum();
|
||||
if (undeliveredRows > 0) {
|
||||
// 交付行账:货源这一面还没有覆盖率闸,先把「表格里两列空着的行」数出来并报警,
|
||||
// 有了真实分布才谈得上定阈值(不拿别的模块的数字当这里的基线)
|
||||
log.warn("[similar-asin] 交付行账不完整 taskId={} resultRows={} undeliveredRows={} sources={}",
|
||||
task.getId(), resultRows, undeliveredRows, sourceRows.size());
|
||||
}
|
||||
log.info("[similar-asin] bounded assemble workbook taskId={} parsedRows={} persistedRows={} resultRows={} resolvedRows={} propagated={} undeliveredRows={} sources={} costMs={}",
|
||||
task.getId(), parsedRows.size(), persistedResultRows, resultRows,
|
||||
resolvedRows, conformPropagated, sourceRows.size(),
|
||||
resolvedRows, conformPropagated, undeliveredRows, sourceRows.size(),
|
||||
System.currentTimeMillis() - assembleStart);
|
||||
if (resultRows == 0) {
|
||||
String failureSummary = chunkPayloadSupport.collectChunkReadFailureSummary(task.getId());
|
||||
@@ -1084,9 +1098,10 @@ public class SimilarAsinResultWorkbookAssembler {
|
||||
int persistedRows,
|
||||
int resultRows,
|
||||
long resolvedRows,
|
||||
int conformPropagated) {
|
||||
int conformPropagated,
|
||||
long undeliveredRows) {
|
||||
private SourceResultWorkbook(File file, String filename, int rowCount) {
|
||||
this(file, filename, rowCount, 0, 0, 0L, 0);
|
||||
this(file, filename, rowCount, 0, 0, 0L, 0, 0L);
|
||||
}
|
||||
}
|
||||
|
||||
|
||||
Reference in New Issue
Block a user