fix(jd-collect): 货号刷写的判重比较改 BINARY,消除真库 1267 排序规则混用
真机 34956 分片回传 500「服务器内部错误」,而 8 个商品其实已经 upsert 落库 (synced_at 有刷新)——卡在落库后的货号刷写这一句: item_num != CONVERT(id, CHAR) 两侧都是 IMPLICIT 可强制的字符串, CONVERT 取的是连接排序规则(库默认 utf8mb4_0900_ai_ci),item_num 列是建表时的 utf8mb4_unicode_ci ⇒ MySQL 报 1267 Illegal mix of collations for '<>',整批分片失败。 判据必须与排序规则无关:按字节比较(BINARY),不做任何 collation 协商。 真库对撞(A 机 java-server 账号,事务回滚):旧谓词 ERROR 1267 / 新谓词 touched=8, 回滚后货号仍为原值。 JdProductMapperSqlTest 用真 XMLMapperBuilder 渲染 BoundSql 钉形状:摘掉 BINARY 或改用 COLLATE 即红。
This commit is contained in:
@@ -74,7 +74,14 @@
|
||||
WHERE company_id = #{companyId}
|
||||
AND task_id = #{taskId}
|
||||
AND manual_locked = 0
|
||||
AND (item_num IS NULL OR item_num = '' OR item_num != CONVERT(id, CHAR))
|
||||
<!-- 2026-11-19 事故(真机 34956 分片回传 500):`item_num != CONVERT(id, CHAR)` 两边都是
|
||||
IMPLICIT 可强制的字符串,`CONVERT(..., CHAR)` 取的是**连接排序规则**
|
||||
(库默认 utf8mb4_0900_ai_ci),而 item_num 列是建表时的 utf8mb4_unicode_ci ⇒
|
||||
MySQL 报 1267「Illegal mix of collations ... for operation '<>'」,整批分片 500。
|
||||
行其实已经 upsert 落库(synced_at 有刷新),任务却只能判失败。
|
||||
判据必须与排序规则无关:按字节比较(BINARY)不做任何 collation 协商。
|
||||
⚠ 不要改回 != / <>,也不要指望给字面量加 COLLATE——库默认规则是环境相关值。 -->
|
||||
AND (item_num IS NULL OR item_num = '' OR BINARY item_num != BINARY CONVERT(id, CHAR))
|
||||
</update>
|
||||
|
||||
<!-- 覆盖清理候选行(重爬覆盖语义,2026-11-15):本任务成功收尾后,同一公司同一批店铺里
|
||||
|
||||
+77
@@ -0,0 +1,77 @@
|
||||
package com.nanri.aiimage.modules.jd.mapper;
|
||||
|
||||
import com.baomidou.mybatisplus.core.MybatisConfiguration;
|
||||
import org.apache.ibatis.builder.xml.XMLMapperBuilder;
|
||||
import org.apache.ibatis.io.Resources;
|
||||
import org.apache.ibatis.mapping.MappedStatement;
|
||||
import org.apache.ibatis.session.Configuration;
|
||||
import org.junit.jupiter.api.Test;
|
||||
|
||||
import java.io.InputStream;
|
||||
import java.util.Map;
|
||||
|
||||
import static org.junit.jupiter.api.Assertions.assertEquals;
|
||||
import static org.junit.jupiter.api.Assertions.assertFalse;
|
||||
import static org.junit.jupiter.api.Assertions.assertTrue;
|
||||
|
||||
/**
|
||||
* 货号刷写({@code reassignItemNums})的谓词形状——2026-11-19 真机 34956 分片回传 500 的形状钉。
|
||||
*
|
||||
* <p><b>为什么钉 SQL 而不是钉行为</b>:这条 UPDATE 的报错只在真库上出现,单测里
|
||||
* {@code CONVERT(..., CHAR)} 的排序规则由连接决定、mock 里看不见。事故现场:8 个商品
|
||||
* 其实已经 upsert 落库({@code synced_at} 有刷新),但这一句让整批分片回 500,用户看到的是
|
||||
* 「服务器内部错误,请稍后重试」、任务只能判失败。
|
||||
* 根因:{@code item_num != CONVERT(id, CHAR)} 两侧都是 IMPLICIT 可强制的字符串——
|
||||
* {@code CONVERT(..., CHAR)} 取的是**连接排序规则**(库默认 {@code utf8mb4_0900_ai_ci}),
|
||||
* {@code item_num} 列是建表时的 {@code utf8mb4_unicode_ci} ⇒ MySQL 1267
|
||||
* 「Illegal mix of collations ... for operation '<>'」。
|
||||
*
|
||||
* <p>判据:把 {@code BINARY} 摘掉(改回 {@code !=} / {@code <>})本格直接红;
|
||||
* 想靠给字面量补 {@code COLLATE} 也不行——库默认规则是环境相关值,换个实例就换一套。
|
||||
*/
|
||||
class JdProductMapperSqlTest {
|
||||
|
||||
private static final String XML = "mapper/jd/JdProductMapper.xml";
|
||||
private static final String NS = "com.nanri.aiimage.modules.jd.mapper.JdProductMapper";
|
||||
|
||||
@Test
|
||||
void 货号刷写的比较必须按字节BINARY而不做排序规则协商() throws Exception {
|
||||
String sql = render("reassignItemNums");
|
||||
|
||||
assertTrue(sql.contains("BINARY item_num != BINARY CONVERT(id, CHAR)"),
|
||||
() -> "货号判重比较退回了排序规则协商(真库 1267 复发,整批分片 500): " + sql);
|
||||
// 等价写法一律不留口子:裸比较、<> 形状、以及给 CONVERT 加 COLLATE 的「聪明写法」。
|
||||
assertFalse(sql.matches("(?s).*\\bitem_num\\s*(!=|<>)\\s*CONVERT.*"),
|
||||
() -> "不允许任何不带 BINARY 的同义比较: " + sql);
|
||||
assertFalse(sql.contains("COLLATE"),
|
||||
() -> "COLLATE 是环境相关值,不能拿来当判据: " + sql);
|
||||
}
|
||||
|
||||
@Test
|
||||
void 货号刷写仍然只覆盖手工锁定之外的本任务行() throws Exception {
|
||||
String sql = render("reassignItemNums");
|
||||
|
||||
assertTrue(sql.startsWith("UPDATE biz_jd_product SET item_num = CONVERT(id, CHAR) WHERE"),
|
||||
() -> "写入形状变了:货号=行号(CONVERT(id, CHAR)): " + sql);
|
||||
assertTrue(sql.contains("company_id = ?") && sql.contains("task_id = ?"),
|
||||
() -> "少了公司/任务维就是跨公司刷货号: " + sql);
|
||||
assertTrue(sql.contains("manual_locked = 0"),
|
||||
() -> "人工编辑过的货号必须留在 UPDATE 之外: " + sql);
|
||||
assertEquals(2, sql.chars().filter(c -> c == '?').count(),
|
||||
() -> "占位符数变了(companyId + taskId): " + sql);
|
||||
}
|
||||
|
||||
private static String render(String id) throws Exception {
|
||||
MappedStatement statement = parse().getMappedStatement(NS + "." + id);
|
||||
return statement.getBoundSql(Map.of("companyId", 1L, "taskId", 34956L))
|
||||
.getSql().replaceAll("\\s+", " ").trim();
|
||||
}
|
||||
|
||||
private static Configuration parse() throws Exception {
|
||||
MybatisConfiguration configuration = new MybatisConfiguration();
|
||||
try (InputStream in = Resources.getResourceAsStream(XML)) {
|
||||
new XMLMapperBuilder(in, configuration, XML, configuration.getSqlFragments()).parse();
|
||||
}
|
||||
return configuration;
|
||||
}
|
||||
}
|
||||
Reference in New Issue
Block a user