fix: 全维度审查修复(安全/正确性/性能/稳定性/客户端/前端)
安全 - /api/ziniao/** 五个匿名接口加管理员鉴权(此前可匿名换取任意员工店铺登录令牌) - 删除 Flask 遗留后门:默认密码建超管 + 每次启动写生产 users 表(服务端与客户端各一份) - 进度/详情接口归属过滤:新增 TaskProgressOwnershipSupport,11 模块 progress/light 与 /tasks/batch 接入,DTO 补 userId,前端 13 个查询封装补传(未传时后端不过滤,兼容旧端) - 代理提取链接(含账密)不再明文入日志(新增 common/util/SecretMasking) - 全局异常兜底不再回传原始异常信息;内部令牌比较改常量时间 - 登录加失败计数与锁定(10 次锁 15 分钟);品牌源文件下载加 SSRF 防护 - AdminApiGuardFilter 覆盖前缀从 2 扩到 15(开关默认 false,行为不变,为收紧做准备) - 生产关闭 springdoc/knife4j(/doc.html 匿名可读全部接口定义) 正确性 - 40901/40902 拆分:锁竞争不再被伪装成 success=true(此前客户端停止重试、分片静默丢失) - 假成功收敛:集采明细批量写失败改为抛出、去重 worker 异常标失败、4 个 worker 改判 success 字段、publish 空 ASIN 行参与批次 flush、巡店删除全失败带 error 上报 - 客户端心跳 discard 移入 finally(7 模块,失败路径不再留僵尸 RUNNING 任务) - 状态机条件更新:跟价停止循环、集采 activate/fail、imagevideo 归档回填、店铺匹配提交 性能 - 前端入口包 JS 1.05MB→204KB、CSS 355KB→10.7KB(Element Plus 改按需 + el-config-provider) - 载荷引用计数按指针里的 taskId 收敛(原 JSON 列 IN 全表扫且逐行调用) - 店铺明细多值批量 INSERT;快照 upsert 预载缓存;结果文件列改单条 UPDATE - 新增迁移 V120(补 3 个缺失索引)/V121(删 4 个被覆盖的冗余索引)/V122(URL 前缀索引) 稳定性 - 新增 common/util/ThreadPools 有界线程池替换 5 处无界队列(防堆积 OOM) - Redis 锁释放改 Lua 原子校验(原裸 delete 会误删他人已过期的锁) - imagevideo 加死节点接管;锁续期失败重试;调度池 4→16;openStream 全部加超时 - 事务内远程对象删除移到提交后;启动恢复锁按实例命名 客户端 - 不再 taskkill /f /im chrome.exe(改为按调试端口精准回收,不杀用户自己的浏览器) - 密码检测不再无条件杀紫鸟进程;品牌检测加全局互斥(代理池不再互相覆盖) - base_dir 统一到 exe 目录(原被 os.getcwd() 覆盖,日志/缓存会分裂两个目录) - 缓存加定时清理;图片下载加超时;mkstemp 句柄托管 测试 - 同步更新受影响的契约测试(构造器签名/条件更新/方法改名/新增接口方法等) - 修复 FaultInjectionTest 等 3 处 mock 未 stub 流式 read 导致的读循环 OOM - mvn test 2795 个测试全绿
This commit is contained in:
@@ -0,0 +1,52 @@
|
||||
package com.nanri.aiimage.common.util;
|
||||
|
||||
import java.net.URI;
|
||||
|
||||
/**
|
||||
* 敏感串脱敏工具(2026-09 全维度审查后收口)。
|
||||
*
|
||||
* <p>背景:代理提取链接形态为 {@code http://user:pass@host:port},代码中曾有多处
|
||||
* 直接把整串打进日志,导致用户代理账号密码长期留在应用日志与 docker logs 里。
|
||||
*/
|
||||
public final class SecretMasking {
|
||||
|
||||
private SecretMasking() {
|
||||
}
|
||||
|
||||
/** 通用掩码:保留前 4 与后 4 字符;过短则整体掩掉。 */
|
||||
public static String mask(String value) {
|
||||
if (value == null || value.isBlank()) {
|
||||
return "";
|
||||
}
|
||||
String text = value.trim();
|
||||
if (text.length() <= 8) {
|
||||
return "****";
|
||||
}
|
||||
return text.substring(0, 4) + "****" + text.substring(text.length() - 4);
|
||||
}
|
||||
|
||||
/** 代理掩码:隐去账号密码,保留 scheme://host:port 便于运维核对。 */
|
||||
public static String maskProxy(String value) {
|
||||
if (value == null || value.isBlank()) {
|
||||
return "";
|
||||
}
|
||||
try {
|
||||
URI uri = URI.create(value.trim());
|
||||
if (uri.getHost() == null || uri.getHost().isBlank()) {
|
||||
return mask(value);
|
||||
}
|
||||
StringBuilder masked = new StringBuilder();
|
||||
masked.append(uri.getScheme() == null ? "http" : uri.getScheme()).append("://");
|
||||
if (uri.getUserInfo() != null && !uri.getUserInfo().isBlank()) {
|
||||
masked.append("***@");
|
||||
}
|
||||
masked.append(uri.getHost());
|
||||
if (uri.getPort() > 0) {
|
||||
masked.append(':').append(uri.getPort());
|
||||
}
|
||||
return masked.toString();
|
||||
} catch (Exception ex) {
|
||||
return mask(value);
|
||||
}
|
||||
}
|
||||
}
|
||||
@@ -0,0 +1,47 @@
|
||||
package com.nanri.aiimage.common.util;
|
||||
|
||||
import java.util.concurrent.ExecutorService;
|
||||
import java.util.concurrent.LinkedBlockingQueue;
|
||||
import java.util.concurrent.ThreadPoolExecutor;
|
||||
import java.util.concurrent.TimeUnit;
|
||||
|
||||
/**
|
||||
* 有界线程池工厂(2026-09 全维度审查补)。
|
||||
*
|
||||
* <p>业务里多处使用 {@code Executors.newFixedThreadPool}:它内部是**无界**
|
||||
* {@code LinkedBlockingQueue},任务堆积时永远不会触发拒绝策略,会把内存吃满
|
||||
* (表现为 OOM,或整机因 GC 变慢导致所有任务一起劣化)。
|
||||
* 统一改为有界队列 + {@code CallerRunsPolicy}:队列满时在提交线程执行,形成天然背压。
|
||||
*/
|
||||
public final class ThreadPools {
|
||||
|
||||
private ThreadPools() {
|
||||
}
|
||||
|
||||
/** 默认队列容量:足以吸收突发,又不至于无界堆积。 */
|
||||
public static final int DEFAULT_QUEUE_CAPACITY = 512;
|
||||
|
||||
/** 有界固定线程池(daemon 线程,空闲可回收)。 */
|
||||
public static ExecutorService boundedFixed(String threadNamePrefix, int threads) {
|
||||
return boundedFixed(threadNamePrefix, threads, DEFAULT_QUEUE_CAPACITY);
|
||||
}
|
||||
|
||||
/** 有界固定线程池(显式队列容量)。 */
|
||||
public static ExecutorService boundedFixed(String threadNamePrefix, int threads, int queueCapacity) {
|
||||
ThreadPoolExecutor executor = new ThreadPoolExecutor(
|
||||
Math.max(1, threads),
|
||||
Math.max(1, threads),
|
||||
// keepAliveTime 必须 > 0:下面开了 allowCoreThreadTimeOut,
|
||||
// 传 0 会让构造器直接抛 "Core threads must have nonzero keep alive times"
|
||||
60L, TimeUnit.SECONDS,
|
||||
new LinkedBlockingQueue<>(Math.max(1, queueCapacity)),
|
||||
runnable -> {
|
||||
Thread thread = new Thread(runnable, threadNamePrefix);
|
||||
thread.setDaemon(true);
|
||||
return thread;
|
||||
},
|
||||
new ThreadPoolExecutor.CallerRunsPolicy());
|
||||
executor.allowCoreThreadTimeOut(true);
|
||||
return executor;
|
||||
}
|
||||
}
|
||||
Reference in New Issue
Block a user