huangzd1997
226050322b
后台管理菜单改为服务端按权限渲染:修复刷新时先显示全量菜单再折叠的闪烁
...
- main.py admin_page 调用 _load_current_backend_menu_items 取当前用户权限菜单,
经 render_html 传入模板;Java 权限接口不可用时降级不渲染(避免展示越权菜单)
- admin.html 删除写死的 16 个静态菜单按钮,改为 Jinja2 按权限渲染分组菜单,
渲染成功时 nav 带 data-server-rendered 标记,失败显示轻量占位
- admin.js loadAdminMenus 识别 data-server-rendered 后直接绑定事件并激活,
不再请求 /current-user/menus 重渲染(保留 API 兜底路径)
2026-09-04 00:31:04 +08:00
huangzd1997
732f2b296d
登录页品牌标识换为 logo 图片:auth-brand-mark 与登录卡片展示 logo_thumb.png
2026-09-04 00:16:19 +08:00
huangzd1997
dc0e3db5d3
后台店铺数据重复检查独立成菜单:删除店铺导入测试、新增撞款详情卡片区
...
- 删除「店铺导入测试」菜单及全部实现:admin.html 面板、admin.js 逻辑、
admin_api.py 路由/常量/权限映射、Java 默认菜单
- 「店铺数据记录」页内子 tab 移除,只保留店铺数据列表
- 「店铺管理」下新增「店铺数据重复检查」菜单(V106 导入测试菜单保留并新增
V107 清理 + 幂等插入新菜单,Java 清单同步)
- 新面板:筛选/指标卡/店铺上架分布/矩阵表格/撞款详情卡片区(同 ASIN 跨店
上架明细,查看明细开抽屉,上架时间倒序)
- 重复扫描结果改为 MySQL 缓存 + 每日定时扫描(start_duplicate_scan_scheduler)
- 新增 test_admin_shop_data_duplicate_check.py 单元测试
2026-09-04 00:16:14 +08:00
huangzd1997
9cfb269de6
后台店铺数据重复ASIN:全选移至表头、Tab总数、独立筛选、按ASIN分组表格展示
...
- 列表全选复选框从工具栏移到表格表头,事件委托处理动态元素
- 重复ASIN Tab 标题加总数(XX 为重复 ASIN 数量)
- 重复ASIN 筛选独立:ASIN/店铺/国家/上架时间(开始+结束),与原店铺数据筛选互不影响
- 后端支持 asin/shop_name/country/date_from/date_to 参数:
行级筛选命中 ASIN 后展示完整记录(含其他店铺,跨店语义更直观)
- 日期文本归一化(支持 2026年8月19日 上午4:34 中文格式)
- 按 ASIN 分组表格展示:ASIN/店铺数/记录条数/品牌/对应店铺/国家/上架时间/操作,
详情展开显示每条记录的店铺/分组/国家/日期/价格/品牌
- 修复 _shop_data_crawl_fetch_result_bytes 兼容 result_id 列别名(生产首个真实调用报 KeyError)
- 新增单测:筛选语义、日期归一化、record_count
2026-09-03 09:32:25 +08:00
huangzd1997
d1368ed00e
后台店铺数据记录页新增 Tab 切换与重复 ASIN 分析;task-169/170 HTTP 客户端配置接入;dedupe/brand 相关改造
...
- 管理后台:店铺数据记录改为列表分页展示(去任务号/文件列/累计标题,'最新'改'更新时间'),新增'重复 ASIN' Tab 按跨店聚合展示 ASIN/店铺/分组/国家/日期/价格;修复失败/进行中任务被过滤不显示的问题
- task-169: BrandCheckHttpConfigResolver 从 aiimage.http-client.* 读取品牌检查超时/重试(默认同现状、钳制),附 8 条测试
- task-170: surefire 内存调整为 1536m
- dedupe: DedupeRunService 重构(事务边界/进度)、新增 DedupeRunProgressVo、Controller 与结果 VO 调整,PermissionMenuService 相应适配
- brand/dedupe 前端:BrandDedupeTab/BrandPatrolDeleteTab 改造、新增 CountrySelector 组件与 country-options、类型与接口端对齐、测试更新
- 移除无引用文件:backend/static/logo.jpg、prompts/
2026-09-03 01:57:41 +08:00
huangzd1997
04db60a837
下线店铺管理-检测店铺密码功能:后台 UI 按钮/徽标、Python 代理路由、Java 接口与 service 全套移除,V105 迁移删除 biz_shop_credential_check 表及历史记录
2026-09-02 16:55:54 +08:00
huangzd1997
1df64b7a54
查询ASIN/最低价ASIN:精简新增弹窗
...
- 国家由多选下拉改为单选,一次录入一个站点的 ASIN
- 店铺名改为按分组联动的下拉,移除带分页表格的「选择店铺」二级弹窗
- 表单压成两行(分组/店铺名/国家 + ASIN[/最低价]),按钮文案改为「保存」
- 保存成功后保留分组/店铺/国家,仅清空 ASIN 并聚焦,便于连续录入
- 清理随之失效的死代码:选择店铺弹窗 JS、按国家渲染输入框的 render/collect
函数、.field-with-action/.skip-price-entry 等无引用 CSS
- admin.js 版本号改为 asin-create-v4,避免新 HTML 命中旧 JS 缓存
提交报文格式不变(countries:[code] + asin_mappings:{code:asin}),后端无需改动
2026-09-01 13:39:50 +08:00
huangzd1997
f85ab8d72c
去重数据汇总:按钮文案改为新增导入/删除导入
2026-09-01 13:01:50 +08:00
huangzd1997
b148dc57eb
task-116: 后台管理新增/导入表单弹窗化 + 分组管理独立菜单与UI优化 + 轻量进度端点
...
- 后台管理页(admin)所有面板的新增/导入表单改为弹窗操作,原有字段 ID 全部保留、提交逻辑不变;导入删除入口不再触发二次确认拦截
- 分组管理升级为独立菜单(V102 + schema initializer),移除 5 个面板内的管理分组按钮;分组列表改为蓝白主题、增加权限分组横幅
- Python 侧 group-manage 权限守卫(_ensure_backend_menu_access 补充 group-manage)
- 引入 V101(biz_task_file_job 复合索引)+ 新增 TaskProgressLight/TaskFileJob 轻量端点与进度聚合作
- 前端 progress-light / page-separated-loads / dispatch-guard 共享模块及单元测试
2026-09-01 12:54:13 +08:00
huangzd1997
da0eaccf3b
task-98: 移除 similar-asin/appearance-patent 模块 Coze,状态机与共享组件改名 LLM
...
- similarasin/appearancepatent 模块全部 Coze 工作流调用改走 direct-LLM(已确认唯一运行路径)
- 共享组件改名:CozeTaskQueueGate→TaskQueueGate、CozeGroupResultPropagator→GroupResultPropagator
- 状态机改名:biz_task_scope_state 的 coze_* 列→llm_*、stateJson coze 键→llm(V100 迁移已应用生产)
- 删除 biz_coze_credential 表、CozeCredential* 类、SimilarAsinCozeClient、AppearancePatentCozeClient→LlmClient
- 前端 brand 页 Coze 文案→LLM;Python 后端删除 cozepy 依赖与死配置
- 修复 TaskResultFileJobWorker 启动失败:TaskFileJobConfig 注册 ResultFileJobHandlerRegistry 与 13 个 handler bean(含 validateCoverage 启动校验)
2026-09-01 02:20:50 +08:00
huangzd1997
d33a65819d
feat: 外观专利改直连 LLM(DeepSeek/Gemini)、无效ASIN菜单更名 BRAND_DB、紫鸟店铺索引场景化
...
- AppearancePatent:Coze 工作流切换为 llm-host 直连模型(title/appearance 双模型、行并发、重试),配置键迁移并保留旧环境变量兜底
- InvalidAsinDataMapper 补充按值+品牌唯一键查询
- ZiniaoShopIndexService 新增店铺分类/索引场景
- V98:无效ASIN菜单 rename 补充 BRAND_DB;docs 架构优化规划
- 配套单测更新
2026-08-31 17:04:59 +08:00
huangzd1997
6b40ef0b35
后台菜单重构:菜单类型分组排序(软件在前/后台在后)、新增同类型末尾排序;任务中心分组移除,视频任务记录归入记录与版本、店铺数据记录归入店铺管理;界面名词优化(菜单权限配置/去重数据汇总/无效ASIN数据/视频任务记录/店铺数据记录/生成记录)
2026-08-31 01:48:05 +08:00
huangzd1997
b61995bbcd
feat-admin-ui-interaction
2026-08-30 22:09:22 +08:00
huangzd1997
01738f776a
店铺数据抓取累计文件改为店铺级共享,按国家覆盖更新
...
同店同日在不同账号下产生多份互不相干的累计文件(唯一键含 user_id),
后台管理页每店只显示最新一份,其他账号抓的国家看起来丢失。
- V95 迁移:加 shop_key/country_codes_json/compensation_done 列,按店铺
合并存量 daily_file 与成员行,唯一键改为 (shop_key, business_date)
- DailyFileService:findForUpdate/findOlder/acquireLock 去 user 维度,
店铺级锁跨账号串行
- TaskService:聚合按店铺定位;applyCountryCoverage 按国家覆盖(本次
回传的国家替换旧行,未更新的国家保留);启动补偿组件按成员快照重建
合并文件并回填国家列表
- 管理页:country_codes 改从 daily_file.country_codes_json 取,行数用
累计文件实际值
2026-08-30 16:30:09 +08:00
huangzd1997
69f0695a70
后台用户管理菜单权限目录:加载增加自动重试与失败提示/重新加载,创建编辑失败时自动恢复
2026-08-27 05:09:40 -04:00
huangzd1997
a0d83d9e8f
安全加固:CORS白名单、JWT密钥自动生成、SSRF防护、路径遍历与错误信息泄露修复
2026-08-25 18:05:28 +08:00
huangzd1997
a47fe87730
去重总数据国家限定五国并优化筛选布局
...
- 国家仅保留德国/英国/法国/意大利/西班牙,移除美国及US映射
- 保留服务器已有 V90 迁移,新增 V91 添加 country 列及索引
- ASIN列表筛选区改为两行布局:查询条件+按钮在上,日期+导出在下
2026-08-24 00:03:28 +08:00
huangzd1997
3f767059f9
后台去重数据新增国家
2026-08-23 22:50:58 +08:00
supernijia
62a3c1c6ec
更新任务存储、权限与货源查询流程
2026-08-22 21:23:01 +08:00
supernijia
91cd02eeb4
后台更新 服务优化
2026-08-11 14:50:21 +08:00
supernijia
641c70d451
处理后台新需求
2026-08-09 20:08:39 +08:00
supernijia
7cd7f4f9bb
Merge branch 'master' of https://git.aishufu.top/super/crawler-plugin
2026-08-06 01:11:58 +08:00
supernijia
40f4fae272
新需求更新 同步更新
2026-08-06 01:11:54 +08:00
123buzhidao56
9e5e4c0b7a
上传
2026-08-03 09:26:00 +08:00
123buzhidao56
2c3eaf008d
modified: backend/ali_oss.py
...
modified: backend/config.py
2026-07-31 14:36:08 +08:00
supernijia
e453e822c0
菜单修改优化
2026-07-28 13:40:19 +08:00
super
48e3c330ee
后端优化,增加新需求
2026-07-21 19:53:47 +08:00
super
05e674858a
更新ASIN库新需求
2026-07-20 20:12:38 +08:00
super
5e12e7ea52
视频任务管理更新
2026-07-19 22:23:26 +08:00
super
f189a5b4eb
添加新需求
2026-07-16 13:12:46 +08:00
super
ced59b5787
更新带货视频工作流接口和页面
2026-07-09 00:27:49 +08:00
super
dbc3b7f7f0
修复图片下载问题
2026-06-16 22:19:55 +08:00
super
faf89e85e8
新增数字人版本管理
2026-06-14 19:00:55 +08:00
super
e540d8e765
feat: update task routing and coze handling
2026-06-03 17:14:50 +08:00
super
685e3d2e45
更新地址 更新后端
2026-05-29 22:53:44 +08:00
super
eb7aa89f8b
完成这个地址替换
2026-05-29 19:35:55 +08:00
super
7ac6cbf5b0
增加公共下载进度、增加接收SKU、密钥分别存放
2026-05-28 16:41:20 +08:00
super
a1d658885f
修改完善这个专利部分
2026-05-15 16:06:12 +08:00
super
8a450cf397
软件前端更新
2026-05-12 23:25:12 +08:00
super
13171f99bd
后台管理接口修复 后端BUG修复
2026-05-12 21:03:42 +08:00
super
f6940d0bdf
更新处理相关内容
2026-05-09 00:20:52 +08:00
super
af280928b0
修复商品风险多店铺问题
2026-04-30 21:31:11 +08:00
super
1040976d87
Merge branch 'master' of https://gitee.com/TeaCodeNice/crawler-plugin
2026-04-30 11:38:13 +08:00
super
fff3b6e889
优化后台业务
2026-04-30 11:36:58 +08:00
koko
0cbcb865fd
Stop tracking generated Python bytecode
...
Generated __pycache__ files were already ignored in some paths but remained tracked in the repository, which caused merge noise and binary conflicts. This removes the tracked bytecode from the index and adds an explicit recursive ignore rule so future Python runs do not reintroduce them.
Constraint: Existing repository history already tracked pycache files across app, backend, and source_code
Rejected: Delete local pycache directories from disk | only repository tracking needed to be removed
Confidence: high
Scope-risk: narrow
Directive: Do not force-add __pycache__ or *.pyc files unless there is a documented runtime packaging reason
Tested: git ls-files shows no remaining paths containing __pycache__/
Not-tested: Application runtime; change only affects tracked generated artifacts and ignore rules
2026-04-28 20:57:53 +08:00
super
ad8174cd5e
合并错误信息
2026-04-28 15:25:34 +08:00
super
44b28a8baf
增加rufts
2026-04-27 18:45:33 +08:00
super
8ea7e949c2
后台查询Asin文档更新
2026-04-24 15:14:14 +08:00
super
23b9575234
完成查询asin开发
2026-04-23 20:48:57 +08:00
super
54ee3f304e
完成后端架构重构等
2026-04-23 15:25:41 +08:00