 hz4th_coder
|
a0b870ee98
|
v2.0.1 修复搜索并发冲突与提交失败问题
- 搜索服务改用 namespace 隔离浏览器实例（参考 webtest-agent 方案），
解决定时任务与手动处理并发调用 agent-browser 互相踢掉导致搜索结果为0的问题
- agent-browser 调用加瞬时错误自动重试，使用 /tmp/xdg-rt 目录
- 步骤4 提示词放宽：品牌/系列相关页面也纳入提取，无精确型号时兜底选最相关内容
- 步骤4 大模型返回空时自动兜底，不再直接跳过导致会话卡死
- 会话收尾修复：失败/无数据时会话状态正确标记，并自动移除待处理产品
- 处理入口统一：定时任务/单产品/批量处理均改为 process_monitor 大模型流程（防重）
- paramhub_client 增加登录态自动恢复：401 或连接失败时自动重新登录重试
- 全流程实测通过：deepseek-v4-flash-0731 → review_id 19ed2daaabfe
|
2026-08-13 18:25:22 +08:00 |
|
|
hz4th_coder
|
23991c3552
|
v2.0.0 大模型驱动版：移除智能体，直接调用大模型接口
- 核心改造：不再使用 openclaw 智能体执行处理步骤，改为直接调用大模型接口
- 新增 services/llm_client.py：OpenAI 兼容接口客户端，支持多模型配置管理
- 步骤4/5 由大模型直接完成（提取产品数据、填充字段）
- 步骤6 改为直接调用 ParamHub API 提交审核
- 新增 llm_configs 数据库表，默认配置 unsloth/Qwen3.6-27B-Q4_K_M (262144上下文)
- 新增 /api/llm 配置管理 API：增删改查、切换激活、测试连接
- 前端首页新增「大模型配置」面板，可随时新增/切换模型
- 处理步骤名称更新为「大模型」版
|
2026-08-13 17:15:53 +08:00 |
|
|
hz4th_coder
|
19c7592e0e
|
新增异常产品管理功能
- 新增 abnormal_products 数据库表
- 内容库和互联网均无搜索结果时存入异常库
- 新增异常产品 API：
- GET /api/products/abnormal - 获取异常产品列表
- GET /api/products/abnormal/<product_name> - 获取异常产品详情
- POST /api/products/abnormal/<product_name>/resolve - 解决异常产品
- DELETE /api/products/abnormal/<product_name> - 删除异常产品记录
- POST /api/products/abnormal/<product_name>/retry - 重试处理
- 更新 README 文档
|
2026-07-17 00:24:11 +08:00 |
|
|
hz4th_coder
|
8f0efe28b6
|
feat: 新增产品处理流程监控功能
- 新增处理会话表(process_sessions)和步骤表(process_steps)
- 支持实时查看每个产品的处理步骤进度
- 支持暂停/继续/停止正在进行的处理
- 处理步骤包括：搜索内容库、搜索互联网、抓取网页、提取数据、填充字段、提交审核
- 新增处理监控页面 /process
- 每个步骤记录详细数据、耗时、状态
- 历史记录可查看每个步骤的执行详情
|
2026-07-14 12:23:49 +08:00 |
|
|
hz4th_coder
|
6534c3315b
|
feat: 新增后台任务系统，支持抓取任务在后台持续运行
- 新增后台任务API (/api/tasks)
- 抓取任务在后台独立运行，不受页面刷新影响
- 支持任务状态查询和手动停止
- 新增后台任务管理界面
- 数据库新增 background_tasks 表
- 前端使用轮询方式更新任务进度
|
2026-07-14 10:59:18 +08:00 |
|
|
hz4th_coder
|
981b3c9c5c
|
修复内容库分页：返回总数而非当前页数量
- 新增 get_articles_count 函数获取总数
- 列表API返回总数用于分页计算
|
2026-07-14 00:50:11 +08:00 |
|
|
hz4th_coder
|
76e24c4fa3
|
新增搜索标题和网页标题双字段
- 数据库新增 search_title 字段存储搜索结果标题
- product_names 存储抓取到的网页标题
- 搜索页面显示两个标题（搜索标题 + 网页标题）
- 内容库页面也显示两个标题
|
2026-07-14 00:00:50 +08:00 |
|
|
hz4th_coder
|
d23d526629
|
修复搜索和重复检查问题
1. 搜索文章时增加URL字段搜索，解决重复抓取问题
2. 优化搜索结果解析，多获取几个结果确保返回足够数量
|
2026-07-13 23:51:23 +08:00 |
|
|
hz4th_coder
|
c960d959ad
|
新增搜索结果缓存功能
- 新增 search_cache 数据库表存储搜索缓存
- 搜索前优先查询缓存，命中则直接返回
- 缓存默认有效期7天，可配置
- 前端支持'使用缓存'开关选项
- 显示缓存状态提示
- 支持自动清理过期缓存
|
2026-07-13 22:55:36 +08:00 |
|
|
hz4th_coder
|
898c2407e9
|
添加抓取失败网址记录功能
- 新增 failed_urls 数据库表存储失败URL
- 抓取失败时自动记录URL、标题、错误信息
- 搜索页面显示失败URL列表
- 支持重试单个/全部失败URL
- 支持删除和清空失败记录
- 显示重试次数和时间
|
2026-07-13 17:28:44 +08:00 |
|
|
hz4th_coder
|
e3bc88343a
|
添加.gitignore文件，排除缓存和临时文件
|
2026-07-12 01:08:08 +08:00 |
|
|
hz4th_coder
|
b7b09251f8
|
初始化参数数据自动化管理系统
功能:
- 文章内容库管理
- 待处理产品列表管理
- 自动处理流程
- 智能搜索和数据提取
- ParamHub API集成
- 定时任务调度
部署端口: 16043
|
2026-07-12 01:07:26 +08:00 |
|