Commit Graph
22 Commits
Author SHA1 Message Date
jidekin e20244027c feat(ops+ui): WAF 自愈定时器 + 存活监控 + 恢复演练 + /metrics days 口径
- waf-whitelist-guard.sh + 每小时 timer:^/v1/ 规则被面板覆盖时自动补回并 reload
- uptime-check.sh 接入每日报告:本机/公网/4 台关键服务存活
- backup-restore-drill.sh 接入每日报告:解包校验 SQLite/JSON/权限
- /metrics 新增 days 参数;指标页加「今天/7天/30天/全部」切换
- docs/project-audit-2026-10-23.md:体检结论(含明确不做的项与理由)
- 版本 2.9.15 → 2.9.16
2026-10-23 16:51:28 +08:00
jidekin c141f6affe feat(ops): 每日备份 + 每人 20 QPS + 调用日志体积上限/VACUUM
- 新增 backup-app-data.sh(VACUUM INTO 快照 + 配置/账号/会话/历史)+ dsh-gateway-backup.timer(每天 03:30,留 14 份)
- gateway.yaml: server.rate_limit_rps null → 20(按账号桶,实测 120 并发触发 55 个 429)
- calllog: CALLLOG_MAX_BYTES(2GiB) 按有效数据量精确收紧 + 按需 VACUUM(含 wal_checkpoint)
- 修:体积判断改用 (page_count-freelist)*page_size;VACUUM 后 checkpoint 才能真正缩文件
- 版本 2.9.14 → 2.9.15
2026-10-23 16:31:45 +08:00
jidekin c1ccc572fc test: 修复 7 个失败用例 + 测试隔离(225/225 全绿)
- 新增 tests/conftest.py:CALLLOG_DB 指向临时目录 + 自动打开库(TestClient 不走 lifespan)
- 4 个 /logs 用例适配读库后的行为(断言前 flush;只看自己改为库里塞记录 + /logs/calls 断言)
- 夹具 grok-4.6 → grok-4.7(模型清单已同步)
- api_calls 增 video_id 列(自动迁移),/logs 映射补回该字段
- requirements-dev.txt(pytest);测试改为幂等
- 版本 2.9.13 → 2.9.14
2026-10-23 16:17:19 +08:00
jidekin 4c58a36743 feat(persist): 视频回调任务落库续跑 + /logs 改读库
- 新表 video_jobs:回调任务先落库再派生,结束标记 done/failed
- 启动时 pending_jobs() 续跑(6 小时内),provider 不存在/超时标记 failed/expired
- /logs 与 /logs/recent 共用 _recent_entries() 读库;删除遗留 _logs_for_account()
- 版本 2.9.12 → 2.9.13
2026-10-23 16:06:45 +08:00
jidekin 7aa9032829 feat(logs): 详情彻底不截断(捕获 4MiB / 入库 8MiB)+ 实时页按需取全文
- 请求体捕获上限 128KiB → 4MiB(CALLLOG_BODY_MAX);在途缓存条数 128 → 64 控内存
- 入库上限 256KiB → 8MiB(CALLLOG_CONTENT_MAX)
- 新增 GET /logs/entry/{id}:本人或管理员可取该条完整提示词/回复(实时页展开时调用)
- 实时列表仍给 8KB 预览 + body_len/resp_len,展开替换为全文并显示「完整 N 字」
- 实测 285KiB 提示词完整落库与返回
- 版本 2.9.11 → 2.9.12
2026-10-23 16:01:24 +08:00
jidekin 5643824422 fix(ui): 资产卡片模型名/日期分两行 + 命中率加口径说明
- Users.vue:模型名一行、日期一行(不再挤一起被省略),图像/视频共用
- 命中率(CallLogs 列表列 + Logs 实时 chip)加 hover 说明:
  首次请求/短提示词/前缀变化时命中率为 0 属正常
- 版本 2.9.10 → 2.9.11
2026-10-23 15:45:29 +08:00
jidekin 105ce16e0e fix(users): 资产卡片文字压叠 + 失效图片改为友好占位
- .asset-grid 由 flex(固定 150px) 改为 grid(minmax 170px),.asset-cell 加 min-width:0
- 缩略图 width:100% + aspect-ratio 4/3;元信息行加 ellipsis;下载按钮贴底
- el-image 加 #error 插槽:过期签名 CDN 链接显示「链接已失效」而非「加载失败」整块
- 版本 2.9.9 → 2.9.10
2026-10-23 15:41:52 +08:00
jidekin 39ecf5226a feat(logs): 调用日志列表加「缓存命中」列(量 + 命中率)
数据本来就有(tok_cached/tok_prompt),只是列表没显示:命中率此前只在详情弹窗里。
- 列表新增列:命中量(k/M 缩写)+ 命中率%(按档位配色)
- 实测 107 条带 token 记录:命中 62 条,中位 83.9%,最高 99.7%
- 版本 2.9.8 → 2.9.9
2026-10-23 15:37:02 +08:00
jidekin 1dc793af8e feat(logs): 视频轮询时间线落库(重启不丢)
- 新增 video_polls 表(video_id/ts/status/progress/ok/error/raw,索引 (video_id,ts))
- metrics.video_poll_push 同步落库(唯一写入点,同时保留内存态)
- _attach_polls 改为优先读库、回落内存;/logs/recent 补上 _attach_polls 调用
- 保留策略与 api_calls 共用 90 天
- 版本 2.9.7 → 2.9.8
2026-10-23 15:34:28 +08:00
jidekin 5dda8df115 feat(users): 移除用户管理里的「调用日志」页签(已有独立日志页)
- Users.vue 活动抽屉去掉 logs 页签与表格,默认停在「图像」;只拉 history/images|videos
- 删除后端 GET /auth/users/{username}/logs(唯一调用方即该页签)
- 移除 i18n users.tabLogs(zh/en)
- 版本 2.9.6 → 2.9.7
2026-10-23 15:31:34 +08:00
jidekin 4e3391ff7c feat(logs): 实时日志改为读库,重启不丢
- 新增 GET /logs/recent?n=200(从 api_calls 取最近 N 条,形状与 /logs 条目一致)
- 权限口径不变:只看自己的(admin 也只看自己);看全站走 /logs/calls
- 前端实时页改调 /logs/recent,保留 5 秒自动刷新
- 修 query() 漏选 tok_* 四列导致实时页 token 显示为 0
- 版本 2.9.5 → 2.9.6
2026-10-23 15:28:09 +08:00
jidekin f66e52797d fix(calllog): 流式请求的请求内容为空(请求体被提前 pop)
_flush_calllog 原先无条件 BODY_BY_RID.pop(rid),但流式请求的访问日志条目
要等 SSE 发完才由 AccessLog.add 产生,中间件收尾在 SSE 开始前就 pop 走了请求体。
改为:流式只 peek(留给 AccessLog.add),非流式才 pop(早失败条目必须在此取走)。
版本 2.9.4 → 2.9.5
2026-10-23 15:22:18 +08:00
jidekin 6457a92314 feat(logs): 实时日志展开显示单笔 token 用量与缓存命中率
- calllog 新增 peek_tokens(rid):只读不消耗,供实时日志展示(落库仍由 _row pop)
- AccessLog.add 把 token 挂到条目 tokens 字段
- 实时日志展开新增「Token 用量」块:输入/输出/缓存命中/推理 + 命中率(cached÷prompt)
- 调用日志详情弹窗补同样一行 token(数据取自 tok_* 列)
- 版本 2.9.3 → 2.9.4
2026-10-23 15:19:39 +08:00
jidekin b54dc303f9 chore(sync): 2026-10-23 模型清单同步(minimax-m3.1-flash-free → minimax-m3.1-flash)
scripts/sync_models.py 每日同步产物:官方文档把免费版 id 去掉了 -free 后缀,
按官方最新清单更新。
2026-10-23 13:42:22 +08:00
jidekin 06cbe53735 style(calllog): 详情弹窗固定高度,内容区内部滚动
- 弹窗 height: min(78vh,860px),el-dialog__body overflow:hidden(弹窗自身不出滚动条)
- 内容/提示词/回复三块 flex 等分剩余高度,各自 overflow:auto 内部滚动
- 原 max-height:460px 改为 none,min-height:90px 兜底
- el-dialog teleport 到 body,故用非 scoped 全局样式块(选择器挂在 .calllog-dlg 下)
- 版本 2.9.2 → 2.9.3
2026-10-23 13:38:28 +08:00
jidekin 4ef03aa8f0 feat(calllog): 详情不截断记录(捕获/清洗/入库三处上限全部放开)
- 请求体捕获 8000 → 128KiB(_CONTENT_MAX,可用 CALLLOG_BODY_MAX 调)
- 回复文本改用新增的 _content():128KiB 且保留换行/制表(_logsafe 会把换行压成 ?)
- 入库上限 CALLLOG_CONTENT_MAX 默认 8000 → 256KiB(实际等于不截断)
- 详情新增 prompt_full(完整提取内容,保留换行),与原始 JSON 并列展示
- BODY_BY_RID 有界 128 条,防止宽上限下内存膨胀
- 版本 2.9.1 → 2.9.2
2026-10-23 11:36:26 +08:00
jidekin ee42754095 feat(calllog): 列表加「内容」列,显示请求体 messages 的 content
- 新增 prompt_preview():抽取用户实际输入(兼容 chat/responses/messages 三种格式)
- 列表返回 prompt_text(单行/240字),不再吐原文;详情也带 prompt_text
- 前端:模型列后新增「内容」列 + 详情弹窗「内容」块
- 版本 2.9.0 → 2.9.1
2026-10-23 11:32:37 +08:00
jidekin 9dc25d9abf chore(metrics): 补提交 RID contextvar(2.9.0 的 token 侧信道依赖它)
上一个提交漏了本文件:main.py 的 RID.set(rid) 与 calllog.note_tokens 都依赖
app/metrics.py 里新加的 RID ContextVar,不同步提交会导致仓库检出后无法启动。
2026-10-23 11:29:06 +08:00
jidekin 46f10f4594 feat(metrics): 指标改由 SQLite 提供(重启不清零)+ 月度用量导出
- 新增 _usage_snapshot():调用数/供应商/token/耗时(p50,p95) 走 api_calls 聚合,
  运行时长/在途/熔断仍取内存;库不可用自动回落内存态
- 影响 /metrics、/metrics/prometheus、/health.models;口径从「启动以来」变「最近 90 天」
- token 落库:表加 4 列(老库自动 ALTER),用 rid contextvar + token 侧信道关联
- 新增 /logs/usage/monthly 与 /logs/usage/monthly/export(仅管理员)+ 前端月度用量弹窗
- 模型统计排除无模型行(匿名早失败不再显示 ?)
- 版本 2.8.0 → 2.9.0
2026-10-23 11:28:53 +08:00
jidekin bb4c9281f7 fix(calllog): 翻译键移回顶层 + 内容上限 2000→8000
- calllogs.* 的 i18n 段此前被插进 upload 段内部,导致新面板全部显示原始键名;
  已移到 logs 之后作为顶层键,zh/en 结构复核一致
- 请求体摘要 raw[:2000]→8000、回复文本 _logsafe(...,2000)→8000(5 处),
  实测 6000 字提示词可完整落库
2026-10-23 11:24:19 +08:00
jidekin 09b79c1306 feat(calllog): 调用日志落地(SQLite / 90 天 / 管理员可查全部)
- app/calllog.py:SQLite 表 api_calls(21 列,含提示词与回复)+ 异步批量写 + 双向握手
  (流式请求的访问日志条目比响应晚到也能落库)+ 早失败补记 + 失败也记 Key 前 8 位
- 新增 4 个仅管理员端点:/logs/calls、/logs/calls/stats、/logs/calls/{id}、/logs/calls/export
- 前端:日志页新增「实时 / 调用日志」页签,新组件 CallLogs.vue(筛选/分页/详情/CSV 导出)
- 保留 90 天;队列满丢弃计数,不反压请求;零新依赖
- docs:新增 docs/call-log-design.md(方案对比与三个关键设计)
- 版本 2.7.3 → 2.8.0
2026-10-23 10:02:07 +08:00
jidekin 1999b5e7ac fix(security): 成员不再读到全站用量(/health 按角色分流)+ WAF 放行 /v1/
- /health: 非 admin 只回运行态(status/version/uptime/in_flight/in_flight_peak/providers 名称与模型数);
  全局 tokens、各模型全局调用/失败率、供应商熔断状态收口到管理员
- /metrics: 明确保留按账号聚合(老板口径:成员首页要看自己的调用次数),未收成仅管理员
- docs: 新增 docs/waf-api-access.md,沉淀 AI 编程客户端被 1Panel WAF 误杀 403 的根因/修复/排查
- CHANGELOG: 记录本次工单全过程
- 版本 2.7.2 → 2.7.3
2026-10-22 19:41:05 +08:00