Diuse/zhenxun_bot
1
0
Fork 0
mirror of https://github.com/zhenxun-org/zhenxun_bot.git synced 2026-10-05 11:49:59 +08:00
Code Issues Actions Packages Projects Releases Wiki Activity

perf: use single SQL query to reduce DB calls from 5-7 to 1-3

Browse Source
This commit is contained in:
HibiKier
2025-12-29 16:44:57 +08:00
parent 94939d4665
commit 601738c421
2 changed files with 288 additions and 217 deletions
Download Patch File Download Diff File Expand all files Collapse all files
plan.md
+34 -14
View File
@@ -223,25 +223,45 @@ zhenxun/
## 性能预期
| 指标 | 优化前 | 优化后 | 提升 |
| -------------- | ------- | ------ | -------- |
| 查询次数 | 6-10 次 | 1-2 次 | 80%↓ |
| 平均延迟 | ~50ms | ~10ms | 80%↓ |
| Redis 连接压力 | 高 | 低 | 显著降低 |
| 指标 | 优化前 | 优化后 | 提升 |
| -------------- | ------- | -------- | -------- |
| DB 查询次数 | 6-10 次 | **1-3 次** | 70-85%↓ |
| 平均延迟 | ~50ms | ~10ms | 80%↓ |
| Redis 连接压力 | 高 | 低 | 显著降低 |
### 查询优化详情
**优化前（5-7 次 DB 查询）：**
1. UserConsole - 用户金币
2. LevelUser (全局) - 全局权限等级
3. LevelUser (群组) - 群组权限等级
4. BanConsole (用户全局)
5. BanConsole (用户群组)
6. BanConsole (群组)
7. GroupConsole - 群组信息
8. BotConsole - Bot 信息
**优化后（1-3 次 DB 查询）：**
1. **单条复合 SQL** - 使用 UNION ALL 合并 UserConsole + LevelUser + BanConsole（1次）
2. GroupConsole - **内存缓存 60s**，变化时失效（0-1次）
3. BotConsole - **内存缓存 300s**，变化时失效（0-1次）
**最优情况**：缓存命中时只需 1 次 DB 查询
**最差情况**：3 次 DB 查询（全部未命中缓存）
---
## 风险与缓解
| 风险 | 缓解措施 |
| ----------------- | -------------------------------------------- |
| 快照数据过期 | 合理的 TTL + 主动失效机制 |
| 快照构建延迟 | 异步构建 + 首次访问降级到旧流程 |
| 内存占用增加 | 监控内存使用 + 合理的缓存清理 |
| 数据一致性 | 写操作后立即失效缓存 |
| **DB 过载风险** | **全局 Semaphore 限制并发构建数量 (50)** |
| **并发构建重复** | **按 cache_key 的 asyncio.Lock** |
| **构建等待超时** | **3 秒超时后返回默认快照，允许请求继续处理** |
| 风险 | 缓解措施 |
| ---------------- | -------------------------------------------- |
| 快照数据过期 | 合理的 TTL + 主动失效机制 |
| 快照构建延迟 | 异步构建 + 首次访问降级到旧流程 |
| 内存占用增加 | 监控内存使用 + 合理的缓存清理 |
| 数据一致性 | 写操作后立即失效缓存 |
| **DB 过载风险** | **全局 Semaphore 限制并发构建数量 (50)** |
| **并发构建重复** | **按 cache_key 的 asyncio.Lock** |
| **构建等待超时** | **3 秒超时后返回默认快照，允许请求继续处理** |
### 并发控制机制