mirror of
https://github.com/zhenxun-org/zhenxun_bot.git
synced 2026-09-29 00:32:06 +08:00
* 添加测试插件 * ✨ feat(auth): 添加缓存机制以优化用户和插件数据查询性能 * 🗑️ chore(help): 删除笨蛋检测插件代码 * ✨ feat(bot): 添加对扩展插件的加载支持 * ✨ feat(auth): 优化权限检查和缓存机制,增加用户和插件数据的并行查询 * ✨ feat(cache): 引入运行时缓存机制,优化用户和插件的ban记录管理 * ✨ feat(auth): 更新is_ban函数文档,添加参数和返回值说明 * ``` feat(auth): 使用内存缓存优化权限验证性能 - 移除数据库查询超时控制,改用 LevelUserMemoryCache、BotMemoryCache 和 PluginLimitMemoryCache 进行缓存查询 - 优化 auth_admin、auth_bot、auth_limit 权限验证逻辑,提升响应速度 - 添加 background 参数支持异步发送权限不足提示消息 - 移除 asyncio 依赖,简化代码结构 fix(auth): 修复限制通知频率控制问题 - 实现限制通知冷却机制,避免重复发送相同限制消息 - 添加 AUTH_LIMIT_NOTICE_CD 配置项,默认值为 2 秒 - 使用 FreqLimiter 控制限制通知发送频率 refactor(models): 增强模型数据变更时的缓存同步 - 在 BotConsole、GroupConsole、LevelUser、PluginLimit 模型的 create、update_or_create、save、delete 方法中自动更新对应缓存 - 确保数据库和内存缓存数据一致性 docs(ban_console): 修正文档注释并优化日志信息 - 修正 BanConsole 类中方法的文档字符串,使用标准参数和返回值格式 - 优化调试日志信息,使描述更加清晰准确 ``` * ✨ feat(auth): 更新Limit类以支持PluginLimitSnapshot,优化限制信息处理 * ✨ feat(bot_manage): 优化Bot控制台初始化逻辑,处理IntegrityError异常 * ✨ feat(mmm1): 新增消息推送功能,支持私聊和群聊事件处理 * ✨ feat(group_member_update): 优化群组成员更新逻辑,增加活动跟踪和消息记录功能 * ✨ feat(mmm1): 删除冗余的消息推送功能代码 * ✨ feat(auth): 优化权限检查逻辑,增加模块阻止功能和缓存处理 * ✨ feat(auth): 优化权限检查逻辑,增加快速ban检测和前置检查功能 * ✨ feat(chat_history): 增强消息处理规则,添加时间间隔限制以防止重复消息 ✨ feat(data_source): 引入异步获取群成员信息的功能,优化用户信息更新逻辑 * ✨ feat(send_queue): 添加异步发送队列以优化API调用和速率限制 * ✨ feat(auth): 添加缓存就绪检查以优化权限处理逻辑 * ✨ feat(plugins): 移除不必要的插件加载以简化插件管理 * ✨ feat(group_console): 优化群组获取逻辑,添加缓存检查以提升性能 ✨ 只接收缓存完成之后时间的消息 * ✨ feat(auth): 添加异步任务管理和超载检测,优化权限处理逻辑 ✨ feat(chat_history): 修改规则函数为异步,提升消息处理效率 ✨ feat(group_handle): 增加安全获取群组信息的异步方法,添加超时处理 ✨ feat(record_request): 引入安全获取群组信息的异步方法,优化群邀请处理 ✨ feat(ban_memory_cache): 增强禁言内存缓存,添加负缓存机制 ✨ feat(message_load): 新增消息负载检测功能,优化任务调度 ✨ feat(scheduler): 在调度器中集成消息压力检测,优化任务执行 ✨ feat(send_queue): 引入异步任务管理,优化发送队列处理 * ✨ feat(auth): 添加对 LevelUserSnapshot 和 BotSnapshot 的支持,优化权限检查逻辑 ✨ 格式化 * ✨ feat(db_context): 增强 get_or_create 方法,处理并发创建冲突并回退查询已存在记录 * ✨ feat(bot_manage): 增强 init_bot_console 方法,处理并发创建冲突并回退查询已存在的 bot 数据 * 🚨 auto fix by pre-commit hooks * ✨ feat(runtime_cache): 优化消息处理逻辑,支持 bytes 和 bytearray 类型的联合判断 * ✨ style(runtime_cache): 格式化代码,优化多行表达式的可读性 * 🚨 auto fix by pre-commit hooks * ✨ refactor: 优化类型注解,改进群组成员更新逻辑和平台处理 ✨ 格式化 * 🚨 auto fix by pre-commit hooks * ✨ refactor: 优化代码格式,增强可读性并修复类型注解 * 🚨 auto fix by pre-commit hooks * ✨ refactor: 更新文档注释,增强is_ban函数的可读性 * ✨ refactor: 优化代码结构,移除冗余函数,增强可读性并改进任务调度逻辑 * ✨ refactor: 调整定时任务时间,优化渲染服务的初始化逻辑,增强代码可读性 --------- Co-authored-by: ATTomatoo <1126160939@qq.com> Co-authored-by: pre-commit-ci[bot] <66853113+pre-commit-ci[bot]@users.noreply.github.com>
451 lines
12 KiB
Python
451 lines
12 KiB
Python
from dataclasses import dataclass
|
|
import time
|
|
from typing import Any, Generic, TypeVar
|
|
|
|
T = TypeVar("T")
|
|
|
|
|
|
@dataclass
|
|
class CacheData(Generic[T]):
|
|
"""缓存数据类,存储数据和过期时间"""
|
|
|
|
value: T
|
|
expire_time: float = 0 # 0表示永不过期
|
|
|
|
|
|
class CacheDict(Generic[T]):
|
|
"""缓存字典类,提供类似普通字典的接口,数据只存储在内存中"""
|
|
|
|
def __init__(self, name: str, expire: int = 0):
|
|
"""初始化缓存字典
|
|
|
|
参数:
|
|
name: 字典名称
|
|
expire: 过期时间(秒),默认为0表示永不过期
|
|
"""
|
|
self.name = name.upper()
|
|
self.expire = expire
|
|
self._data: dict[str, CacheData[T]] = {}
|
|
|
|
def expire_time(self, key: str) -> float:
|
|
"""获取字典项的过期时间"""
|
|
data = self._data.get(key)
|
|
if data is None:
|
|
return 0
|
|
if data.expire_time > 0 and data.expire_time < time.time():
|
|
del self._data[key]
|
|
return 0
|
|
return data.expire_time
|
|
|
|
def __getitem__(self, key: str) -> T:
|
|
"""获取字典项
|
|
|
|
参数:
|
|
key: 字典键
|
|
|
|
返回:
|
|
T: 字典值
|
|
"""
|
|
if value := self._data.get(key):
|
|
if value.expire_time > 0 and value.expire_time < time.time():
|
|
del self._data[key]
|
|
raise KeyError(f"键 {key} 已过期")
|
|
return value.value
|
|
raise KeyError(f"键 {key} 不存在")
|
|
|
|
def __setitem__(self, key: str, value: T) -> None:
|
|
"""设置字典项
|
|
|
|
参数:
|
|
key: 字典键
|
|
value: 字典值
|
|
"""
|
|
expire_time = time.time() + self.expire if self.expire > 0 else 0
|
|
self._data[key] = CacheData(value=value, expire_time=expire_time)
|
|
|
|
def __delitem__(self, key: str) -> None:
|
|
"""删除字典项
|
|
|
|
参数:
|
|
key: 字典键
|
|
"""
|
|
if key in self._data:
|
|
del self._data[key]
|
|
|
|
def __contains__(self, key: str) -> bool:
|
|
"""检查键是否存在
|
|
|
|
参数:
|
|
key: 字典键
|
|
|
|
返回:
|
|
bool: 是否存在
|
|
"""
|
|
data = self._data.get(key)
|
|
if data is None:
|
|
return False
|
|
if data.expire_time > 0 and data.expire_time < time.time():
|
|
del self._data[key]
|
|
return False
|
|
return True
|
|
|
|
def get(self, key: str, default: Any = None) -> T | None:
|
|
"""获取字典项,如果不存在返回默认值
|
|
|
|
参数:
|
|
key: 字典键
|
|
default: 默认值
|
|
|
|
返回:
|
|
Any: 字典值或默认值
|
|
"""
|
|
if value := self._data.get(key):
|
|
if value.expire_time > 0 and value.expire_time < time.time():
|
|
del self._data[key]
|
|
return default
|
|
return default if value.value is None else value.value
|
|
return default
|
|
|
|
def set(self, key: str, value: Any, expire: int | None = None):
|
|
"""设置字典项
|
|
|
|
参数:
|
|
key: 字典键
|
|
value: 字典值
|
|
expire: 过期时间(秒),为None时使用默认值
|
|
"""
|
|
# 计算过期时间
|
|
expire_time = 0
|
|
if expire is not None and expire > 0:
|
|
expire_time = time.time() + expire
|
|
elif self.expire > 0:
|
|
expire_time = time.time() + self.expire
|
|
|
|
self._data[key] = CacheData(value=value, expire_time=expire_time)
|
|
|
|
def pop(self, key: str, default: Any = None) -> T:
|
|
"""删除并返回字典项
|
|
|
|
参数:
|
|
key: 字典键
|
|
default: 默认值
|
|
|
|
返回:
|
|
Any: 字典值或默认值
|
|
"""
|
|
data = self._data.get(key)
|
|
if data is None:
|
|
return default
|
|
if data.expire_time > 0 and data.expire_time < time.time():
|
|
del self._data[key]
|
|
return default
|
|
del self._data[key]
|
|
return data.value
|
|
|
|
def clear(self) -> None:
|
|
"""清空字典"""
|
|
self._data.clear()
|
|
|
|
def keys(self) -> list[str]:
|
|
"""获取所有键
|
|
|
|
返回:
|
|
list[str]: 键列表
|
|
"""
|
|
# 清理过期的键
|
|
self._clean_expired()
|
|
return list(self._data.keys())
|
|
|
|
def values(self) -> list[Any]:
|
|
"""获取所有值
|
|
|
|
返回:
|
|
list[Any]: 值列表
|
|
"""
|
|
# 清理过期的键
|
|
self._clean_expired()
|
|
return [data.value for data in self._data.values()]
|
|
|
|
def items(self) -> list[tuple[str, T]]:
|
|
"""获取所有键值对
|
|
|
|
返回:
|
|
list[tuple[str, Any]]: 键值对列表
|
|
"""
|
|
# 清理过期的键
|
|
self._clean_expired()
|
|
return [(key, data.value) for key, data in self._data.items()]
|
|
|
|
def _clean_expired(self):
|
|
"""清理过期的键"""
|
|
now = time.time()
|
|
expired_keys = [
|
|
key
|
|
for key, data in self._data.items()
|
|
if data.expire_time > 0 and data.expire_time < now
|
|
]
|
|
for key in expired_keys:
|
|
del self._data[key]
|
|
|
|
def __len__(self) -> int:
|
|
"""获取字典长度
|
|
|
|
返回:
|
|
int: 字典长度
|
|
"""
|
|
# 清理过期的键
|
|
self._clean_expired()
|
|
return len(self._data)
|
|
|
|
def __str__(self) -> str:
|
|
"""字符串表示
|
|
|
|
返回:
|
|
str: 字符串表示
|
|
"""
|
|
# 清理过期的键
|
|
self._clean_expired()
|
|
return f"CacheDict({self.name}, {len(self._data)} items)"
|
|
|
|
|
|
class CacheList(Generic[T]):
|
|
"""缓存列表类,提供类似普通列表的接口,数据只存储在内存中"""
|
|
|
|
def __init__(self, name: str, expire: int = 0):
|
|
"""初始化缓存列表
|
|
|
|
参数:
|
|
name: 列表名称
|
|
expire: 过期时间(秒),默认为0表示永不过期
|
|
"""
|
|
self.name = name.upper()
|
|
self.expire = expire
|
|
self._data: list[CacheData[T]] = []
|
|
self._expire_time = 0
|
|
|
|
# 如果设置了过期时间,计算整个列表的过期时间
|
|
if self.expire > 0:
|
|
self._expire_time = time.time() + self.expire
|
|
|
|
def __getitem__(self, index: int) -> T:
|
|
"""获取列表项
|
|
|
|
参数:
|
|
index: 列表索引
|
|
|
|
返回:
|
|
T: 列表值
|
|
"""
|
|
# 检查整个列表是否过期
|
|
if self._is_expired():
|
|
self.clear()
|
|
raise IndexError(f"列表索引 {index} 超出范围")
|
|
|
|
if 0 <= index < len(self._data):
|
|
return self._data[index].value
|
|
raise IndexError(f"列表索引 {index} 超出范围")
|
|
|
|
def __setitem__(self, index: int, value: T):
|
|
"""设置列表项
|
|
|
|
参数:
|
|
index: 列表索引
|
|
value: 列表值
|
|
"""
|
|
# 检查整个列表是否过期
|
|
if self._is_expired():
|
|
self.clear()
|
|
|
|
# 确保索引有效
|
|
while len(self._data) <= index:
|
|
raise IndexError(f"列表索引 {index} 超出范围")
|
|
self._data[index] = CacheData(value=value)
|
|
|
|
# 更新过期时间
|
|
self._update_expire_time()
|
|
|
|
def __delitem__(self, index: int):
|
|
"""删除列表项
|
|
|
|
参数:
|
|
index: 列表索引
|
|
"""
|
|
# 检查整个列表是否过期
|
|
if self._is_expired():
|
|
self.clear()
|
|
raise IndexError(f"列表索引 {index} 超出范围")
|
|
|
|
if not 0 <= index < len(self._data):
|
|
raise IndexError(f"列表索引 {index} 超出范围")
|
|
del self._data[index]
|
|
# 更新过期时间
|
|
self._update_expire_time()
|
|
|
|
def __len__(self) -> int:
|
|
"""获取列表长度
|
|
|
|
返回:
|
|
int: 列表长度
|
|
"""
|
|
# 检查整个列表是否过期
|
|
if self._is_expired():
|
|
self.clear()
|
|
return len(self._data)
|
|
|
|
def append(self, value: T):
|
|
"""添加列表项
|
|
|
|
参数:
|
|
value: 列表值
|
|
"""
|
|
# 检查整个列表是否过期
|
|
if self._is_expired():
|
|
self.clear()
|
|
|
|
self._data.append(CacheData(value=value))
|
|
|
|
# 更新过期时间
|
|
self._update_expire_time()
|
|
|
|
def extend(self, values: list[T]):
|
|
"""扩展列表
|
|
|
|
参数:
|
|
values: 要添加的值列表
|
|
"""
|
|
# 检查整个列表是否过期
|
|
if self._is_expired():
|
|
self.clear()
|
|
|
|
self._data.extend([CacheData(value=v) for v in values])
|
|
|
|
# 更新过期时间
|
|
self._update_expire_time()
|
|
|
|
def insert(self, index: int, value: T):
|
|
"""插入列表项
|
|
|
|
参数:
|
|
index: 插入位置
|
|
value: 列表值
|
|
"""
|
|
# 检查整个列表是否过期
|
|
if self._is_expired():
|
|
self.clear()
|
|
|
|
self._data.insert(index, CacheData(value=value))
|
|
|
|
# 更新过期时间
|
|
self._update_expire_time()
|
|
|
|
def pop(self, index: int = -1) -> T:
|
|
"""删除并返回列表项
|
|
|
|
参数:
|
|
index: 列表索引,默认为最后一项
|
|
|
|
返回:
|
|
Any: 列表值
|
|
"""
|
|
# 检查整个列表是否过期
|
|
if self._is_expired():
|
|
self.clear()
|
|
raise IndexError("从空列表中弹出")
|
|
|
|
if not self._data:
|
|
raise IndexError("从空列表中弹出")
|
|
|
|
item = self._data.pop(index)
|
|
|
|
# 更新过期时间
|
|
self._update_expire_time()
|
|
|
|
return item.value
|
|
|
|
def remove(self, value: T):
|
|
"""删除第一个匹配的列表项
|
|
|
|
参数:
|
|
value: 要删除的值
|
|
"""
|
|
# 检查整个列表是否过期
|
|
if self._is_expired():
|
|
self.clear()
|
|
raise ValueError(f"{value} 不在列表中")
|
|
|
|
# 查找匹配的项
|
|
for i, item in enumerate(self._data):
|
|
if item.value == value:
|
|
del self._data[i]
|
|
# 更新过期时间
|
|
self._update_expire_time()
|
|
return
|
|
|
|
raise ValueError(f"{value} 不在列表中")
|
|
|
|
def clear(self) -> None:
|
|
"""清空列表"""
|
|
self._data.clear()
|
|
# 重置过期时间
|
|
self._update_expire_time()
|
|
|
|
def index(self, value: T, start: int = 0, end: int | None = None) -> int:
|
|
"""查找值的索引
|
|
|
|
参数:
|
|
value: 要查找的值
|
|
start: 起始索引
|
|
end: 结束索引
|
|
|
|
返回:
|
|
int: 索引位置
|
|
"""
|
|
# 检查整个列表是否过期
|
|
if self._is_expired():
|
|
self.clear()
|
|
raise ValueError(f"{value} 不在列表中")
|
|
|
|
end = end if end is not None else len(self._data)
|
|
|
|
for i in range(start, min(end, len(self._data))):
|
|
if self._data[i].value == value:
|
|
return i
|
|
|
|
raise ValueError(f"{value} 不在列表中")
|
|
|
|
def count(self, value: T) -> int:
|
|
"""计算值出现的次数
|
|
|
|
参数:
|
|
value: 要计数的值
|
|
|
|
返回:
|
|
int: 出现次数
|
|
"""
|
|
# 检查整个列表是否过期
|
|
if self._is_expired():
|
|
self.clear()
|
|
return 0
|
|
|
|
# sourcery skip: simplify-constant-sum
|
|
return sum(1 for item in self._data if item.value == value)
|
|
|
|
def _is_expired(self) -> bool:
|
|
"""检查整个列表是否过期"""
|
|
return self._expire_time > 0 and self._expire_time < time.time()
|
|
|
|
def _update_expire_time(self):
|
|
"""更新过期时间"""
|
|
self._expire_time = time.time() + self.expire if self.expire > 0 else 0
|
|
|
|
def __str__(self) -> str:
|
|
"""字符串表示
|
|
|
|
返回:
|
|
str: 字符串表示
|
|
"""
|
|
# 检查整个列表是否过期
|
|
if self._is_expired():
|
|
self.clear()
|
|
return f"CacheList({self.name}, {len(self._data)} items)"
|