mirror of
https://github.com/zhenxun-org/zhenxun_bot.git
synced 2026-10-03 02:30:01 +08:00
* ✨ feat!(llm): 重构并升级大语言模型服务为全新 AI 智能体框架 - 【重构】将原 services/llm 重构并迁移至全新的 services/ai 架构,提供向下兼容垫片 - 【新增】引入 Agent、Team、Workflow 三大智能体与工作流编排范式 - 【新增】引入基于 RAG 的长期向量记忆与中期槽位记忆系统 - 【新增】引入基于 Docker 的安全代码执行沙箱环境 - 【新增】支持 MCP 协议,允许动态管理和调用 MCP 服务 - 【新增】引入输入输出安全合规护栏与自愈反思机制 - 【优化】重构并优化多厂商 API 适配器 (Gemini, OpenAI, DeepSeek, GLM 等) - 【优化】优化日志脱敏与 Token 预估机制 - 【移除】移除旧版 llm default 和 llm reset-key 命令,新增 llm mcp 管理命令 * 🔧 chore(deps): 更新项目依赖与配置 - 添加 mcp、jieba 和 aiodocker 依赖到配置文件及 requirements.txt - 在 pyright 配置中设置 reportMissingImports 为 none - 调整 .gitignore 中 resources 目录的忽略规则 * ♻️ refactor(tools): 重构工具终止机制并清理知识库日志输出 - 统一使用 `context.state["__end_run__"]` 替代 `EndRunResult` 控制任务结束 - 移除文件系统和向量知识库检索工具中 `ToolResult` 的 `.with_log` 调用 - 调整指令处理器(Directive)的返回值为 `tool_res.output` - 修复部分类型检查警告并优化联合类型判断语法 * ♻️ refactor(tools): 重构工具副作用指令与控制流熔断机制 - 引入 `DirectivePayload` 及 `ToolResult` 的子类以结构化表达工具副作用 - 移除通过 `context.state` 传递魔术变量的隐式控制流设计 - 重构 `DirectiveManager` 处理器接口,直接在处理器中修改 `AgentState` 并构建 `AgentRunResult` - 在 `StandardAgentExecutor` 中统一通过 `directive_manager` 调度工具返回的副作用指令 - 补全 `MessageBuilder` 中部分核心方法的文档注释 * 🐛 fix(sandbox): 修复 Docker 沙箱容器状态检测与会话清理逻辑 -【修复】修正 `is_alive` 中直接读取私有属性的问题,改用 `show()` 返回值 -【修复】解决 `execute_code` 中缓存的执行器与当前会话不一致的问题 -【优化】在清理工作区前增加容器存活检测,避免向已死容器发送请求 -【优化】创建容器时增加运行状态校验,若已停止则自动从缓存中移除并重建 -【优化】优化容器销毁和清理逻辑,静默处理容器不存在 (404) 的异常 * 📝 docs(core): 补充核心模块初始化方法的文档注释 * 🚨 auto fix by pre-commit hooks --------- Co-authored-by: webjoin111 <455457521@qq.com> Co-authored-by: pre-commit-ci[bot] <66853113+pre-commit-ci[bot]@users.noreply.github.com>
212 lines
7.8 KiB
Python
212 lines
7.8 KiB
Python
from collections.abc import Callable
|
|
from typing import Any, cast
|
|
|
|
from zhenxun.services.ai.context.memory.models import MemoryConfig
|
|
from zhenxun.services.ai.context.memory.storage.backends import (
|
|
InMemoryChatContext,
|
|
MemoryScope,
|
|
)
|
|
from zhenxun.services.ai.context.memory.storage.interfaces import (
|
|
BaseChatContext,
|
|
BaseSlotContext,
|
|
)
|
|
from zhenxun.services.ai.context.rag.backends import Embedder, StorageBackend
|
|
from zhenxun.services.ai.utils.scope import BaseScopeBuilder
|
|
from zhenxun.utils.utils import infer_plugin_namespace
|
|
|
|
|
|
class MemoryCleaner(BaseScopeBuilder["MemoryCleaner"]):
|
|
"""
|
|
声明式记忆清理构建器 (Query Builder)。
|
|
为第三方开发者提供极端友好的链式 API,彻底屏蔽底层前缀逻辑。
|
|
"""
|
|
|
|
def __init__(self, manager: "GlobalMemoryManager"):
|
|
super().__init__()
|
|
self.manager = manager
|
|
self._config: Any = None
|
|
|
|
def config(self, cfg: Any):
|
|
"""指定私有记忆配置(自动识别未全局注册 of 第三方私有数据库实例)"""
|
|
self._config = cfg.build() if hasattr(cfg, "build") else cfg
|
|
return self
|
|
|
|
async def clear_short_term(self):
|
|
"""一键清理目标范围下的短期对话历史记忆"""
|
|
if self._config and self._config.short_term.backend:
|
|
await self._config.short_term.backend.clear_by_query(self._selector)
|
|
else:
|
|
for backend in self.manager._chat_backends.values():
|
|
await backend.clear_by_query(self._selector)
|
|
|
|
async def clear_slots(self):
|
|
"""一键清理目标范围下的中期记忆槽 (Memory Slots)"""
|
|
if self._config and self._config.slots.backend:
|
|
await self._config.slots.backend.clear_by_query(self._selector)
|
|
else:
|
|
for backend in self.manager._slot_backends.values():
|
|
await backend.clear_by_query(self._selector)
|
|
|
|
async def clear_long_term(self):
|
|
"""一键清理目标范围下的长期向量记忆 (RAG Vector Database)"""
|
|
if self._config and self._config.long_term.backend:
|
|
from zhenxun.services.ai.context.rag.backends import StorageBackend
|
|
|
|
storage = cast(StorageBackend, self._config.long_term.backend)
|
|
await storage.clear_by_query(self._selector)
|
|
else:
|
|
for factory in self.manager._storage_factories.values():
|
|
storage = factory()
|
|
if hasattr(storage, "clear_by_query"):
|
|
await storage.clear_by_query(self._selector)
|
|
else:
|
|
await storage.delete(scope_prefix=self._selector.scope_prefix)
|
|
|
|
async def clear_all(self):
|
|
"""一键清理指定范围下的所有生命周期记忆(对话、槽位、RAG)"""
|
|
from zhenxun.services.log import logger
|
|
|
|
await self.clear_short_term()
|
|
await self.clear_slots()
|
|
await self.clear_long_term()
|
|
logger.info(
|
|
f"🧹 [MemoryCleaner] 成功清理作用域 '{self._selector.scope_prefix}'"
|
|
"下的所有记忆痕迹!"
|
|
)
|
|
|
|
|
|
class GlobalMemoryManager:
|
|
"""
|
|
全局记忆大管家 (IoC 容器)。
|
|
使用现代化依赖注入机制管理短/长期记忆引擎的默认实例。
|
|
"""
|
|
|
|
def __init__(self):
|
|
self._chat_backends: dict[str, BaseChatContext] = {
|
|
"global": InMemoryChatContext()
|
|
}
|
|
self._slot_backends: dict[str, BaseSlotContext] = {}
|
|
|
|
from zhenxun.services.ai.context.rag.backends import DictStorageBackend
|
|
|
|
self._storage_factories: dict[str, Callable[[], StorageBackend]] = {
|
|
"global": lambda: DictStorageBackend()
|
|
}
|
|
|
|
def register_chat_backend(
|
|
self, backend: BaseChatContext, scope: str | None = None
|
|
) -> None:
|
|
"""注册特定命名空间的短期记忆存储后端。"""
|
|
ns = scope if scope is not None else infer_plugin_namespace()
|
|
self._chat_backends[ns] = backend
|
|
|
|
def register_slot_backend(
|
|
self, backend: BaseSlotContext, scope: str | None = None
|
|
) -> None:
|
|
"""注册特定命名空间的中期记忆槽存储后端。"""
|
|
ns = scope if scope is not None else infer_plugin_namespace()
|
|
self._slot_backends[ns] = backend
|
|
|
|
def register_storage_factory(
|
|
self, factory: Callable[[], StorageBackend], scope: str | None = None
|
|
) -> None:
|
|
"""注册特定命名空间的长期记忆向量存储工厂。"""
|
|
ns = scope if scope is not None else infer_plugin_namespace()
|
|
self._storage_factories[ns] = factory
|
|
|
|
def cleaner(self) -> MemoryCleaner:
|
|
"""获取声明式记忆清理构建器,供第三方开发者极速清理指定记忆"""
|
|
return MemoryCleaner(self)
|
|
|
|
def get_embedder(self, embedder_val: "Embedder | str | None") -> Embedder | None:
|
|
"""获取向量化引擎实例。如果传入的是字符串,则视为 API 模型名称。"""
|
|
if not embedder_val:
|
|
return None
|
|
|
|
if isinstance(embedder_val, str):
|
|
from zhenxun.services.ai.context.rag.backends.embedders import (
|
|
DefaultEmbedder,
|
|
)
|
|
|
|
return DefaultEmbedder(model_name=embedder_val)
|
|
|
|
return embedder_val
|
|
|
|
def get_chat_context(
|
|
self, config: MemoryConfig | None, namespace: str = "global"
|
|
) -> BaseChatContext | None:
|
|
"""根据配置分配对应的短期对话历史实例"""
|
|
if not config or not config.short_term.enable:
|
|
return None
|
|
|
|
backend_cfg = config.short_term.backend
|
|
if backend_cfg is not None:
|
|
return cast(BaseChatContext, backend_cfg)
|
|
|
|
return self._chat_backends.get(namespace) or self._chat_backends["global"]
|
|
|
|
def get_slot_context(
|
|
self, config: MemoryConfig | None, namespace: str = "global"
|
|
) -> BaseSlotContext | None:
|
|
"""根据配置分配对应的槽位记忆实例"""
|
|
if not config or not config.slots.enable:
|
|
return None
|
|
|
|
backend_cfg = config.slots.backend
|
|
if backend_cfg is not None:
|
|
return cast(BaseSlotContext, backend_cfg)
|
|
|
|
return self._slot_backends.get(namespace) or self._slot_backends["global"]
|
|
|
|
def get_long_term_memory(
|
|
self, config: MemoryConfig | None, namespace: str = "global"
|
|
) -> MemoryScope | None:
|
|
"""根据声明式配置动态组装长期向量记忆实例"""
|
|
if not config or not config.long_term.enable:
|
|
return None
|
|
|
|
if config.long_term.engine is not None:
|
|
return MemoryScope(
|
|
rag_client=config.long_term.engine,
|
|
)
|
|
|
|
storage_instance = None
|
|
backend_cfg = config.long_term.backend
|
|
if backend_cfg is not None:
|
|
storage_instance = cast(StorageBackend, backend_cfg)
|
|
else:
|
|
factory = (
|
|
self._storage_factories.get(namespace)
|
|
or self._storage_factories["global"]
|
|
)
|
|
storage_instance = factory()
|
|
|
|
embedder = self.get_embedder(config.long_term.embedder)
|
|
|
|
from zhenxun.services.ai.context.rag.builder import RAGBuilder
|
|
|
|
builder = RAGBuilder(storage_instance).with_scope("/")
|
|
if embedder:
|
|
builder.with_embedder(embedder)
|
|
|
|
from zhenxun.services.ai.context.memory.models import MemoryScoringConfig
|
|
|
|
scoring_cfg = MemoryScoringConfig()
|
|
|
|
builder.enable_lifecycle_scoring(
|
|
half_life_days=scoring_cfg.recency_half_life_days,
|
|
decay_weight=scoring_cfg.recency_weight,
|
|
semantic_weight=scoring_cfg.semantic_weight,
|
|
importance_weight=scoring_cfg.importance_weight,
|
|
reinforcement_weight=scoring_cfg.reinforcement_weight,
|
|
)
|
|
|
|
client = builder.build()
|
|
|
|
return MemoryScope(
|
|
rag_client=client,
|
|
)
|
|
|
|
|
|
memory_manager = GlobalMemoryManager()
|