♻️ refactor(core): 重构 AI 能力与定时任务调度系统 (#2148)

* ♻️ refactor(core): 重构 AI 能力与定时任务调度系统

- 【AI 能力与工具】重构 Capability 注册与管理机制,引入 CapabilityManager 统一管理
- 移除全局能力注册表,改用声明式装饰器 `@capability` 进行解耦注册
- 重构工具解析器链,使用统一的 BaseToolResolver 代替原有的多个特定解析器
- 增强工具查询过滤,支持通配符匹配、工具箱过滤和排除标签
- 【定时任务调度】重构定时任务管理器,引入 SchedulerRegistry 统一管理任务元数据
- 引入 JobConfig 聚合定时任务配置,支持用户维度的定时任务调度
- 重构执行分发器,支持并发限制、串行间隔和随机延迟打散
- 【运行上下文】引入 ScheduledDeps 以支持后台和定时任务环境下的依赖注入
- 优化 RunContext,支持从定时任务上下文快速构造,并提供 emit 辅助方法
- 【日志与监控】引入 AILoggerProxy,实现 AI 各模块的专属日志输出
- 将各模块的全局 logger 替换为对应的模块专属日志代理
- 【其他优化】修复 Pydantic V1 兼容层中 model_validator 的装饰器兼容性问题
- 在非交互式环境(如定时任务)中自动隐藏 HITL 交互工具以节省 Token

* ♻️ refactor(core): 优化内部导入路径并提升 Pydantic 兼容性

- 【重构】将 `services/ai` 模块内的绝对导入重构为相对导入,优化包结构
- 【重构】移除不必要的 `if TYPE_CHECKING` 保护,通过 `from __future__ import annotations` 直接导入类型
- 【清理】清理 `core/messages/types.py` 中未使用的 `AssistantContentUnion` 等联合类型定义
- 【优化】在 `utils/pydantic_compat.py` 中新增 `model_rebuild` 兼容函数,统一 Pydantic V1/V2 的模型重建逻辑
- 【优化】将部分函数内部的延迟导入提升至模块顶部,规范代码结构

* ♻️ refactor(imports): 优化导入路径为相对导入并清理冗余导入

- 【重构】将 AI 服务相关模块中的绝对导入路径修改为相对导入,提升模块内聚性与可移植性
- 【清理】移除多处函数内部或类方法中未使用的冗余导入,避免循环引用和资源浪费
- 【格式化】微调部分工具装饰器和返回语句的格式与尾随逗号

* 🚨 auto fix by pre-commit hooks

---------

Co-authored-by: webjoin111 <455457521@qq.com>
Co-authored-by: pre-commit-ci[bot] <66853113+pre-commit-ci[bot]@users.noreply.github.com>
This commit is contained in:
Rumio
2026-07-10 09:14:06 +08:00
committed by GitHub
co-authored by webjoin111 pre-commit-ci[bot]
parent 0b32d69c9c
commit 922d092650
132 changed files with 2372 additions and 1972 deletions
@@ -6,7 +6,7 @@ from typing import Any, Literal, Protocol, runtime_checkable
from zhenxun.services.ai.core.messages import EmbedBatch
from zhenxun.services.ai.llm.api import embed as api_embed
from zhenxun.services.ai.message_builder import MessageBuilder
from zhenxun.services.log import logger
from zhenxun.services.ai.utils.logger import log_rag as logger
EmbedTaskType = Literal[
"general", "query", "document", "similarity", "classification", "clustering"
@@ -11,6 +11,7 @@ from zhenxun.services.ai.context.rag.models import (
SearchResult,
)
from zhenxun.services.ai.context.rag.retrieval import FilterEvaluator
from zhenxun.services.ai.utils.logger import log_rag as logger
from zhenxun.services.ai.utils.scope import ScopeSelector
from zhenxun.services.db_context import Model
@@ -124,8 +125,6 @@ class DictStorageBackend(StorageBackend):
SearchResult(record=self._records[r_id], score=float(score))
)
except ValueError as e:
from zhenxun.services.log import logger
logger.warning(
"⚠️ DictStorage 中缓存的向量维度与当前查询维度不匹配,"
f"跳过向量检索。原因: {e}"
@@ -284,8 +283,6 @@ class TortoiseStorageBackend(StorageBackend):
)
)
except ValueError as e:
from zhenxun.services.log import logger
logger.warning(
"⚠️ 数据库中缓存的向量维度与当前模型查询维度不匹配,"
f"已安全跳过向量检索(降级为稀疏匹配)。原因: {e}"
@@ -579,8 +576,6 @@ class LanceDBStorageBackend(StorageBackend):
.to_list()
)
except Exception as e:
from zhenxun.services.log import logger
logger.warning(f"LanceDB FTS 检索失败(可能是由于尚未创建FTS索引): {e}")
return []
else:
+9 -7
View File
@@ -1,9 +1,11 @@
from typing import Any
from zhenxun.services.ai.context.rag.backends import StorageBackend
from zhenxun.services.ai.context.rag.configs import RAGConfig
from zhenxun.services.ai.context.rag.engine import ScopedRAGClient
from zhenxun.services.ai.context.rag.ingestion import (
from zhenxun.services.ai.utils.logger import log_rag as logger
from .backends import StorageBackend
from .configs import RAGConfig
from .engine import ScopedRAGClient
from .ingestion import (
ChunkingStrategy,
DedupNode,
DocumentChunking,
@@ -12,7 +14,7 @@ from zhenxun.services.ai.context.rag.ingestion import (
IndexPipeline,
StorageCommitNode,
)
from zhenxun.services.ai.context.rag.retrieval import (
from .retrieval import (
BaseRetriever,
DatabaseSparseRetriever,
HybridRetriever,
@@ -23,7 +25,6 @@ from zhenxun.services.ai.context.rag.retrieval import (
RerankRetriever,
VectorDBRetriever,
)
from zhenxun.services.log import logger
class RAGBuilder:
@@ -201,9 +202,10 @@ class RAGBuilder:
embedder = cfg.embedder
if not embedder:
from zhenxun.services.ai.context.rag.backends import DefaultEmbedder
from zhenxun.services.ai.llm.manager import get_default_model
from .backends import DefaultEmbedder
embedder = DefaultEmbedder(model_name=get_default_model("embedding"))
logger.debug("RAGBuilder: 未指定 Embedder,已使用系统默认 Embedder。")
+3 -3
View File
@@ -2,9 +2,9 @@ from typing import Any
from pydantic import BaseModel, ConfigDict, Field
from zhenxun.services.ai.context.rag.backends import Embedder, StorageBackend
from zhenxun.services.ai.context.rag.ingestion import ChunkingStrategy
from zhenxun.services.ai.context.rag.retrieval import (
from .backends import Embedder, StorageBackend
from .ingestion import ChunkingStrategy
from .retrieval import (
BaseRetriever,
PostProcessor,
PreProcessor,
+7 -6
View File
@@ -1,20 +1,21 @@
from typing import Any
from zhenxun.services.ai.context.rag.backends import (
from zhenxun.services.ai.utils.scope import normalize_scope_path
from .backends import (
StorageBackend,
)
from zhenxun.services.ai.context.rag.configs import RAGConfig
from zhenxun.services.ai.context.rag.ingestion import (
from .configs import RAGConfig
from .ingestion import (
IndexPipeline,
)
from zhenxun.services.ai.context.rag.models import (
from .models import (
BaseRecord,
SearchResult,
)
from zhenxun.services.ai.context.rag.retrieval import (
from .retrieval import (
BaseRetriever,
)
from zhenxun.services.ai.utils.scope import normalize_scope_path
class ScopedRAGClient:
+4 -3
View File
@@ -2,9 +2,10 @@ from abc import ABC, abstractmethod
import asyncio
import re
from zhenxun.services.ai.context.rag.models import BaseRecord
from zhenxun.services.ai.context.rag.utils import cosine_similarity
from zhenxun.services.log import logger
from zhenxun.services.ai.utils.logger import log_rag as logger
from .models import BaseRecord
from .utils import cosine_similarity
class ChunkingStrategy(ABC):
+4 -3
View File
@@ -3,11 +3,12 @@ import asyncio
import time
from typing import TYPE_CHECKING, Any, Protocol, cast, runtime_checkable
from zhenxun.services.ai.context.rag.models import QueryRequest, SearchResult
from zhenxun.services.log import logger
from zhenxun.services.ai.utils.logger import log_rag as logger
from .models import QueryRequest, SearchResult
if TYPE_CHECKING:
from zhenxun.services.ai.context.rag.backends.storages import StorageBackend
from .backends.storages import StorageBackend
def normalize_query_text(query: Any) -> str: