mirror of
https://github.com/zhenxun-org/zhenxun_bot.git
synced 2025-12-14 21:52:56 +08:00
* ✨ feat(env): 支持git更新 * ✨ feat(aliyun): 更新阿里云URL构建逻辑,支持组织名称并优化令牌解码处理 * ✨ feat(config): 修改错误提示信息,更新基础配置文件名称为.env.example * ⚡ 插件商店支持aliyun * ✨ feat(store): 优化插件数据获取逻辑,合并插件列表和额外插件列表 * 🐛 修复非git仓库的初始化更新 * ✨ feat(update): 增强更新提示信息,添加非git源的变更文件说明 * 🎨 代码格式化 * ✨ webui与resources支持git更新 * ✨ feat(update): 更新webui路径处理逻辑 * Fix/test_runwork (#2001) * fix(test): 修复测试工作流 - 修改自动更新模块中的导入路径 - 更新插件商店模块中的插件信息获取逻辑 - 优化插件添加、更新和移除流程 - 统一插件相关错误信息的格式 - 调整测试用例以适应新的插件管理逻辑 * test(builtin_plugins): 重构插件商店相关测试 - 移除 jsd 相关测试用例,只保留 gh(GitHub)的测试 - 删除了 test_plugin_store.py 文件,清理了插件商店的测试 - 更新了 test_search_plugin.py 中的插件版本号 - 调整了 test_update_plugin.py 中的已加载插件版本 - 移除了 StoreManager 类中的 is_external 变量 - 更新了 RepoFileManager 类中的文件获取逻辑,优先使用 GitHub * ✨ feat(submodule): 添加子模块管理功能,支持子模块的初始化、更新和信息获取 * ✨ feat(update): 移除资源管理器,重构更新逻辑,支持通过ZhenxunRepoManager进行资源和Web UI的更新 * test(auto_update): 修改更新检测消息格式 (#2003) - 移除了不必要的版本号后缀(如 "-e6f17c4") - 统一了版本更新消息的格式,删除了冗余信息 * 🐛 修复web zip更新路径问题 * ⚡ 文件获取优化使用ali * Fix/test (#2008) * test: 修复bot测试 - 在 test_check_update.py 中跳过两个测试函数 - 移除 test_check.py 中的 mocked_api 参数和相关调用 - 删除 test_add_plugin.py 中的多个测试函数 - 移除 test_remove_plugin.py 中的 mocked_api 参数和相关调用 - 删除 test_search_plugin.py 中的多个测试函数 - 移除 test_update_all_plugin.py 和 test_update_plugin.py 中的 mocked_api 参数和相关调用 * 🚨 auto fix by pre-commit hooks --------- Co-authored-by: pre-commit-ci[bot] <66853113+pre-commit-ci[bot]@users.noreply.github.com> * 修复res zip更新路径问题 * 🐛 修复zhenxun更新zip占用问题 * ✨ feat(update): 优化资源更新逻辑,调整更新路径和消息处理 --------- Co-authored-by: molanp <104612722+molanp@users.noreply.github.com> Co-authored-by: pre-commit-ci[bot] <66853113+pre-commit-ci[bot]@users.noreply.github.com>
159 lines
4.9 KiB
Python
159 lines
4.9 KiB
Python
import asyncio
|
|
from pathlib import Path
|
|
from urllib.parse import urlparse
|
|
|
|
import aiofiles
|
|
import nonebot
|
|
from nonebot.utils import is_coroutine_callable
|
|
from tortoise import Tortoise
|
|
from tortoise.connection import connections
|
|
|
|
from zhenxun.configs.config import BotConfig
|
|
from zhenxun.services.log import logger
|
|
from zhenxun.utils.manager.priority_manager import PriorityLifecycle
|
|
|
|
from .base_model import Model
|
|
from .config import (
|
|
DB_TIMEOUT_SECONDS,
|
|
MYSQL_CONFIG,
|
|
POSTGRESQL_CONFIG,
|
|
SLOW_QUERY_THRESHOLD,
|
|
SQLITE_CONFIG,
|
|
db_model,
|
|
prompt,
|
|
)
|
|
from .exceptions import DbConnectError, DbUrlIsNode
|
|
from .utils import with_db_timeout
|
|
|
|
MODELS = db_model.models
|
|
SCRIPT_METHOD = db_model.script_method
|
|
|
|
__all__ = [
|
|
"DB_TIMEOUT_SECONDS",
|
|
"MODELS",
|
|
"SCRIPT_METHOD",
|
|
"SLOW_QUERY_THRESHOLD",
|
|
"DbConnectError",
|
|
"DbUrlIsNode",
|
|
"Model",
|
|
"disconnect",
|
|
"init",
|
|
"with_db_timeout",
|
|
]
|
|
|
|
driver = nonebot.get_driver()
|
|
|
|
|
|
def get_config() -> dict:
|
|
"""获取数据库配置"""
|
|
parsed = urlparse(BotConfig.db_url)
|
|
|
|
# 基础配置
|
|
config = {
|
|
"connections": {
|
|
"default": BotConfig.db_url # 默认直接使用连接字符串
|
|
},
|
|
"apps": {
|
|
"models": {
|
|
"models": db_model.models,
|
|
"default_connection": "default",
|
|
}
|
|
},
|
|
"timezone": "Asia/Shanghai",
|
|
}
|
|
|
|
# 根据数据库类型应用高级配置
|
|
if parsed.scheme.startswith("postgres"):
|
|
config["connections"]["default"] = {
|
|
"engine": "tortoise.backends.asyncpg",
|
|
"credentials": {
|
|
"host": parsed.hostname,
|
|
"port": parsed.port or 5432,
|
|
"user": parsed.username,
|
|
"password": parsed.password,
|
|
"database": parsed.path[1:],
|
|
},
|
|
**POSTGRESQL_CONFIG,
|
|
}
|
|
elif parsed.scheme == "mysql":
|
|
config["connections"]["default"] = {
|
|
"engine": "tortoise.backends.mysql",
|
|
"credentials": {
|
|
"host": parsed.hostname,
|
|
"port": parsed.port or 3306,
|
|
"user": parsed.username,
|
|
"password": parsed.password,
|
|
"database": parsed.path[1:],
|
|
},
|
|
**MYSQL_CONFIG,
|
|
}
|
|
elif parsed.scheme == "sqlite":
|
|
Path(parsed.path).parent.mkdir(parents=True, exist_ok=True)
|
|
config["connections"]["default"] = {
|
|
"engine": "tortoise.backends.sqlite",
|
|
"credentials": {
|
|
"file_path": parsed.path or ":memory:",
|
|
},
|
|
**SQLITE_CONFIG,
|
|
}
|
|
return config
|
|
|
|
|
|
@PriorityLifecycle.on_startup(priority=1)
|
|
async def init():
|
|
global MODELS, SCRIPT_METHOD
|
|
|
|
env_example_file = Path() / ".env.example"
|
|
env_dev_file = Path() / ".env.dev"
|
|
if not env_dev_file.exists():
|
|
async with aiofiles.open(env_example_file, encoding="utf-8") as f:
|
|
env_text = await f.read()
|
|
async with aiofiles.open(env_dev_file, "w", encoding="utf-8") as f:
|
|
await f.write(env_text)
|
|
logger.info("已生成 .env.dev 文件,请根据 .env.example 文件配置进行配置")
|
|
|
|
MODELS = db_model.models
|
|
SCRIPT_METHOD = db_model.script_method
|
|
if not BotConfig.db_url:
|
|
error = prompt.format(host=driver.config.host, port=driver.config.port)
|
|
raise DbUrlIsNode("\n" + error.strip())
|
|
try:
|
|
await Tortoise.init(
|
|
config=get_config(),
|
|
)
|
|
if db_model.script_method:
|
|
db = Tortoise.get_connection("default")
|
|
logger.debug(
|
|
"即将运行SCRIPT_METHOD方法, 合计 "
|
|
f"<u><y>{len(db_model.script_method)}</y></u> 个..."
|
|
)
|
|
sql_list = []
|
|
for module, func in db_model.script_method:
|
|
try:
|
|
sql = await func() if is_coroutine_callable(func) else func()
|
|
if sql:
|
|
sql_list += sql
|
|
except Exception as e:
|
|
logger.debug(f"{module} 执行SCRIPT_METHOD方法出错...", e=e)
|
|
for sql in sql_list:
|
|
logger.debug(f"执行SQL: {sql}")
|
|
try:
|
|
await asyncio.wait_for(
|
|
db.execute_query_dict(sql), timeout=DB_TIMEOUT_SECONDS
|
|
)
|
|
# await TestSQL.raw(sql)
|
|
except Exception as e:
|
|
logger.debug(f"执行SQL: {sql} 错误...", e=e)
|
|
if sql_list:
|
|
logger.debug("SCRIPT_METHOD方法执行完毕!")
|
|
logger.debug("开始生成数据库表结构...")
|
|
await Tortoise.generate_schemas()
|
|
logger.debug("数据库表结构生成完毕!")
|
|
logger.info("Database loaded successfully!")
|
|
except Exception as e:
|
|
raise DbConnectError(f"数据库连接错误... e:{e}") from e
|
|
|
|
|
|
async def disconnect():
|
|
await connections.close_all()
|