liuwei_x_x/abot
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
2,719 Commits 1 Branch 0 Tags
feature-864-lumen
Commit Graph

293 Commits

Author SHA1 Message Date
liuwei
19a4ab6e98 优化启动阶段插件与调度初始化耗时 2026-05-07 14:46:52 +08:00
liuwei
050e537ba3 将登录巡检能力收口到provider层 2026-05-07 13:48:49 +08:00
liuwei
831a61e7ea 优化群媒体落盘去重与链接复用 2026-05-06 11:04:43 +08:00
liuwei
2994d2014d 将头像缓存同步改为系统定时任务 2026-05-06 10:55:11 +08:00
liuwei
8957799b76 回滚本地LLM运行分析并对齐远端回滚状态 2026-05-06 08:43:18 +08:00
liuwei
969a731019 Merge remote-tracking branch 'origin/feature-855' into feature-855 
# Conflicts:
#	admin/dashboard/blueprints/system.py
 2026-05-06 08:39:09 +08:00
Liu
17264f91e6 Revert "完善后台任务中心历史摘要视图" 
This reverts commit 1db8681636.
 2026-05-01 12:45:40 +08:00
Liu
024624126e Revert "完善数据层慢SQL观测与消息查询优化" 
This reverts commit b2d900070c.
 2026-05-01 12:45:40 +08:00
Liu
5aca5c5f28 Revert "修复菜单插件超时拖慢主链路问题" 
This reverts commit 1b6da6db1f.
 2026-05-01 12:45:35 +08:00
Liu
47d623e4a4 Reapply "修复菜单插件超时拖慢主链路问题" 
This reverts commit 34adefa931.
 2026-05-01 12:45:29 +08:00
Liu
994f452b99 Revert "优化微信同步超时兜底并下沉头像缓存预热" 
This reverts commit c3830d905e.
 2026-05-01 12:45:28 +08:00
Liu
c3830d905e 优化微信同步超时兜底并下沉头像缓存预热 
- 为 Msg/Sync 增加超时异常与主循环重试保护，避免启动阶段超时直接退出\n- 新增联系人头像缓存系统定时任务，启动时不再主动批量下载头像\n- 保留头像按需补下载能力，并补充详细中文注释
 2026-05-01 12:24:27 +08:00
Liu
34adefa931 Revert "修复菜单插件超时拖慢主链路问题" 
This reverts commit 1b6da6db1f.
 2026-05-01 12:12:55 +08:00
Liu
1b6da6db1f 修复菜单插件超时拖慢主链路问题 
1. 为菜单图片发送增加独立的同步等待预算，避免单次菜单命令长时间占用消息处理协程。

2. 调整菜单插件外层处理超时与文本回退空间，避免内外层超时重合导致降级逻辑来不及执行。

3. 修复 md2img 专用运行时在超时/取消时未显式取消后台任务的问题，减少渲染残留任务堆积。
 2026-05-01 11:08:49 +08:00
liuwei
ae208d7b84 增强LLM运行分析与按维度统计视图 2026-04-30 17:59:03 +08:00
liuwei
b2d900070c 完善数据层慢SQL观测与消息查询优化 
- 为数据库公共层增加慢 SQL 阈值配置与统一耗时日志记录

- 为消息表补充群成员回溯、群类型过滤和待处理媒体扫描等关键索引

- 将多处按日期查询改为时间范围查询，减少 DATE(timestamp) 导致的索引失效

- 修正消息存储层重复定义的日期范围方法，并更新工程优化文档中的 7.4 当前进展
 2026-04-30 16:32:34 +08:00
liuwei
1db8681636 完善后台任务中心历史摘要视图 
- 为系统任务和插件调度补充批量历史摘要查询，支持最近成功时间、最近失败原因与累计成功失败次数

- 任务列表接口合并内存运行态与数据库日志态，服务重启后后台仍可回看最近执行结果

- 系统任务页与插件调度页新增健康状态、历史执行摘要与插件调度快捷启停入口

- 更新工程优化文档，记录 7.3 第一阶段当前进展
 2026-04-30 16:21:29 +08:00
liuwei
2d5a5547de 完善消息链路trace并贯通AI与发送动作 2026-04-30 15:22:07 +08:00
liuwei
4ddab01b8d 完善系统健康面板并接入AI运行态观测 2026-04-30 15:12:47 +08:00
liuwei
b53206d0d1 支持全局配置保存后立即应用到运行时 
- 新增 Robot.apply_runtime_config 统一刷新邮件发送器、管理员列表与 LLM 运行时缓存\n- 新增 LLMRegistry.invalidate_cache 主动清理目录与 legacy 配置缓存\n- 后台保存全局配置与 LLM 目录后立即应用运行时配置，减少重启依赖
 2026-04-29 17:27:21 +08:00
liuwei
5401d1db42 提高积分通胀倍率上限 
1. 将群积分通胀策略的默认最高倍率从3倍提升到20倍。

2. 补充中文注释，说明高倍率用于加速消耗长期沉淀的群积分。
 2026-04-27 13:41:23 +08:00
liuwei
955c2f2797 为积分通胀策略增加Redis日缓存 
1. 新增群积分通胀统计的Redis缓存键与按天过期策略，减少重复聚合查询。

2. 新增带缓存的群插件积分消耗统计方法，Redis异常时自动回退实时查询。

3. 调整积分消耗注解优先读取缓存版统计，降低高频群聊场景下的数据库压力。
 2026-04-27 13:40:27 +08:00
liuwei
66ac0a7e89 新增群积分通货膨胀策略 
1. 新增群聊插件积分真实消耗统计，区分成员持有积分与 SYSTEM 沉淀积分。

2. 为 plugin_points_cost 注解接入按群动态倍率，积分消耗偏低时自动提高实际扣费。

3. 优化积分不足与扣费成功提示，展示基础价、实际价与当前通胀倍率。
 2026-04-27 13:35:13 +08:00
liuwei
d09ccb788c 修复Dashboard消息存储查询接口兼容问题 2026-04-27 12:03:22 +08:00
liuwei
62e6f67836 持久化表情中文语义资产\n\n- 新增 t_emoji_assets 表及迁移脚本，持久化保存表情发送参数、中文语义与预览图路径\n- 在消息归档与媒体补偿流程中自动回填表情资产，实现收到表情即落语义、补图后回填预览\n- 后台表情库与自动回复优先读取持久化表情资产，仅在空表场景下小范围回补历史数据 2026-04-27 11:52:31 +08:00
liuwei
623ca505d4 打通自动回复与表情语义库联动\n\n- 新增表情语义解析与表情资产查询模块，支持从历史表情中提取可读中文语义\n- 为 ai_auto_response 增加短回复表情匹配器，命中语义时优先发送表情并支持失败回退文本\n- 调整自动回复提示词与配置项，强化短情绪回复场景的表情替换能力 2026-04-27 11:40:44 +08:00
liuwei
4dbf390c65 将通讯录刷新与头像缓存同步改为异步处理 2026-04-27 09:30:21 +08:00
liuwei
711213ded8 补充头像缓存同步与清理调试日志 2026-04-27 09:19:56 +08:00
liuwei
5da6514020 增加头像缓存旧文件清理机制 2026-04-27 09:16:16 +08:00
liuwei
e573fd9c37 优化社交图展示并为通讯录接入本地头像缓存 2026-04-27 09:13:01 +08:00
liuwei
df6f9f4cfa 修复规则缓存写入Redis时datetime序列化异常 
1. 在规则服务中新增JSON安全转换逻辑，递归处理dict/list结构。

2. 将datetime/date统一转换为字符串后再写入Redis，避免Object of type datetime is not JSON serializable。

3. 保持缓存结构兼容，不影响现有规则匹配流程。
 2026-04-23 13:39:43 +08:00
liuwei
d61fb8bc8a 新增趣味指令剧本功能并接入拍一拍事件触发 
1. 新增趣味指令规则数据层与服务层，支持应用级缓存+Redis+MySQL三级读取与缓存刷新。

2. 新增 fun_command_play 插件，支持文本/图片/语音/视频/卡片/App 多媒体响应，并接入群权限开关。

3. 新增拍一拍事件识别（PAT）并纳入统一触发模型。

4. 新增后台页面与API：规则增删改查、启停、命中测试。

5. 将趣味指令剧本接入 Dashboard 菜单与蓝图注册，并补充数据库迁移脚本。
 2026-04-23 12:31:52 +08:00
liuwei
3e93188efb 支持html转图传入视口宽度并在总结模板中透传配置 2026-04-23 11:27:37 +08:00
liuwei
fc8af8ff75 fix(schedule): 任务页上次执行时间改为日志兜底 
- 新增批量查询接口 get_latest_logs_map，从 t_plugin_schedule_logs 获取各任务最新执行记录

- 插件任务列表拼装时优先用运行时数据，缺失则回填数据库最新日志

- 修复重启后任务页 last_run_at/last_status 显示为空的问题
 2026-04-22 09:49:15 +08:00
liuwei
d64d11a384 将@关系批处理业务迁移到 value_rank 插件 
- 从 MessageStorageDB 移除@抽取与社交图写入逻辑，消息层仅保留归档职责

- 从系统级任务移除 process_pending_mentions，取消 message_to_db 中对应入口

- 在 value_rank 插件新增定时动作 value_rank_mentions_extract（每10分钟）

- 在插件内实现窗口化批处理（默认10~20分钟前）、@提取、幂等写入明细/边表/日汇总及 unique_interactors 回填

- 新增插件侧可配置参数 mention_batch_size / mention_window_start_minutes / mention_window_end_minutes
 2026-04-21 14:10:25 +08:00
liuwei
78adab65b2 增强@批处理执行日志，提升可观测性 
- 增加定时@抽取任务开始/结束日志，输出窗口参数、处理条数与耗时

- 在DB批处理层记录查询命中、前3条样本明细、失败样本ID，便于快速排障

- 增加窗口参数异常修正日志，避免误配置导致行为不可见

- 在社交图增量写入处增加跳过/完成日志，明确是否产生新增@关系
 2026-04-21 13:58:16 +08:00
liuwei
1ddc1dcf18 优化@批处理窗口：每10分钟仅处理10-20分钟前消息 
- 调整待抽取@查询逻辑：默认仅扫描 timestamp 在 [NOW-20m, NOW-10m) 的消息

- 保留 mentioned_user_ids 为空才处理的条件，处理过自动跳过

- 更新 MessageStorage 与系统任务调用参数，统一使用窗口化批处理配置

- 增加窗口参数兜底修正，避免错误配置导致全量扫描
 2026-04-21 13:54:41 +08:00
liuwei
906f0905df 将@抽取与社交图写入改为定时批处理 
- 精简 archive_message 主链路：仅做消息归档，不再同步执行@解析与社交统计

- 新增 MessageStorageDB.process_pending_mentions 批处理能力，按批次回填 mentioned_user_ids 并写入社交图

- 新增系统任务 process_pending_mentions，每10分钟执行一次（every_seconds=600）

- 增加幂等保护：基于 t_message_mentions 已有记录过滤新增@关系，避免重复累加社交边和热度

- 保留详细中文注释，说明性能优化目标与批处理策略
 2026-04-21 13:51:56 +08:00
liuwei
061f2b8084 feat: 重构LLM配置为Provider模板+Dify应用+Scene绑定 
变更项：

1. 新增 LLM 目录数据层（t_llm_provider_templates/t_llm_dify_apps/t_llm_backends/t_llm_scenes/t_llm_catalog_meta），支持三层配置管理。

2. Robot 启动接入 llm_catalog_db：自动建表并从旧 llm(backends/scenes) 配置迁移初始化。

3. LLMRegistry 改为优先读取目录模型并按 scene 解析：dify_app 自动合并 Provider 模板与 app_key 差异，降低重复配置。

4. system 蓝图 /api/system/llm_config 改为目录模型读写，新增完整校验（provider引用、app_key、scene目标合法性）。

5. system_llm 页面重构为四块：Provider 模板、Dify 应用、通用 Backend、Scene 绑定，并展示插件依赖拓扑。

6. 保留 YAML 旧结构兜底展示与运行时回退，保证目录表异常时系统仍可运行。
 2026-04-20 15:09:24 +08:00
liuwei
1446bf5f39 feat: 将LLM配置主存储迁移到MySQL 
变更项: 1) 新增 t_llm_config 数据访问层与建表逻辑。 2) Robot 启动时自动初始化并在空库时从 YAML 导入。 3) 后台 system LLM API 改为读写 MySQL。 4) LLMRegistry 改为优先 MySQL 读取并回退 YAML。 5) DashboardServer 挂载 llm_config_db 提供后台访问。
 2026-04-20 14:51:43 +08:00
liuwei
ef49588485 refactor: 移除LLM旧兼容入口并统一scene单路由 
变更项：

1. LLMRegistry 仅保留 scene 入口，删除 backend_name/backend_ref/scene_ref 等兼容解析分支，未声明 scene 时仅保留直连配置。

2. Dify/GlobalNews/GameTask 插件初始化改为仅传 scene，不再拼接 backend/provider/url 等旧兼容字段。

3. 清理插件配置冗余：dify/global_news/game_task/douyu 的 config.toml 删除 backend 字段，统一由 scene 映射后端。

4. 后台 system API 调整为严格模式：插件依赖扫描仅采集 scene；scene 保存时必须绑定有效 backend。

5. 后台页面去除拓扑中的配置Backend冗余列，并新增前端校验，禁止提交空场景或未绑定后端。
 2026-04-20 14:45:03 +08:00
liuwei
7b6bd19781 feat: 引入LLM场景路由与后台拓扑管理能力 
变更项：

1. 新增 llm.scenes 场景路由层，支持 scene->backend 统一映射，并补充默认场景配置。

2. 扩展 LLMRegistry，新增 scene 解析逻辑；当声明 scene 时强制按场景路由结果生效，保持旧 backend 配置兼容。

3. 扩展后台 /api/system/llm_config 读写能力，支持 scenes 配置保存；新增插件 LLM 依赖扫描与拓扑数据输出。

4. 升级 system_llm 页面：新增场景路由管理区、插件依赖拓扑表，支持可视化查看 插件->scene->backend->provider。

5. 迁移核心插件配置到 scene 模式（保留兼容字段）：dify/global_news/game_task/message_summary/ai_auto_response/member_context/douyu。

6. 调整部分插件初始化默认 llm_config，补充 scene 字段，确保后台场景切换可直接生效。
 2026-04-20 14:36:56 +08:00
liuwei
382f3967bd 修复斗鱼日报Dify 400请求并增强错误诊断 
变更项：\n1. 在斗鱼插件新增 daily_report_include_structured_inputs 配置（默认 false），Dify 入参默认改为精简字段（task_type/query/system_prompt/user_prompt/room_id 等），避免复杂对象输入触发 400。\n2. 调整 _build_dify_daily_report_inputs：仅在 include_structured_inputs=true 时才附带 report_payload_json，大幅降低 Workflow 入参类型不匹配风险。\n3. 在初始化流程中读取 report_api.include_structured_inputs，支持按环境开关结构化入参。\n4. 在 UnifiedLLMClient 的 Dify 调用中新增 HTTPError 细粒度处理，last_error 与日志会追加 response_body 片段，便于快速定位 Dify 侧具体报错原因。\n5. 更新 douyu 配置模板注释，明确复杂输入导致 400 的风险与开关用途，方便后续维护。
 2026-04-20 13:36:56 +08:00
liuwei
f1a6f6d565 新增通用HTML模板渲染器并将机器人菜单改为模板驱动输出 2026-04-20 13:12:44 +08:00
liuwei
d4b7cb32f6 feat(群级配置): 新增MySQL+Redis持久缓存并接入进群欢迎差异化配置 
新增群级插件配置表与服务层，采用MySQL持久化+Redis长期缓存(TTL=-1)；后台新增群级插件配置管理页面与API，支持按群按插件维护JSON配置并在修改后同步回填MySQL和刷新Redis；已将群成员变更监控插件接入该配置，支持欢迎文案与卡片URL等按群差异化。
 2026-04-20 10:42:46 +08:00
liuwei
23d2f2562e 启用md2img强保活模式：移除浏览器主动关闭逻辑 
1. safe_close_browser 改为保活模式下直接返回，不执行 browser.close\n2. 去除 safe_close_browser 中的 terminate/kill 进程树逻辑\n3. 保留函数签名与调用链，确保现有流程兼容\n4. 增加中文注释说明长期常驻场景下的设计意图
 2026-04-17 11:46:35 +08:00
liuwei
cc5c49954f 调整md2img保活策略：取消截图后立即重建，改为心跳确认后再自愈 
1. 去除截图后探测失败即刻 restart_browser 的逻辑\n2. 改为仅记录告警并推进断连计数，交由心跳任务统一确认后重建\n3. 保留截图失败时的重试重建能力，避免功能不可用\n4. 增加详细中文注释，明确保活优先与误判抑制设计
 2026-04-17 11:44:28 +08:00
liuwei
02e34960d3 优化md2img浏览器健康探测，减少截图后误判断连重建 
1. _is_browser_alive 增加短重试机制，避免单次瞬时失败被判定为断连\n2. 截图后健康检查由单次探测改为多次探测（超时与间隔可控）\n3. 保留真实断连自动重建能力，但降低误触发概率\n4. 补充详细中文注释，说明探测策略与设计意图
 2026-04-17 11:27:27 +08:00
liuwei
1cf2cfd6e3 修复md2img运行时并发单例问题，避免预热双启动日志 2026-04-17 10:28:35 +08:00
liuwei
3d98b3c0a2 修复转图运行时重复启动与高频误重建问题 
变更项：\n1. 修复 md2img 运行时并发启动竞争，新增启动中标记，避免同名线程被重复拉起。\n2. 优化浏览器心跳探测策略：由高频激进重建改为断连连续判定后再重建，降低误判。\n3. 新增截图进行中保护，截图期间心跳跳过探测，避免与业务并发导致误重建。\n4. 为浏览器重建增加 reason 日志字段，便于线上追踪重建触发原因。\n5. 保留截图后断连自愈能力，但改为更稳健的触发路径，减少无意义重建。
 2026-04-17 10:26:10 +08:00