feat: v0.7.4 时序语义修正 · 防线实效补漏 · 全量测试翻倍 — 2406 用例 + jsdom 组件测试全量回归
P1 修复面收口: - 超时三态区分(aborted→USER_INTERRUPT / ETIMEDOUT→TIMEOUT / 其余→ERROR), 根治"真实网络超时被误报为用户中断" - 流空闲超时统一(SSE/Ollama/Anthropic 读循环 60s 无数据抛 504 进重试通道) - 同会话并发 sendMessage 防重入(isRunning 守卫)+ 会话存在性预检 + 前置调用移入 try(ERROR+DONE 双事件保证,根治 isStreaming 假死) - 清空审计后 resetChainCache(根治 verifyChain 误报 TAMPERED) - DONE 不再提前清理 TRACE(TERMINATED 统一收尾,补全最终迭代录制) - IME 合成回车不发送(普通 Enter + Cmd/Ctrl+Enter 双分支)+ handleSend 闭包修复 P2 安全纵深: - preload 移除原始 electronAPI 暴露(渲染层零使用,关掉 XSS invoke 任意通道单点风险) - CORS 同源回显根治(仅当前浏览页面 Origin,did-navigate 同步) - MEMORY.md 命令保护正则扩展(括号/$/反引号/< 重定向边界 + 前导路径) - write_file append TOCTOU 统一(open 后 realpath 校验,新文件分支补漏) - 敏感键归一化(authKey 驼峰/连字符命中)+ MCP headers 鉴权值加密落库 - ReDoS 检测共享化(search_files/file_editor 统一拦截) - run_tests/lint_code 升风险 + 需确认 + npx --no-install(执行边界对齐 run_command) - MCP/SearXNG/llm.baseURL/updateFeedUrl 配置类 URL 高危目标校验(IPv6 去括号 + 十六进制映射解析 + 尾点剥离) P3 架构还债: - temperature/maxTokens 热生效(引擎/编排器/SubAgent 三处接线)+ setBatch 单事务落盘 - SessionRecorder flush 竞态根治(flushPromise 等待 + 超限内联落盘 + stopRecording async) - 内存收口(lastConsolidationBySession LRU / subTraces 清理 / 会话删除 disposeEngine) - i18n 全量收口(28 组件 + 353 key 双字典,状态标签改渲染时函数) - 死代码清理(updateTraceStep/HEADER_HEIGHT/void preA/失实注释) - 斜杠菜单 MUI 化 + 删除逻辑收敛 resetSessionState + Blob URL 统一释放 + 用户消息"仅保存"落库(saveMessage 透传前端 id 修复 id 错位) P4 能力演进: - 死循环检测拆分(驻留前置 + 乒乓后置带进度信号,合法交替不误报) - run-lock 30s 超时强制 abort(旧 run 卡死不无限排队) - RETRY 双通道 stream_reset(前端按 run 归属精确清空,根治重试文本重复) - FTS5 trigram 中文子串搜索(迁移 9 版本化 SCHEMA_VERSION=2,≤2 字符 LIKE 回退) - getContextWindow 兜底 1M→128K(未知模型防 413) 测试: - 855 → 2406 用例(+1551,2.8 倍):服务层 +325(含 MemoryManager 51 新用例)、 工具实体 +483、IPC/适配器 +390(含 OpenAI/Anthropic/Ollama 独立套件)、 纯函数表格化 +330;引入 jsdom + @testing-library(14 组件测试文件 249 用例) - 修复 R1(saveMessage id 透传)/ R2(stream_reset 精确归属)两个回归缺陷 - 遗留低危项清零:git-tools 顺序耦合 / web-fetch 真实时间退避 / slo 内存断言 / mcp-security 多余 skipIf / deepseek-balance 命名误导 / 组件 mock 注入脆弱性 版本: 0.7.4; README 同步(工具风险表/版本徽章); 依赖: 移除 @electron-toolkit/preload, 新增 jsdom/@testing-library(devDependencies 不打包) 回归: typecheck 双端 0 错误; ESLint 0/0; Electron ABI 全量 2406/2406 零跳过; 系统 Node 2110 通过 296 跳过(better-sqlite3 ABI)
This commit is contained in:
@@ -111,8 +111,10 @@ export class DatabaseService {
|
||||
* v0.6.4 P3-3: 当前 schema 版本号(PRAGMA user_version 目标值)。
|
||||
* 每次在 runMigrations 中新增一个迁移时 +1。首次升级到版本化机制后,
|
||||
* 版本号相同的库将跳过整个探测式迁移批次。
|
||||
* v0.7.4 P4-4: 1 → 2 —— 迁移 9(messages_fts trigram)纳入版本化,
|
||||
* 失败中断批次不盖章 → 下次启动重试(根治"失败被吞 + 永久跳过")。
|
||||
*/
|
||||
static readonly SCHEMA_VERSION = 1;
|
||||
static readonly SCHEMA_VERSION = 2;
|
||||
|
||||
constructor(workspacePath?: string) {
|
||||
const baseDir = workspacePath ?? join(app.getPath('userData'), 'MetonaWorkspaces', 'default');
|
||||
@@ -335,10 +337,16 @@ export class DatabaseService {
|
||||
-- ===== v0.5.0: 消息全文搜索(FTS5 外内容表模式,content 列索引) =====
|
||||
-- 会话内容搜索通过 sessions:searchContent IPC 使用 MATCH 查询;
|
||||
-- 触发器保持索引与 messages 表实时同步(INSERT/UPDATE/DELETE)
|
||||
-- v0.7.4 P4-4: tokenizer 升级为 trigram —— 支持任意 ≥3 字符子串匹配
|
||||
-- (中文非连续子串搜索根治;英文整词/短语仍命中)。实测本 SQLite 构建
|
||||
-- 不支持 'unicode61 trigram' 多 tokenizer 组合(tokenizer constructor 报错),
|
||||
-- 故用 trigram 单 tokenizer;2 字中文由 searchMessages 的 LIKE 回退兜底。
|
||||
-- 存量库由迁移 9 检测重建。
|
||||
CREATE VIRTUAL TABLE IF NOT EXISTS messages_fts USING fts5(
|
||||
content,
|
||||
content=messages,
|
||||
content_rowid=rowid
|
||||
content_rowid=rowid,
|
||||
tokenize='trigram'
|
||||
);
|
||||
|
||||
CREATE TRIGGER IF NOT EXISTS messages_fts_insert AFTER INSERT ON messages BEGIN
|
||||
@@ -630,6 +638,38 @@ export class DatabaseService {
|
||||
log.warn(`[DB] Migration 5 (messages content NULL) skipped: ${msg}`);
|
||||
// 非致命错误 — 如果迁移失败,NOT NULL 约束仍生效,saveMessage 会保存空字符串
|
||||
}
|
||||
|
||||
// v0.7.4 P4-4 迁移 9: messages_fts 升级 trigram tokenizer
|
||||
// 存量库的 messages_fts 建表语句不含 trigram —— 直接 DROP + 重建 + rebuild,
|
||||
// 使中文非连续子串搜索(trigram ≥3 字符)可用。检测方式:读 sqlite_master 的
|
||||
// 建表 SQL,不含 'trigram' 即需重建。幂等:重建后 SQL 含 trigram,下次跳过。
|
||||
try {
|
||||
const ftsSqlRow = db
|
||||
.prepare(`SELECT sql FROM sqlite_master WHERE type='table' AND name='messages_fts'`)
|
||||
.get() as { sql: string } | undefined;
|
||||
const ftsSql = ftsSqlRow?.sql ?? '';
|
||||
if (!ftsSql.includes('trigram')) {
|
||||
log.info('[DB] Migration: rebuilding messages_fts with trigram tokenizer');
|
||||
// FTS5 外内容表重建:DROP 虚表(触发器保留),重建后由下方 rebuild 回填
|
||||
db.exec(`
|
||||
DROP TABLE IF EXISTS messages_fts;
|
||||
CREATE VIRTUAL TABLE messages_fts USING fts5(
|
||||
content,
|
||||
content=messages,
|
||||
content_rowid=rowid,
|
||||
tokenize='trigram'
|
||||
);
|
||||
INSERT INTO messages_fts(messages_fts) VALUES ('rebuild');
|
||||
`);
|
||||
log.info('[DB] Migration: messages_fts rebuilt with trigram tokenizer');
|
||||
}
|
||||
} catch (error) {
|
||||
// v0.7.4 P4-4: 迁移 9 失败必须中断批次(抛错 → 不盖章 user_version=2 →
|
||||
// 下次启动重试)。旧实现 catch 吞错 + 盖章 1 → 中文子串搜索永久失效且无日志。
|
||||
const msg = toErrorMessage(error);
|
||||
log.error(`[DB] Migration 9 (messages_fts trigram) failed: ${msg}`);
|
||||
throw error;
|
||||
}
|
||||
});
|
||||
|
||||
runAllMigrations();
|
||||
|
||||
Reference in New Issue
Block a user