20 Commits

Include renames

Author	SHA1	Message	Date
thzxx	074afd3f1e	fix(A8 + LSM 读自洽): 行所有权根治 + 读取路径不再依赖 prefetch ... A8 行引用泄漏（调用方改查询结果即改写存储） 实测：rows[0].tag = 'HACKED' 后，tag='HACKED' 与 tag='x' 两条索引查询都返回 0 行 —— 行与索引失配、该行永久查不出来；嵌套 json 值同样按引用共享。 Aria 因走反序列化路径反而幸免，又形成跨引擎差异。 根治：在 IStorageEngine 契约层写入**行所有权约定**（engine/interface.ts） —— 读出的行是副本、写入接收的行也是副本；新增 cloneRow/cloneRows （优先 structuredClone，退化路径处理 Date/嵌套对象/二进制）。 Memory/KVStore/Hybrid：find、findStream、getRow 全部返回副本。 Aria：getAllRows 此前只做 `{ ...value }` 浅拷贝（嵌套 json 仍共享引用）， 改为深拷贝；find/findStream 返回副本。 实测四种引擎：修改返回值后重读不变、索引两条查询均正确。 LSM 读取自洽（审计 P1-1：缓存未命中 = 静默丢数据） 此前 loadSSTableReader 缓存未命中返回 null，而所有调用方都是 const reader = this.loadSSTableReader(meta); if (!reader) continue; 于是**未命中就静默跳过整个 SSTable**。实测：缓存上限 4KB 而 SSTable 更大时， 300 行只能查回 59 行，且不报错。 同时"读路径必须先 prefetch"这个隐式约定，是每次读都要 drainChain + prefetch 的原因（性能悬崖的另一半）。 根治：LSM.get / rangeScan / rangeScanLazy 改为 async，未命中即 `await sstableStore.load()` 回源 + CRC 校验（损坏则自愈清理 meta）， 只有数据确实不存在才返回 null。checkUniqueSync 相应改名 checkUnique 并 async （原命名正是因为依赖 prefetch 约定）。引擎侧 12 处调用点补 await。 附带修正的缓存语义： - tryCacheSSTable：单个 SSTable 超过缓存上限时标记为常驻（pinned）， 不参与驱逐 —— 驱逐它等价于静默丢数据；内存上限因此是 cacheLimit + 单个最大 SSTable，已在代码与测试中明确。 - trimCache 跳过 pinned 条目（此前会把全部缓存一次性清空）。 - 新增 getCacheSize/getCacheLimit/getOversizedCount/setCacheLimit 访问器 （测试此前直接读私有字段 cacheSize/cacheLimitBytes —— 那是 TS 错误， 只因测试不做类型检查才没暴露）。 queryStream async 回调 此前用 constructor.name === 'AsyncFunction' 判定，对"普通函数返回 Promise" 完全失效（Promise 被静默丢弃）。现改为双条件识别并走物化路径逐行 await， async 回调被真正等待。 测试契约修正： - aria-cache：'缓存大小受上限约束' 在极小缓存下是不可成立的契约，改为断言 真正重要的不变量（数据完整；可装入时受上限约束），并新增"超大 SSTable 常驻" 用例；'缓存驱逐后全表扫描仍返回完整数据' 保留 300 行断言（此前会失败）。 - hybrid：磁盘引擎标签断言从 indexeddb（v0.6.0 已移除）改为 opfs。	2026-09-14 21:43:21 +08:00
thzxx	0dba1abf2a	test(P0): v0.8.0 验证基座与工程门禁根治 ... 工作流 C-1 / C-3 前半 + 测试代码类型检查。 【故障注入基座】新增 tests/helpers/storage-harness.ts + faulty-backend.ts - TransactionalFileStore：忠实 OPFS 提交语义（close 才可见）+ 字节级故障注入 （failNextWrite/Append/Delete、truncateAppendTo 撕裂写、crashPending 真崩溃） - 删除旧 opfs-mock：读返回内部引用、keepExistingData:false 不截断、close 空实现 导致"提交前可见"等真实缺陷无法被测出（31 个测试文件迁移至新 harness） - 删除 aria-opfs-backend 内的第三份重复 mock（含从未被断言使用的 writeCalls 死代码 与 entry.content.subarray 恒等分支） - FaultyBackend：包装任意 IStorageBackend 注入故障；crash() 明确区别于 close() （后者是优雅停机，会刷完写队列 —— 这正是此前所有"崩溃恢复"测试的真相） - 16 条基座自测证明注入真的生效（含 close 不能当崩溃的对照组） 【覆盖率口径】jest.config.cjs - 移除 '!src/**/index.ts'（该 glob 把 AriaEngine 主实现等 15 个实现文件整体 排除出统计，与 v0.2.6 曾承认过的问题同源），改为只排除纯类型声明文件并附理由 - 新增 coverageThreshold 门禁（此前完全不存在） - 真实基线：语句 90.66% / 分支 82.94% / 函数 94.36% / 行 93.43% - 修正 testMatch 使 tests/helpers 下的测试可被发现 【测试代码类型检查】tsconfig.test.json + npm run typecheck:tests - 修复 103 个测试代码类型错误（此前 babel 剥离类型 + tsconfig 排除 tests，全部隐藏） - 新增 tests/helpers/assertions.ts：nonNull/decode/rows/object/engineMethod/expectCode 以断言收窄替代 as any - 消除 21 个 lint warning（含 v043-hardening 中定义后从未调用的 mockOPFS 死代码） - parser.test.ts 12 处 toBeDefined() 空断言升级为结构断言（并新增 AND/OR 优先级用例， 当前红灯，对应总账第 11 项，将在工作流 A 修复） 【版本契约】新增 tests/version-contract.test.ts - 校验 src VERSION / package.json / dist 三者一致，替代两处硬编码版本字面量 【CI 门禁】.gitea/workflows/ci.yml - lint 去掉 continue-on-error（此前永远不让 CI 变红） - 新增 tests 类型检查、--coverage 覆盖率门禁、dist 与源码同步校验 - 版本 0.7.4 升至 0.8.0	2026-09-14 21:03:06 +08:00
thzxx	05e6823bf1	fix: v0.7.2 语句级原子性 + 事务 DDL 拒绝 + 约束/绑定硬化 — 6 项修复 + 43 回归 + CI 重型套件串行 ... - UPDATE 语句级部分提交（P1，四引擎）：两阶段全量预检后执行，批内唯一互查， 任何一行失败整句不执行（aria 场景 WAL 与内存不再错位） - 事务内 ALTER/CREATE INDEX/DROP INDEX 残留（P1）：Memory/KVStore 显式拒绝 （对齐 Aria），createTable/dropTable 保持可回滚 - SET NULL 级联绕过 required 约束（P1）：预检阶段整体拒绝 FOREIGN_KEY_VIOLATION - bindParameters 注释误判（P2）：行注释/块注释中的 ? 与引号不再参与绑定 - 未闭合字符串静默接受 → lexer 抛 PARSE_ERROR；未知 where 操作符抛 QUERY_ERROR - UPDATE undefined 覆盖列值 → 语义化为不更新（null 仍置空） - Hybrid 写穿透非原子（P1）：磁盘失败自动重载内存对齐磁盘再抛原错误 - CI：Run tests 拆常规并行 + 重型串行（runInBand），重型测试超时余量提升， 性能护栏 kv 120→240s / opfs 150→300s（仍拦截悬崖回归） - 测试 1155 → 1198（74 套件），覆盖率 89.82% 保持	2026-08-13 15:31:16 +08:00
thzxx	f97c5a6001	fix(P2): v0.6.3 原子性/一致性/资源治理 — 8 项修复 + 12 回归 ... - KVStore 混合写单记录原子：新增 writeBatch（put+delete 同一条日志记录）， KVStoreEngine 全部混合写路径统一（兑现真原子宣称，崩溃无新旧行并存） - WAL full 模式写入失败抛错（此前 console.warn 吞错 → 崩溃即丢且无感知） - MemoryEngine SET NULL 级联索引残留：复用 removeIndexEntries（消除虚假 UNIQUE_VIOLATION） - delete 级联两阶段：先全量 RESTRICT 预检（沿 CASCADE 链递归）再执行，无部分级联 （Memory/Aria 对齐） - BufferPool 驱逐同步清理 pages Map（EvictionManager onRemove 回调，内存预算真实生效） - MVCC commit 清理已提交版本（版本链仅作事务内 undo，消除行数据双份常驻） - LSM.flush 重复入链修复（入链即置空 immutable）+ frozenMemtables 可见性时序 - rollbackToSavepoint 重建受影响表二级索引（消除过期索引条目） 测试 1114 → 1126（71 套件）；行覆盖率 89.7%；版本 0.6.3	2026-08-13 10:30:39 +08:00
thzxx	a91ac368e2	ci: 放宽 10 万行性能护栏（kv 60s→120s / opfs 90s→150s）— CI debian runner 慢 2~3 倍且 maxWorkers=2 并行重型测试，84s 为健康性能（修复前悬崖 353s）；护栏仍能拦截悬崖回归	2026-08-11 09:02:35 +08:00
thzxx	5c6011d487	fix(P0): 生产矩阵审计暴露 2 个崩溃恢复丢数据 bug — ① FileManager 页面 id 崩溃回退（allocatePageIds 后 saveMeta 前中断 → nextPageId 回退 → 恢复期页面复用被 compaction 误删，kv 2万行+加密崩溃丢75%）：init 以现存最大页面 id+1 为准；② LSM.flush 剩余数据与 compaction 并发写 meta（产物 saveMeta 被覆盖成孤儿 → 优雅关闭重开丢75%）：剩余落盘挂链串行。新增 13 组合矩阵审计（后端×特性×功能全量验收）	2026-08-10 21:30:49 +08:00
thzxx	d83910832e	perf(P1): 批量插入性能悬崖 — insert 循环内逐行 prefetchKeys（每行 await drainChain 排空后台链），compaction 在链上数秒时每行阻塞数秒 → kv 后端 10 万行插入 353s；改为批级预加载本批 PK 一次，实测 353s→12.5s（28 倍）/ opfs 25s；新增 kv/opfs 双后端 10 万行回归（性能护栏+索引完整+崩溃恢复），aria-cache 测试同步适配显式 flush	2026-08-10 20:14:57 +08:00
thzxx	34225a86b3	fix(P0): SSTable rangeScan 尾块漏读 — 索引块记录块尾 key 但二分按块首语义定位，endKey 落在块尾时下一块被排除导致二级索引查询丢数据（5万行丢106~771条）；endBlockIdx 多扫一块 + 4 个 sstable 边界回归 + 重建二级索引大数据量回归（含崩溃恢复）。附带：checkpoint 同步 flush 二级索引 LSM（P1）、kv 后端页面化 + SharedMemoryBackend chunk 化、生产负载验证测试	2026-08-10 18:18:50 +08:00
thzxx	25bab0f9aa	feat: v0.6.1 — AriaEngine 可选自研 KVStore 后端（storageBackend: 'kv'）+ KVStore APPEND 日志类型 + 10 个 aria+kv 集成测试 + 文档全量同步	2026-08-10 14:52:38 +08:00
thzxx	a9e1a281d3	fix: v0.6.0 复查修正 — KVStore 快照损坏水位 bug（metaSeq 误跳日志）+ 快照损坏测试盲区修复（此前篡改未生效）+ metaSeq 回归测试 + KVStoreEngine 真实浏览器 e2e（3 用例）+ 版本/配置文档校准	2026-08-10 14:11:44 +08:00
thzxx	24b3ca1079	release: v0.6.0 — 完全移除 IndexedDB，自研 KVStore 事务存储引擎（多key原子写/快照日志恢复/CRC自愈）+ KVStoreEngine + 旧库迁移工具 + 10万级压力验证 + 崩溃注入e2e	2026-08-10 13:56:04 +08:00
thzxx	334067d89e	release: v0.5.1 — 存储后端生产级硬化（CRC-32/全库加密/WAL分片/页面化存储/多标签页锁/e2e）+ 深度审查修复（假实现接线/死代码清理）	2026-08-10 12:07:00 +08:00
thzxx	fda3f1ad34	fix: CI Node 18/20 下 aria-crypto 失败 — SubtleCrypto 跨 realm ArrayBuffer 兼容 ... - crypto.ts encryptPage/decryptPage 改传 TypedArray 视图(ArrayBuffer.isView 检查跨 realm 可靠) - jest.setup.js structuredClone polyfill 用跨 realm toString 标签检查 (修复 fake-indexeddb 存储 ArrayBuffer 被 JSON 破坏成 {} 的问题) - 新增 SSTable 加密真实路径测试(加密落盘→重载解密, 8 个测试) - aria/v025 固定 db 名改随机(fake-indexeddb 真实持久化后防表残留冲突) - Node 18/20/22/24 全矩阵 837 测试通过	2026-08-08 11:07:35 +08:00
thzxx	d544501e1c	release: v0.3.2 — 质量加固 + SQL扩展 + 表达式 + 并发同步 ... v0.2.6 质量加固: - 修复 AriaEngine 二级索引 SSTable 互相覆盖(命名空间隔离) - 修复 LSM 多版本读取顺序错误 + MergeIterator 取最新来源 - 重写 LZ4 压缩器(往返一致性 + 缓冲区溢出) - sstableCache LRU 上限 + 预加载兜底(BufferPool 配置生效) - 修复 React/Vue 集成 import type 运行时 bug + exports 子路径 - 新增 38 个测试(LZ4往返/Crypto/集成), 删除伪测试 v0.3.0 SQL 功能扩展: - 多语句 parseAll + 事务语句 BEGIN/COMMIT/ROLLBACK - INSERT INTO ... SELECT + UNION/UNION ALL + EXISTS 关联子查询 - CREATE/DROP INDEX 五引擎实现 + 别名 WHERE 修复 - benchmark 页面 + 36 个新测试 v0.3.1 表达式与性能: - CASE WHEN 表达式(SELECT 列/WHERE/聚合) - JOIN + 关联子查询逐行绑定 - WAL 批量组提交(写放大 O(N)→O(1)) - 修复 pending frozen 可见性 + flush 缓存竞争 v0.3.2 并发: - CASE WHEN 用于 WHERE/聚合 + JOIN 哈希连接 - 多标签页同步(multiTabSync + BroadcastChannel) - IndexedDB schema 持久化(reopen 后表结构恢复) - 修复 where-matcher 顶层 $not - 修复 CJS 产物 .js 被 ESM 解析(exports 空) — .cjs 后缀 + exports 修正 - 836 测试 / 44 套件 / 81.0% 覆盖率	2026-08-08 10:41:30 +08:00
thzxx	4c26882caa	release: v0.2.4 — 701 tests, 32 suites, 零死代码, 零空壳, 全模块接入	2026-07-27 22:18:08 +08:00
thzxx	d33f4ab3b0	test: OPFSEngine 12项mock测试 + Schema约束5项测试 → 543 passed	2026-07-27 21:34:12 +08:00
thzxx	4a3feac9ea	release: v0.2.3 AriaEngine 引擎加固 — RB-Tree fixDelete/LSM SSTable缓存预热/LZ4格式修复	2026-07-27 21:22:29 +08:00
thzxx	620cd11521	fix: 修复 CI 卡死 + LZ4/SSTable/Checkpoint 多项 bug — 526 测试全通过	2026-07-27 20:28:23 +08:00
thzxx	f84673e519	feat: v0.2.0 AriaEngine 自研存储引擎 ... - 新增 AriaEngine: LSM-Tree 页面式存储引擎，19 个模块，~3500 行 TS - page/: Slotted Page 格式 (header/slot/tuple/format) + CRC32 - buffer/: Buffer Pool (LRU 缓存 + 驱逐策略) - index/: LSM-Tree (MemTable 红黑树 + SSTable + Bloom Filter + Merge Iterator) - wal/: WAL 日志 (二进制格式) + Checkpoint 管理 - transaction/: MVCC 版本链 + 快照隔离 - store/: IndexedDB / Memory 双后端抽象 - compression/: LZ4 页面压缩 - 完整持久化: Schema 自动保存、SSTable 元数据管理、WAL 恢复 - 事务感知 CRUD: insert/update/delete 在事务中缓冲到 snapshot - mode: 'aria' 激活自研引擎 - 新增 7 个测试文件，测试数 318 → 524，套件 20 → 27 - aria-page.test.ts (32 tests): Page 格式单元测试 - aria-index.test.ts (26 tests): Bloom Filter + MemTable - aria-sstable.test.ts (9 tests): SSTable Builder + Reader - aria-buffer.test.ts (25 tests): LRU + Eviction + Buffer Pool - aria-wal-mvcc.test.ts (22 tests): WAL 编解码 + MVCC 事务 - aria-compress.test.ts (11 tests): LZ4 + Merge Iterator - aria.test.ts (80 tests): AriaEngine 集成 + 边界测试 - Bug 修复: LRUList size 跟踪、WAL 缓冲区越界、ColumnEncoding 导入 - 全面更新 README.md + site/ 站点文件 (index/docs/demo)	2026-07-27 16:40:29 +08:00
thzxx	e2a590c5b1	feat: metona-sqlark v0.1.12 — 前端TypeScript关系型数据库 ... - 4种存储引擎：Memory / IndexedDB / OPFS / Hybrid - 完整SQL支持：SELECT/INSERT/UPDATE/DELETE/JOIN/GROUP BY/HAVING/DISTINCT - Query Builder链式API + TypeScript泛型支持 - 聚合函数：COUNT/SUM/AVG/MIN/MAX - 事务、插件系统(14 hooks)、发布订阅、数据迁移、导入导出 - React/Vue框架集成 - 264个测试用例，93.46%覆盖率 - 零运行时依赖	2026-07-26 15:00:01 +08:00