26 Commits

Include renames

Author	SHA1	Message	Date
thzxx	89243ef6eb	fix(A3/A4): SAVEPOINT 语义根治 —— 已回滚的行不再复活、陈旧保存点不再吞写入 ... A3 已回滚的行在崩溃重启后复活（静默数据错误） `ROLLBACK TO <savepoint>` 只改内存快照、**不写 WAL**，而 COMMIT 会把整个 txnId 标记为已提交，恢复时按"该事务的全部记录"重放 → 被回滚掉的写入被重新应用。 实测：事务内插入 a、savepoint、插入 b、回滚到 savepoint、提交 → 实时只剩 a，崩溃重开变成 a+b。 根治：新增 WALRecordType.SAVEPOINT_ROLLBACK（走既有 data 字段携带 { replayFromIndex } 边界，二进制格式不变、旧库记录仍可解析）。 - 写入侧：savepoint() 记录"该事务当时已追加的记录条数"；rollbackToSavepoint() 先写标记再改内存（与 commit/rollback 的"WAL 领先内存"一致）。 - 恢复侧：按**事务内**下标计算窗口 —— 保留 [0, keepUpTo)，丢弃 [keepUpTo, 最后一个标记)，标记之后的记录照常保留。 注意不能拿全局下标比较：全局数组里混有 txnId=0 的非事务记录（CREATE_TABLE 等）与其它事务的记录。这个差一错误在实现过程中被测试抓出并修正。 - 事务内 WAL 记录计数（txnWalRecordCount）在 5 个 appendBatch 站点与 BEGIN 处维护，事务开始/结束时归零。 A4 跨事务复用的陈旧 savepoint 静默丢弃当前事务的写入 savepoints 在 commit/rollback 时**从不清空**，且 rollbackToSavepoint 不校验归属。 实测：上一个事务遗留 savepoint 名 → 新事务 update 后 ROLLBACK TO 该名 + COMMIT， 写入凭空消失（v=5 被回退成 v=9）。 根治：事务结束清空 savepoints 与边界表；rollbackToSavepoint 校验 sp.txnId === currentTxnId，陈旧保存点抛 SAVEPOINT_NOT_FOUND。 新增 tests/v080-savepoint.test.ts（4 个用例）：包含"崩溃重放一致性"、 "普通事务不得误伤"、以及"多个保存点回到最早"的语义护栏。	2026-09-14 21:53:46 +08:00
thzxx	074afd3f1e	fix(A8 + LSM 读自洽): 行所有权根治 + 读取路径不再依赖 prefetch ... A8 行引用泄漏（调用方改查询结果即改写存储） 实测：rows[0].tag = 'HACKED' 后，tag='HACKED' 与 tag='x' 两条索引查询都返回 0 行 —— 行与索引失配、该行永久查不出来；嵌套 json 值同样按引用共享。 Aria 因走反序列化路径反而幸免，又形成跨引擎差异。 根治：在 IStorageEngine 契约层写入**行所有权约定**（engine/interface.ts） —— 读出的行是副本、写入接收的行也是副本；新增 cloneRow/cloneRows （优先 structuredClone，退化路径处理 Date/嵌套对象/二进制）。 Memory/KVStore/Hybrid：find、findStream、getRow 全部返回副本。 Aria：getAllRows 此前只做 `{ ...value }` 浅拷贝（嵌套 json 仍共享引用）， 改为深拷贝；find/findStream 返回副本。 实测四种引擎：修改返回值后重读不变、索引两条查询均正确。 LSM 读取自洽（审计 P1-1：缓存未命中 = 静默丢数据） 此前 loadSSTableReader 缓存未命中返回 null，而所有调用方都是 const reader = this.loadSSTableReader(meta); if (!reader) continue; 于是**未命中就静默跳过整个 SSTable**。实测：缓存上限 4KB 而 SSTable 更大时， 300 行只能查回 59 行，且不报错。 同时"读路径必须先 prefetch"这个隐式约定，是每次读都要 drainChain + prefetch 的原因（性能悬崖的另一半）。 根治：LSM.get / rangeScan / rangeScanLazy 改为 async，未命中即 `await sstableStore.load()` 回源 + CRC 校验（损坏则自愈清理 meta）， 只有数据确实不存在才返回 null。checkUniqueSync 相应改名 checkUnique 并 async （原命名正是因为依赖 prefetch 约定）。引擎侧 12 处调用点补 await。 附带修正的缓存语义： - tryCacheSSTable：单个 SSTable 超过缓存上限时标记为常驻（pinned）， 不参与驱逐 —— 驱逐它等价于静默丢数据；内存上限因此是 cacheLimit + 单个最大 SSTable，已在代码与测试中明确。 - trimCache 跳过 pinned 条目（此前会把全部缓存一次性清空）。 - 新增 getCacheSize/getCacheLimit/getOversizedCount/setCacheLimit 访问器 （测试此前直接读私有字段 cacheSize/cacheLimitBytes —— 那是 TS 错误， 只因测试不做类型检查才没暴露）。 queryStream async 回调 此前用 constructor.name === 'AsyncFunction' 判定，对"普通函数返回 Promise" 完全失效（Promise 被静默丢弃）。现改为双条件识别并走物化路径逐行 await， async 回调被真正等待。 测试契约修正： - aria-cache：'缓存大小受上限约束' 在极小缓存下是不可成立的契约，改为断言 真正重要的不变量（数据完整；可装入时受上限约束），并新增"超大 SSTable 常驻" 用例；'缓存驱逐后全表扫描仍返回完整数据' 保留 300 行断言（此前会失败）。 - hybrid：磁盘引擎标签断言从 indexeddb（v0.6.0 已移除）改为 opfs。	2026-09-14 21:43:21 +08:00
thzxx	d4a3f4acd2	fix: v0.7.4 写语句子查询 / 约束硬化 / 真惰性流式 — UPDATE-DELETE WHERE 子查询静默 0 行（四引擎，关联引用显式 NOT_SUPPORTED + EXPLAIN 同步）/ 主键 NULL-undefined 强制拒绝 / DROP INDEX 保留建表 UNIQUE（仅索引来源可解除）/ GROUP BY-DISTINCT-UNION 键类型安全编码 / UPDATE 未知列报错 / queryStream 多语句拒绝 / KVStore 后台错误跨 reopen 清理 + Hybrid begin 补偿 / RB-Tree 删除双黑修复 + LSM 死代码清理 / findStream 迭代器化真惰性（limit 早停 O(1) 内存）/ REINDEX 单次扫描 + 48 回归	2026-08-15 15:08:33 +08:00
thzxx	50468b9b0e	fix: v0.7.3 数据正确性与边界窗口收尾 — INSERT 语句级原子（三引擎+Aria PK 批内重复）/ 索引列 IS NULL 恒空 / delete RESTRICT 破坏索引 / queryStream 子查询静默空结果 / ALTER DROP 索引残留 / UNIQUE INDEX 存量校验 / SELECT * 别名投影 / WAL BEGIN/ROLLBACK 事务边界 / aria $in 与级联重复扫描性能 / $and 等值下推 / ANALYZE 索引统计 / React-Vue hooks 生命周期 / 迁移主键兜底 + 58 回归	2026-08-14 22:53:46 +08:00
thzxx	05e6823bf1	fix: v0.7.2 语句级原子性 + 事务 DDL 拒绝 + 约束/绑定硬化 — 6 项修复 + 43 回归 + CI 重型套件串行 ... - UPDATE 语句级部分提交（P1，四引擎）：两阶段全量预检后执行，批内唯一互查， 任何一行失败整句不执行（aria 场景 WAL 与内存不再错位） - 事务内 ALTER/CREATE INDEX/DROP INDEX 残留（P1）：Memory/KVStore 显式拒绝 （对齐 Aria），createTable/dropTable 保持可回滚 - SET NULL 级联绕过 required 约束（P1）：预检阶段整体拒绝 FOREIGN_KEY_VIOLATION - bindParameters 注释误判（P2）：行注释/块注释中的 ? 与引号不再参与绑定 - 未闭合字符串静默接受 → lexer 抛 PARSE_ERROR；未知 where 操作符抛 QUERY_ERROR - UPDATE undefined 覆盖列值 → 语义化为不更新（null 仍置空） - Hybrid 写穿透非原子（P1）：磁盘失败自动重载内存对齐磁盘再抛原错误 - CI：Run tests 拆常规并行 + 重型串行（runInBand），重型测试超时余量提升， 性能护栏 kv 120→240s / opfs 150→300s（仍拦截悬崖回归） - 测试 1155 → 1198（74 套件），覆盖率 89.82% 保持	2026-08-13 15:31:16 +08:00
thzxx	cbe407eb49	fix: v0.7.1 API 修复与防御统一 — static create / 未 open 防护 / 原型污染 / lint 清零 ... - MetonaSqlark.create 静态工厂（README 示例在 ESM/Node 下此前 TypeError）， 独立 create 函数委托静态实现 - close 未初始化防御（engine undefined 不再崩溃） - AriaEngine hasTable/getTableNames/getTableSchema 统一 ensureOpen - 事务回滚失败不掩盖原始错误 - __proto__ 列名防护：Executor 列映射 Object.create(null) + schema 校验拒绝 - lint 清零（移除 5 处未使用导入） 测试 1147 → 1155（73 套件）；行覆盖率 89.8%；版本 0.7.1	2026-08-13 11:14:42 +08:00
thzxx	f97c5a6001	fix(P2): v0.6.3 原子性/一致性/资源治理 — 8 项修复 + 12 回归 ... - KVStore 混合写单记录原子：新增 writeBatch（put+delete 同一条日志记录）， KVStoreEngine 全部混合写路径统一（兑现真原子宣称，崩溃无新旧行并存） - WAL full 模式写入失败抛错（此前 console.warn 吞错 → 崩溃即丢且无感知） - MemoryEngine SET NULL 级联索引残留：复用 removeIndexEntries（消除虚假 UNIQUE_VIOLATION） - delete 级联两阶段：先全量 RESTRICT 预检（沿 CASCADE 链递归）再执行，无部分级联 （Memory/Aria 对齐） - BufferPool 驱逐同步清理 pages Map（EvictionManager onRemove 回调，内存预算真实生效） - MVCC commit 清理已提交版本（版本链仅作事务内 undo，消除行数据双份常驻） - LSM.flush 重复入链修复（入链即置空 immutable）+ frozenMemtables 可见性时序 - rollbackToSavepoint 重建受影响表二级索引（消除过期索引条目） 测试 1114 → 1126（71 套件）；行覆盖率 89.7%；版本 0.6.3	2026-08-13 10:30:39 +08:00
thzxx	ef1934a38c	fix(P0): v0.6.2 数据正确性专项 — 深度审计 6 项修复 + 22 回归 ... - KVStoreEngine 数值主键 update 丢行（P0）：String 化主键回查不命中 → 误删 KV 行 （重启丢数据）；改为单次全表扫描 + 受影响集合过滤（兼消 O(N×M) 回查开销） - update 主键撞已有主键静默覆盖（P0，Memory/Aria）：抛 DUPLICATE_KEY，事务路径同拦截 - Aria 二级索引范围查询边界算法错误（P1）：Number(v)±1 构造 key 漏小数/字符串数据； 改全索引扫描 + matchWhere 过滤，边界语义统一 - Aria 索引列 IS NULL 返回空（P1）：null 等值/含 null 的 IN 不走索引（回退全表） - AriaEngine unique 约束未强制（P1）：insert 整批预检（批内互查+索引扫描，失败整批 不落库）+ update 排除自身旧条目检查；新增 LSM.prefetchPrefixRanges 批量预加载 - 非主键 update 索引旧值残留：统一传旧行清理（消除唯一性误报与索引膨胀） - EXPLAIN 写语句产生真实副作用（P2）：仅 SELECT 执行，UPDATE/DELETE 用 count 估算 测试 1092 → 1114（70 套件）；行覆盖率 89.6%；版本 0.6.2	2026-08-13 09:51:26 +08:00
thzxx	d83910832e	perf(P1): 批量插入性能悬崖 — insert 循环内逐行 prefetchKeys（每行 await drainChain 排空后台链），compaction 在链上数秒时每行阻塞数秒 → kv 后端 10 万行插入 353s；改为批级预加载本批 PK 一次，实测 353s→12.5s（28 倍）/ opfs 25s；新增 kv/opfs 双后端 10 万行回归（性能护栏+索引完整+崩溃恢复），aria-cache 测试同步适配显式 flush	2026-08-10 20:14:57 +08:00
thzxx	34225a86b3	fix(P0): SSTable rangeScan 尾块漏读 — 索引块记录块尾 key 但二分按块首语义定位，endKey 落在块尾时下一块被排除导致二级索引查询丢数据（5万行丢106~771条）；endBlockIdx 多扫一块 + 4 个 sstable 边界回归 + 重建二级索引大数据量回归（含崩溃恢复）。附带：checkpoint 同步 flush 二级索引 LSM（P1）、kv 后端页面化 + SharedMemoryBackend chunk 化、生产负载验证测试	2026-08-10 18:18:50 +08:00
thzxx	25bab0f9aa	feat: v0.6.1 — AriaEngine 可选自研 KVStore 后端（storageBackend: 'kv'）+ KVStore APPEND 日志类型 + 10 个 aria+kv 集成测试 + 文档全量同步	2026-08-10 14:52:38 +08:00
thzxx	24b3ca1079	release: v0.6.0 — 完全移除 IndexedDB，自研 KVStore 事务存储引擎（多key原子写/快照日志恢复/CRC自愈）+ KVStoreEngine + 旧库迁移工具 + 10万级压力验证 + 崩溃注入e2e	2026-08-10 13:56:04 +08:00
thzxx	334067d89e	release: v0.5.1 — 存储后端生产级硬化（CRC-32/全库加密/WAL分片/页面化存储/多标签页锁/e2e）+ 深度审查修复（假实现接线/死代码清理）	2026-08-10 12:07:00 +08:00
thzxx	d269bdfb75	release: v0.4.3 — 关闭时序与后台任务加固（close 排空、失败不吞错、compaction 竞态修复）+ 提交先 WAL	2026-08-09 19:48:06 +08:00
thzxx	22b0b1fad4	release: v0.4.2 — 生产就绪与崩溃自愈 + 问题清单修复 + 版本迭代	2026-08-09 19:15:37 +08:00
thzxx	a1e4f5071c	release: v0.4.1 — Aria 级联/ALTER/clearAll + 流式查询/派生表 + 正确性加固 ... 新增： - AriaEngine 外键级联（CASCADE/SET NULL/RESTRICT）+ clearAll() 重置 API - 引擎级 alterTable：Aria DROP COLUMN 重写存储行 + schema 持久化 - 流式查询 queryStream / findStream（LSM 惰性扫描不物化） - FROM 派生表 / 多列 ON 哈希连接 / COUNT(DISTINCT) / NULLS FIRST/LAST - 普通列别名 + ORDER BY 别名 + 无表查询 + 字符串常量列 - 演示页引擎切换器（Memory/Aria）+ 预设自动重置 修复： - Aria WAL DROP_TABLE 崩溃恢复（删表复活）+ 恢复后 WAL 截断 - Memory update/delete 索引维护（unique 约束绕过） - 关联 EXISTS 绑定失效 / HAVING 标量子查询 / INSERT SELECT 位置错位 - 裸布尔列条件（WHERE done / CASE WHEN done） - Aria $in 重复行 / JOIN 主表 WHERE 下推 / DROP INDEX 报错 - ORDER BY/GROUP BY/SELECT 表前缀列 + SQL '' 标准转义 质量：894 测试 · 47 套件 · 81.5% 覆盖率	2026-08-08 13:36:34 +08:00
thzxx	d544501e1c	release: v0.3.2 — 质量加固 + SQL扩展 + 表达式 + 并发同步 ... v0.2.6 质量加固: - 修复 AriaEngine 二级索引 SSTable 互相覆盖(命名空间隔离) - 修复 LSM 多版本读取顺序错误 + MergeIterator 取最新来源 - 重写 LZ4 压缩器(往返一致性 + 缓冲区溢出) - sstableCache LRU 上限 + 预加载兜底(BufferPool 配置生效) - 修复 React/Vue 集成 import type 运行时 bug + exports 子路径 - 新增 38 个测试(LZ4往返/Crypto/集成), 删除伪测试 v0.3.0 SQL 功能扩展: - 多语句 parseAll + 事务语句 BEGIN/COMMIT/ROLLBACK - INSERT INTO ... SELECT + UNION/UNION ALL + EXISTS 关联子查询 - CREATE/DROP INDEX 五引擎实现 + 别名 WHERE 修复 - benchmark 页面 + 36 个新测试 v0.3.1 表达式与性能: - CASE WHEN 表达式(SELECT 列/WHERE/聚合) - JOIN + 关联子查询逐行绑定 - WAL 批量组提交(写放大 O(N)→O(1)) - 修复 pending frozen 可见性 + flush 缓存竞争 v0.3.2 并发: - CASE WHEN 用于 WHERE/聚合 + JOIN 哈希连接 - 多标签页同步(multiTabSync + BroadcastChannel) - IndexedDB schema 持久化(reopen 后表结构恢复) - 修复 where-matcher 顶层 $not - 修复 CJS 产物 .js 被 ESM 解析(exports 空) — .cjs 后缀 + exports 修正 - 836 测试 / 44 套件 / 81.0% 覆盖率	2026-08-08 10:41:30 +08:00
thzxx	eb79b2198e	release: v0.2.5 — 质量加固 + Bug修复 + 性能优化 + SQL扩展	2026-07-29 21:50:53 +08:00
thzxx	4c26882caa	release: v0.2.4 — 701 tests, 32 suites, 零死代码, 零空壳, 全模块接入	2026-07-27 22:18:08 +08:00
thzxx	d799e968ab	fix: dts TS类型修复	2026-07-27 22:06:45 +08:00
thzxx	3d30e8174d	feat: v0.2.4 OPFS写锁 + 性能基准 + BufferPool集成 + REINDEX/VACUUM + 查询优化器	2026-07-27 22:00:42 +08:00
thzxx	f248e5fb05	feat: v0.2.4 惰性扫描 + 写背压 + 内存预算 + ANALYZE + 加密 + Savepoint + 在线备份	2026-07-27 21:55:57 +08:00
thzxx	da999d607b	release: v0.2.4 二级索引 + MVCC + BloomFilter + WAL全同步 + 内存预算	2026-07-27 21:50:15 +08:00
thzxx	2493209611	fix: v0.2.3 OPFS数据恢复 + Aria WAL事务边界修复	2026-07-27 21:30:35 +08:00
thzxx	fef4db44ca	release: v0.2.2 AriaEngine OPFS 自研存储后端 — 零依赖纯文件系统	2026-07-27 21:08:57 +08:00
thzxx	f84673e519	feat: v0.2.0 AriaEngine 自研存储引擎 ... - 新增 AriaEngine: LSM-Tree 页面式存储引擎，19 个模块，~3500 行 TS - page/: Slotted Page 格式 (header/slot/tuple/format) + CRC32 - buffer/: Buffer Pool (LRU 缓存 + 驱逐策略) - index/: LSM-Tree (MemTable 红黑树 + SSTable + Bloom Filter + Merge Iterator) - wal/: WAL 日志 (二进制格式) + Checkpoint 管理 - transaction/: MVCC 版本链 + 快照隔离 - store/: IndexedDB / Memory 双后端抽象 - compression/: LZ4 页面压缩 - 完整持久化: Schema 自动保存、SSTable 元数据管理、WAL 恢复 - 事务感知 CRUD: insert/update/delete 在事务中缓冲到 snapshot - mode: 'aria' 激活自研引擎 - 新增 7 个测试文件，测试数 318 → 524，套件 20 → 27 - aria-page.test.ts (32 tests): Page 格式单元测试 - aria-index.test.ts (26 tests): Bloom Filter + MemTable - aria-sstable.test.ts (9 tests): SSTable Builder + Reader - aria-buffer.test.ts (25 tests): LRU + Eviction + Buffer Pool - aria-wal-mvcc.test.ts (22 tests): WAL 编解码 + MVCC 事务 - aria-compress.test.ts (11 tests): LZ4 + Merge Iterator - aria.test.ts (80 tests): AriaEngine 集成 + 边界测试 - Bug 修复: LRUList size 跟踪、WAL 缓冲区越界、ColumnEncoding 导入 - 全面更新 README.md + site/ 站点文件 (index/docs/demo)	2026-07-27 16:40:29 +08:00