fix: v0.5.5 全量复检修复 — 图片 token 估算缺失(压缩预算失真)+ 过时文案清理
背景:v0.5.4 多模态增强(多轮图片记忆 + 总开关 + DeepSeek vision)发布后的 全量全方位复检,重点核查新增功能的跨模块边界。 复检通过项(无回归确认): - 多轮图片记忆 × 五家 adapter:Anthropic(base64 块)/ OpenAI(image_url parts)/ Ollama(纯 base64 数组)/ Agnes / MiMo 均正确处理恢复的历史 images - 多轮图片记忆 × 引擎运行时压缩:摘要请求仅含文本(图片不进摘要调用); toKeep 消息的 images 原样保留;孤立 tool 消息配对逻辑不受影响 - 多轮图片记忆 × 摘要服务:maybeSummarize 用截断文本 transcript,无图片干扰 - history 组装 slice(0,-1) × 图片恢复无冲突(当前消息 images 走独立通道) - 编辑重发/重新生成路径与图片恢复同源(attachments.preview),行为一致 修复项: - P1 token 估算器完全忽略 images(estimateMessagesTokens): 带 10 张图的消息被按纯文本估算。影响:压缩 keepBudget 严重低估 → 压缩后实际 token 仍超 80% 阈值 → 反复触发压缩循环(每轮多一次 LLM 摘要调用);上下文占用显示严重失真。修复:每张图按 1000 tokens 计入 (1024px 压缩图在主流 Provider 约 700~1500 视觉 token,取保守上界) - 文案清理:ChatInput 附件按钮 Tooltip 硬编码"DeepSeek 不支持图片"改为 按拒绝原因区分(开关未开启 vs 当前模型不支持);openai-format.ts 共享层 注释更新(DeepSeek vision 已支持,非 vision 模型才丢弃) 测试(243 → 245 用例): - 新增 token 估算图片用例 ×2:带 images 消息按每张 1000 tokens 计入 / 无 images 字段消息行为不变(向后兼容) 验证: lint 0 / typecheck 双工程 0 / test:electron 245 全过 / build 成功
This commit is contained in:
@@ -37,6 +37,27 @@ describe('estimateStringTokens', () => {
|
||||
});
|
||||
|
||||
describe('estimateMessagesTokens', () => {
|
||||
// ===== v0.5.5: 图片 token 估算(多轮图片记忆场景) =====
|
||||
|
||||
it('带 images 的消息按每张 1000 tokens 计入(v0.5.5 — 此前完全忽略)', () => {
|
||||
const textOnly = estimateMessagesTokens([{ content: '看这张图', role: 'user' } as never]);
|
||||
const withImage = estimateMessagesTokens([
|
||||
{ content: '看这张图', role: 'user', images: [{ url: 'data:image/jpeg;base64,x' }] } as never,
|
||||
]);
|
||||
// 差值 = 1 张图的估算(1000)
|
||||
expect(withImage - textOnly).toBe(1000);
|
||||
|
||||
const withThree = estimateMessagesTokens([
|
||||
{ content: '', role: 'user', images: [{ url: 'a' }, { url: 'b' }, { url: 'c' }] } as never,
|
||||
]);
|
||||
// 3 张图 + 消息开销(content 为空 = 0)
|
||||
expect(withThree).toBe(3 * 1000 + 4);
|
||||
});
|
||||
|
||||
it('无 images 字段的消息行为不变(向后兼容)', () => {
|
||||
expect(estimateMessagesTokens([{ content: 'abc', role: 'user' } as never])).toBe(4 + 1);
|
||||
});
|
||||
|
||||
it('每条消息计入结构性开销(4 tokens)', () => {
|
||||
const msgs = [{ content: '' }, { content: '' }];
|
||||
expect(estimateMessagesTokens(msgs)).toBe(8); // 2 * 4 overhead
|
||||
|
||||
Reference in New Issue
Block a user