Skip to main content

作用

让 agent “记住跨会话的事实”,同时避免对话上下文无限增长。Harness 把记忆拆成两层:
  • 第一层·日流水账 memory/YYYY-MM-DD.md —— 每天追加,原始且未去重;
  • 第二层·策划后长期记忆 MEMORY.md —— 周期性 LLM 合并去重的产物;每轮推理时作为长期记忆注入 system prompt。
围绕这两层,还有三个常用机制:
  • 对话压缩 —— 上下文太长时摘要历史、保留尾部;
  • 上下文溢出兜底 —— 模型真的报错时强制压缩并重试;
  • 大工具结果卸载 —— 单次工具返回过大时落盘 + 占位符。

三处 LLM 调用的全景

记忆管线里有 三处独立的 LLM 调用,每一处都有自己的 prompt 和触发时机。这是定制时最容易混淆的地方: 前两个是”沉淀长期记忆”,由 MemoryConfig 管;第三个是”压缩当下上下文”,由 CompactionConfig 管。三处 LLM 调用默认共享 agent 主模型,但 MemoryConfigCompactionConfig 各自支持 .model(...) 覆盖,允许用更轻量的模型执行这些辅助操作。

两层记忆是怎么工作的

要点:
  • 第一层只追加,不去重;第二层周期性整体重写;两层互不覆盖
  • 第二层永远是 LLM 注入提示的来源;第一层等待被合并。
  • 对话被压缩前的原始消息会另存一份永不压缩的日志(*.log.jsonl),供事后审计或 session_search

Flush 的三个触发点

Flush(路径 1)会在以下三个时机被触发:
  1. 每次 call() 结束 —— MemoryFlushMiddleware 的默认行为。可以用 flushTrigger 改成 NEVERTHROTTLED(Duration)
  2. 压缩前的预提取 —— CompactionConfig.flushBeforeCompact = true(默认)时,压缩对话前缀前先 flush 一次。
  3. 上下文溢出兜底 —— 模型真的报 context_length_exceeded 时,框架做一次紧急压缩,连带 flush。
这三处用的是 同一份 flushPrompt,定制后三处行为一致。 Flush 和 offload 都是异步执行的:它们在响应流结束后通过 doOnComplete 以 fire-and-forget 方式启动,不会阻塞当前 call() 的返回。换句话说,调用方拿到完整响应之后,flush LLM 调用和 JSONL offload 才在后台开始。

开启压缩

常用配置项: 上下文溢出自动恢复:模型真的返回 context_length_exceeded 等错误时,框架会强制做一轮压缩然后重试一次——前提是你配了 compaction(...),否则错误直接抛回上层。

想再轻一些?预处理参数截断

write_file 这种工具调用,参数体量很大但后期没人再看。在 LLM 摘要之前,可以先做一个不走 LLM 的字符串截断:

定制 Memory pipeline:MemoryConfig

MemoryConfig 集中管理 flush / consolidation 两条路径的 prompt、节流、保留时长,以及 per-call flush 的触发策略。所有字段都有默认值,不调 .memory(...) 时与历史行为完全一致。 Per-call flush 与后台 consolidation 使用两套独立的节流窗口。两者第一次符合条件的 call() 都会立即放行;最小间隔只限制后续运行,不表示首次运行前需要等待。

例 1:节流 per-call flush,省 token

每次 agent 调用结束都做一次 flush LLM 调用,对长会话来说成本不低。把它节流到「最多每 10 分钟一次」:
注意:
  • THROTTLED 只影响路径 1(per-call flush)。压缩内嵌的 flush(路径 2)和兜底 flush(路径 3)按各自的触发条件照常跑——压缩很少发生,那两条本来就不频繁。
  • 第一次符合条件的 call 会立即 flush;Duration.ofMinutes(10) 只限制后续的 per-call flush。
  • Offload 不受影响,session JSONL 仍然每次写完整。session_search 和会话恢复正常工作。

例 2:完全关掉 per-call flush

这样只有压缩发生时才会 flush(成本和原始压缩成本一致)。
想把 flush + 后台维护全部关掉用 .disableMemoryHooks()flushTrigger(NEVER) 只关 per-call flush,后台 consolidation 仍跑。

例 3:在默认 prompt 上追加项目规则

例 4:完全自定义 consolidation prompt

重要:自定义 consolidation prompt 必须 包含恰好两个 %d 占位符(依次是 max-tokens 和 max-chars),否则 Builder 构造时就会拒绝。这是为了让错误尽早暴露,而不是等到运行时才抛 MissingFormatArgumentException

例 5:调整后台维护节奏

例 6:用小模型跑记忆操作

flush 和 consolidation 不需要主推理模型那么强,用更便宜的模型省成本:
model(String)ModelRegistry.resolve(),也可以传 Model 实例。不设则 fallback 到 agent 主模型。

MemoryConfig 字段速查

大工具结果卸载

跟压缩独立。某次工具返回超过阈值时,全文写到一个目录、上下文里只留首尾预览 + 占位符——agent 想要全文就 read_file
默认行为:
  • 超过 80K 字符触发
  • 上下文里只保留首尾各约 2K 字符 + 一行”完整内容见 {path}
  • 默认排除 read_file(避免回读完又被卸载)
需要自己定阈值或卸载根目录用 ToolResultEvictionConfig.builder()...build()

给 agent 自己用的记忆工具

启用记忆能力时,agent 自动获得两个工具:
  • memory_search query="..." —— 关键词扫 MEMORY.md + memory/*.md,最多返回 30 条命中
  • memory_get path="memory/2026-06-02.md" startLine=10 endLine=40 —— 读指定行范围
模型在看到 MEMORY.md 已被截断的提示时通常会自己调 memory_search 找老内容。

后台维护

启用记忆能力时还会跑一个后台节流任务。第一次符合条件的 call() 会立即运行,后续调用遵守最小间隔(默认 30 分钟):
  • 把超过 dailyFileRetentionDays(默认 90 天)的日流水账归档到 memory/archive/
  • 跑一次 MEMORY.md 合并(consolidation)
  • 清理超过 sessionRetentionDays(默认 180 天)的会话日志
进入维护流程不一定会调用模型:如果自上次成功合并以来没有新增日流水账内容,consolidation 会跳过 LLM 请求。FlushTrigger.never() 不会关闭这条维护路径。 所有阈值都可以通过 .memory(MemoryConfig.builder()...) 调,绝大多数项目不需要碰。

完全关掉

如果你想自己接管记忆 / 自己写工具:
两者一起用时,还会跳过 <memory_context>MEMORY.md)注入,但保留 Domain Knowledge / AGENTS / knowledge 上下文。 disableMemoryHooks() 是核选项;只想节流不想关,用 .memory(MemoryConfig.builder().flushTrigger(...).build())

相关文档

  • 工作区MEMORY.md / memory/ 在工作区的位置
  • Context — 永不压缩的对话日志 *.log.jsonl
  • 架构 — 长会话事实如何沉淀进 MEMORY.md