Skip to content

feat(context): 上下文工程路线图实施 + 3 轮对抗审查修复 - #400

Merged
tall-1997 merged 4 commits into
mainfrom
feat/roadmap-context-engineering
Nov 18, 2026
Merged

tall-1997 merged 4 commits into
mainfrom
feat/roadmap-context-engineering

Conversation

@tall-1997

Copy link
Copy Markdown
Owner

上下文工程路线图实施 + 3 轮对抗审查修复(33 项发现全部核实处置),参考 5 个成熟 harness(deer-flow/ZCode/OpenHarness/dsh/codex-harness)的机制提取。

路线图实施

  • 项3 压缩边界不切工具对:preserveToolPairsAtBoundaries(kept 尾/切片起点双向守卫 + 退化单消息窗前向扩展 + 相位单调结构),防 Anthropic 悬空 tool_result 400
  • 项10 阈值公式族:micro-prune 触发从 ContextPolicy.forContextWindow 的 compactThreshold × 0.8 派生(32-64K 绝对档不再晚于 LLM 压缩),抽出 pruneTriggerTokens()
  • 项2 门控读数:contextTokensForPolicy(真实或校准保底),重启后无 usage 报告的会话也有覆盖
  • 项5 注入净化双通道:neutralizeUntrustedTags/neutralizeRemoteToolResults——远程内容工具(web_fetch/web_search/browser_use/mcp/ssh_exec)结果中的框架标记转义;tag 大小写无关全局、权威信封锚全局全角、其余 marker 行首 ZWSP(保中段字节);marker 循环先于 tag 循环防 GOAL 逃逸;净化清单与分类器清单共享常量防漂移
  • 项9 记忆去重:writeMemory 写入侧签名去重(行保留归一化防代码类误判)+ ENTRY_MARK 标记行拒绝(行首缩进逃生门)
  • 项1/项4 审计:已被 0e62a88 结构化资产回注与既有 fail-closed 审批覆盖(免实施,附核实记录)

对抗审查 3 轮修复(33 项发现全部核实)

  • 第 1 轮:grep 死条目(canonical 名)、去重 Skipped 被判 isError、pair 守卫退化形态、大小写变体逃逸、ssh_exec 漏网等 8 项
  • 第 2 轮:P0 解耦只做加载层(memoryAssembly 仍被 memoryOn 门控——memory off 规则缺失而文案声称绑定)→ assemble 无条件 + 开关只门日记侧;校准 EMA 双缩放(√r 陷阱)→ observe 喂 raw;lane 预算 key 按位置错位 → 显式构造;GOAL 净化被 tag 逃逸 → marker 先行;PLAN_RETRY NPE → 统一行首 map
  • 第 3 轮:coveredEndIdx 回退 while 撤销前向 snap → 单向前向(单调不回退);压缩摘要路径绕过净化(远端标记常驻权威位)→ 摘要输入/输出经投影;子代理 lane 历史无净化 → SubAgentRunner historySanitizer DI 参数;lane 规则饥饿与截断语义对齐;micro-prune 与 aging 保窗对齐(keep 6)+ isError 不裁;校准 observe 抽 helper
  • 全局整合推演:四通道 200K GLOBAL.md 场景、三层折叠叠加、规则×压缩交互均验证自洽

验证

  • 全量 6777 测试 0 失败 0 错误(净增 ~80 用例);9 门禁全绿(基线按 ratchet 下调/更新);Python 权威镜像 20/20
  • 附带抽取:awaitCompaction/observeCalibratedUsage/pruneTriggerTokens 三个 helper(架构上限内)

tall-1997 added 4 commits November 19, 2026 03:29
- 项3 工具对边界守卫:preserveToolPairsAtBoundaries(kept 尾 Opens on
  tool_result → 拉回锚点;slice 开在 tool_result → 拉回起点),修复
  Anthropic 悬空 tool_result 400 类
- 项10 阈值公式族:micro-prune 触发比例从 effectiveCompactPercent 派生
  (compact% × 0.8),廉价层始终先于压缩门;移除冗余 tier-②
  (in-loop 守卫已覆盖且陈旧读数会触发双重压缩——对抗审计发现)
- 项2 门控读数:contextTokensForPolicy(真实或校准保底),重启后无
  usage 报告的会话也有覆盖
- 项5 注入净化:远程内容工具(web_fetch/web_search/browser_use/mcp)
  结果中的框架保留标记转义(neutralizeUntrustedTags),防伪造
  system-reminder/权威信封
- 项9 记忆去重:writeMemory 写入侧签名去重(归一化空白),模型回声
  不再双份入库
- 项4 fail-closed 审计:ApprovalGate 已满足(CE 重抛/超时拒绝/fatal
  确认)——无需改动
- 项1 审计:CompactAttachment 模式已由 SessionStateSnapshot/TaskAnchor/
  WorkingMemory/DroppedRoundDigest(0e62a881)覆盖

新增测试:CompactToolPairGuardTest 4 用例、ChatHistoryMicroPruneTest
净化与派生触发用例、MemoryWriteDedupTest 4 用例。全量 6716 测试 0
失败;9 门禁全绿(基线按 ratchet 下调/更新)。
两个对抗审查代理的全部发现逐条核实后修复:
1. MICRO_PRUNABLE_TOOLS 的 grep_source 死条目 → 改 canonical 名 grep
2. writeMemory 去重 Skipped 被判 isError → MemoryTools 成功分类放宽
3. preserveToolPairs 退化形态(a==s 且 kept 尾开在载体)→ 前向扩展跨载体组
4. coveredEndIdx 单调钳制:marker 锚不后移(reduced-retry 振荡)+
   sliceAnchor<effectiveStartIdx 时中止
5. neutralizeUntrustedTags 大小写变体 → tag 正则 IGNORE_CASE
6. 净化清单与分类器清单对齐:共享 HarnessNoteMarkers.ALL + HOST_NOTE
   (全角/ZWSP 按形状转义,幂等保持)
7. REMOTE_CONTENT_TOOLS 补 ssh_exec(远端注入面同类)
8. writeMemory 拒绝正文含 ENTRY_MARK 形标记行(幻影条目)+ 去重归一化
   改行保留语义(防代码类条目误判)+ 循环内 Regex 提出为字面
9. 陈旧注释与 file_read 排除理由 KDoc 修正

验证:3 测试类 21 用例全绿(含 5 个新回归用例)。未修复项记录:
prune 节省对门不可见(需投影感知估算,后续路线图)、slimText marker
nonce(P3)、aging/micro-prune 双机制统一(P2 一致性)、ApprovalGate
90s 调参(设计决策)。
第 2 轮两代理的核实发现:
- P0:记忆开关解耦只做到加载层,memoryAssembly 仍被 memoryOn 门控——
  memory off 时规则整段缺失而 DISABLED 文案声称仍绑定。修复:assemble
  无条件执行,开关只门控日记侧(daily/TOC/召回);快照层同步(规则
  片段无论开关都记录,不再冻结)+ 两处 KDoc。
- P1:lane 规则块无预算 → 复用 MemoryPromptBudget(与父路径同纪律),
  大 GLOBAL.md 带可见标记截断而非无界膨胀;lane 规则顺序统一为
  身份在前规则在后(与 worker 一致),KDoc 同步。
- P2:GOAL 标记净化被 tag 先行逃逸破坏 → marker 循环先于 tag 循环;
  PLAN_RETRY 无方括号前缀落入未收录 map 的 NPE → 统一行首 map 收录
  全部非权威标记 + 循环内 Regex 全部提升为字面量
- P2:校准腐蚀——observe 的 estimated 用未投影历史而 actual 是投影后
  请求 → 改为投影后请求的同源估算(EMA 不再被拉向 1.0)
- P2:reduced-retry 切点可落工具对中间 → coveredEndIdx 收边到对边界
  (use 行前推含 carrier;carrier 行回退整对剔除),marker 锚走查下限
  回到 effectiveStartIdx
- P2:marker 转义改行首限定保中段字节(HTTP 透传规则文件场景),
  权威信封锚保持全局转义(standing-instruction 级伪造无合法读者)
- P2:preserveToolPairs 相邻载体振荡 → 相位结构(shrink→shrink→forward
  单调不回退)
- 报告真实性:06d2a190 的「5 个新回归用例」实为 4(一次重命名计入),
  在此更正;后续提交按实际 XML 计数。

验证:4 测试类全绿;快照测试契约更新为解耦后语义。
第 3 轮两代理(新修复专攻 + 全局整合推演)的全部核实发现:
- coveredEndIdx 快照被回退 while 撤销 → 只保留前向 snap(单调有界),
  同时消除空走廊楔死路径
- lane 预算 Fragment 按位置取 key/priority 错位(缺前置层时 session 规则
  被静默丢弃)→ 每层显式 key/priority 构造;app-global truncatable 与
  父路径对齐(true);预算整块丢弃追加 lane 侧省略声明行
- 校准双重缩放(EMA 不动点 √r)→ estimateMessagesTokens 加 calibrated
  参数,observe 喂 raw 总和;observe 块抽为 observeCalibratedUsage helper
- 压缩路径绕过净化:two-shot 摘要输入/输出经 neutralize 投影(远端标记
  不再经摘要常驻权威位)
- 子代理/主管 lane 历史无净化 → SubAgentRunner historySanitizer 参数,
  两个调用点接入同一投影(tools→ui 分层以 DI 参数规避)
- micro-prune 与 aging 保窗对齐(keep 6)+ isError 结果不裁
- 阈值公式族同源:prune 触发从 ContextPolicy.forContextWindow 的
  compactThreshold × 0.8 派生(32-64K 绝对档不再晚于 LLM 压缩),抽出
  pruneTriggerTokens();快照/门 KDoc 修正
- ENTRY_MARK 拒绝文案补行首缩进出路

验证:全量 6777 测试 0 失败 0 错误(含新增 7 用例);9 门禁全绿
(AgentLoopExt 1896=上限,架构基线已下调);Python 镜像 20/20。
@tall-1997
tall-1997 merged commit 93a8f2c into main Nov 18, 2026
1 check passed
@tall-1997
tall-1997 deleted the feat/roadmap-context-engineering branch November 18, 2026 23:51
tall-1997 added a commit that referenced this pull request Nov 19, 2026
两轮对抗审查修复 + 补齐报告中的 4 项(journal 终态/冷却文案/两处 UI 入口/按模型上下文预算),并合并 main(#399 压缩级联、#400 上下文工程路线图)。全量单测 6967 通过,10 项门禁全绿。
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant