Cyrene_v2

809 Commits 7 Branches 0 Tags

3 Commits

Include renames

Author	SHA1	Message	Date
AskaEth	542bac677d	fix(trace): UpstreamError 默认不带 error.message，要带必须显式 opt-in 复审 P2 收口。上一条留的漏法（不是理论，是构造得出的）： `{"error":{"code":"invalid_request_error","message":"Invalid value: <用户原文>"}}` —— 默认保留前 128 rune，那 128 rune 就会原样进 error 与日志。此前的用例只钉了 input/echo 这类 sibling 字段，没钉到 message 这一面；而 M41（embedding input 是她的记忆正文、DashScope TTS input 是她要念的话）与 M42（渠道响应体）都把这个 helper 当模板，默认带 message 等于把洞复制到十几处。改法（默认安全，放宽必须写出来）： - `UpstreamError(upstream, status, contentType, body, opts ...UpstreamOption)`：最常用的四参调用天然是最安全的那个；默认只留 Upstream/Status/ContentType/ BodyLen/BodySHA256/Code/Type； - 新增 `WithUpstreamMessage()` 作为显式开关：带 message 时必须过 RedactText （凭据形状打码 + 压平空白）再截到 maxUpstreamMessageRunes，并在注释里写明「只有在你确认该上游不会回显用户内容时才可用」； - 文件头写清取舍：宁可少一条人话提示，也不让她的原话进日志；排障靠 status + code + type + bodyLen + sha256 通常足够分类（400 还是 429、是 model_not_found 还是 context_length_exceeded、是不是同一份报文），细节要看时报文在调用点上下文里还在。测试（可变异打红）： - 新增 TestUpstreamError_DefaultDropsMessage：message 里塞哨兵的 400 ⇒ 默认构造下 error 与 slog 输出都搜不到哨兵，Message 为空，而 status/code/type/bodyLen/sha256 仍可辨；Attrs() 也不旁路带出； - 新增 TestUpstreamError_OptInMessageIsSanitized：opt-in 后 message 被截到 128 rune 且凭据被打码（超长 + 带 token 的 message）； - 既有 TestUpstreamError_DropsEchoedBody 补一条「默认 Message 为空」； - 变异验证：把默认构造改回带 message ⇒ 前两条变红；让 opt-in 跳过 RedactText ⇒ opt-in 那条变红。回归：go build ./... + go vet ./... + go test -count=1 ./... 全绿（backthink 的两条 2s 定时用例在满并发下偶发超时，单元重跑与整仓重跑均绿，与本改动无关：该包不引用 trace）；trace 包另跑 -race 绿。只动 upstream.go 与其测试，白名单/session/loop/ orchestration 未动。	2026-10-26 13:31:11 +08:00
AskaEth	6d0df6a825	fix(trace): 白名单放行 session —— 归属标识可读，正文边界不动主人 2026-10-26 裁定：session 是业务标识，不是正文。它是排障时把一条 stderr 日志对回某个会话的唯一线索；而 /admin/flow/graph 本来就按会话返回、连 sessionId 都给了，图里多一个 session 不构成新的暴露。因此把 session 加进共享白名单（safePropKeys，走 redactValue 的普通清洗），不再被写侧折成 Digest。「不放宽白名单」仍是原则：本次只放行这一个键，正文的边界一个字没动 —— - trace 侧新增 TestJSONRecorder_KeepsSessionReadableDropsBody，一条用例同时钉两件相反的事：JSONL 里 `"session":"web#lane-2"` 原文可读；同一 span 里的 result / text 哨兵正文仍然搜不到，且只在 omitted 里留下体积与指纹。 - loop 侧真循环用例补一句断言：落盘里 `"session":"sess"` 可读，而工具结果哨兵同时仍不可见。 - 变异验证：把 session 从白名单摘掉，上述两处都会变红（session 落到 omitted）。回归：go build ./... + go vet ./... + go test -count=1 ./... 全绿； trace/loop/orchestration 另跑 -race 全绿。	2026-10-26 13:20:45 +08:00
AskaEth	003d12a712	feat(trace): M40 span 写侧脱敏 + 共享上游错误收敛 helper stderr 的 JSONL 是无主人在场的落盘面，却在此前原样落工具结果（result）、子代理回复（text/summary）与上游报文，等于一次 tail 就能拷走整段对话。本切片交付两件地基： 1) 写侧脱敏（trace.JSONRecorder） - 新增 trace/span_props.go：safePropKeys 白名单与 projectSpanProps 投影，读侧（safeSpanProps）与写侧共用同一张表、同一个投影函数； - WriteSpan 落盘前经 trace.SanitizeRecord 投影：白名单键清洗，表外键只留 Digest（bytes/runes/sha256 前缀，收进 omitted），事件先 RedactEvent 再把正文键折成 Digest。落到磁盘的只有元数据，正文一个字节都不留； - 新增 trace/digest.go：Digest/DigestOf/DigestOfValue，给「脱敏后仍要能诊断」一个构造上不含正文的取值形态（体积 + 指纹），两条投影都按类型放行它。 2) 共享上游错误体收敛 helper（给 M41/M42，禁止三家各写一份） - trace.UpstreamError(upstream, status, contentType, body)：只保留 status / contentType / bodyLen / body sha256 前缀 / 上游 JSON 的 error.code / error.type / 截断 128 rune 的 error.message，其余一律丢弃，响应体原文绝不进 error 或日志；UpstreamErrorInfo 提供 Error()/Attrs()/Unwrap()（errors.Is 可判 ErrUpstream 走降级链）； - trace.HostOf / trace.MaskQuery：日志里的 URL 只回来源，凭据类 query 与 fragment 值打码为 **，user:pass@ 整段打码。 3) 剥掉三处正文上 span - loop：tool span 不再放 result，改放 result_summary（与 tool_execution.end 帧同源、已脱敏截断）与 result_digest； - orchestration：subagent span 不再放 text，subagent.done 事件不再放 summary，改记 status/steps/chars/sha256； - automations：AddRuleByName 不再 %v 整个 payload，改记 subject/type/bytes/sha256。测试：以哨兵正文在落盘字节上断言（JSONL / slog 输出），并分别对「编排层收到的原始 span」与「写侧投影」两层各钉一遍；UpstreamError 用回显 input 的 422 报文与 HTML 错误页各钉一条；解析出/未解析出 JSON 都不回原文。以上均做过变异验证（去掉保护即变红）。验收：go build ./... + go vet ./... + go test -count=1 ./... 全绿； trace/loop/orchestration 另跑 -race 全绿。	2026-10-26 13:17:42 +08:00

Author

SHA1

Message

Date

AskaEth

542bac677d

fix(trace): UpstreamError 默认不带 error.message，要带必须显式 opt-in

复审 P2 收口。上一条留的漏法（不是理论，是构造得出的）：
`{"error":{"code":"invalid_request_error","message":"Invalid value: <用户原文>"}}`
—— 默认保留前 128 rune，那 128 rune 就会**原样**进 error 与日志。此前的用例只钉了
input/echo 这类 sibling 字段，没钉到 message 这一面；而 M41（embedding input 是她的
记忆正文、DashScope TTS input 是她要念的话）与 M42（渠道响应体）都把这个 helper 当
模板，默认带 message 等于把洞复制到十几处。

改法（默认安全，放宽必须写出来）：

- `UpstreamError(upstream, status, contentType, body, opts ...UpstreamOption)`：
  最常用的四参调用**天然是最安全的那个**；默认只留 Upstream/Status/ContentType/
  BodyLen/BodySHA256/Code/Type；
- 新增 `WithUpstreamMessage()` 作为显式开关：带 message 时**必须**过 RedactText
  （凭据形状打码 + 压平空白）再截到 maxUpstreamMessageRunes，并在注释里写明
  「只有在你确认该上游不会回显用户内容时才可用」；
- 文件头写清取舍：**宁可少一条人话提示，也不让她的原话进日志**；排障靠
  status + code + type + bodyLen + sha256 通常足够分类（400 还是 429、是
  model_not_found 还是 context_length_exceeded、是不是同一份报文），细节要看时
  报文在调用点上下文里还在。

测试（可变异打红）：
- 新增 TestUpstreamError_DefaultDropsMessage：message 里塞哨兵的 400 ⇒ 默认构造下
  error 与 slog 输出都搜不到哨兵，Message 为空，而 status/code/type/bodyLen/sha256
  仍可辨；Attrs() 也不旁路带出；
- 新增 TestUpstreamError_OptInMessageIsSanitized：opt-in 后 message 被截到 128 rune
  且凭据被打码（超长 + 带 token 的 message）；
- 既有 TestUpstreamError_DropsEchoedBody 补一条「默认 Message 为空」；
- 变异验证：把默认构造改回带 message ⇒ 前两条变红；让 opt-in 跳过 RedactText ⇒
  opt-in 那条变红。

回归：go build ./... + go vet ./... + go test -count=1 ./... 全绿（backthink 的两条
2s 定时用例在满并发下偶发超时，单元重跑与整仓重跑均绿，与本改动无关：该包不引用
trace）；trace 包另跑 -race 绿。只动 upstream.go 与其测试，白名单/session/loop/
orchestration 未动。

2026-10-26 13:31:11 +08:00

AskaEth

6d0df6a825

fix(trace): 白名单放行 session —— 归属标识可读，正文边界不动

主人 2026-10-26 裁定：session 是**业务标识**，不是正文。它是排障时把一条 stderr
日志对回某个会话的唯一线索；而 /admin/flow/graph 本来就按会话返回、连 sessionId
都给了，图里多一个 session 不构成新的暴露。因此把 session 加进共享白名单
（safePropKeys，走 redactValue 的普通清洗），不再被写侧折成 Digest。

「不放宽白名单」仍是原则：本次只放行这一个键，正文的边界一个字没动 ——

- trace 侧新增 TestJSONRecorder_KeepsSessionReadableDropsBody，**一条用例同时钉
  两件相反的事**：JSONL 里 `"session":"web#lane-2"` 原文可读；同一 span 里的
  result / text 哨兵正文仍然搜不到，且只在 omitted 里留下体积与指纹。
- loop 侧真循环用例补一句断言：落盘里 `"session":"sess"` 可读，而工具结果哨兵
  同时仍不可见。
- 变异验证：把 session 从白名单摘掉，上述两处都会变红（session 落到 omitted）。

回归：go build ./... + go vet ./... + go test -count=1 ./... 全绿；
trace/loop/orchestration 另跑 -race 全绿。

2026-10-26 13:20:45 +08:00

AskaEth

003d12a712

feat(trace): M40 span 写侧脱敏 + 共享上游错误收敛 helper

stderr 的 JSONL 是无主人在场的落盘面，却在此前原样落工具结果（result）、
子代理回复（text/summary）与上游报文，等于一次 tail 就能拷走整段对话。
本切片交付两件地基：

1) 写侧脱敏（trace.JSONRecorder）
   - 新增 trace/span_props.go：safePropKeys 白名单与 projectSpanProps 投影，
     读侧（safeSpanProps）与写侧共用同一张表、同一个投影函数；
   - WriteSpan 落盘前经 trace.SanitizeRecord 投影：白名单键清洗，表外键只留
     Digest（bytes/runes/sha256 前缀，收进 omitted），事件先 RedactEvent 再把
     正文键折成 Digest。落到磁盘的只有元数据，正文一个字节都不留；
   - 新增 trace/digest.go：Digest/DigestOf/DigestOfValue，给「脱敏后仍要能诊断」
     一个构造上不含正文的取值形态（体积 + 指纹），两条投影都按类型放行它。

2) 共享上游错误体收敛 helper（给 M41/M42，禁止三家各写一份）
   - trace.UpstreamError(upstream, status, contentType, body)：只保留 status /
     contentType / bodyLen / body sha256 前缀 / 上游 JSON 的 error.code /
     error.type / 截断 128 rune 的 error.message，其余一律丢弃，响应体原文绝不
     进 error 或日志；*UpstreamErrorInfo 提供 Error()/Attrs()/Unwrap()（errors.Is
     可判 ErrUpstream 走降级链）；
   - trace.HostOf / trace.MaskQuery：日志里的 URL 只回来源，凭据类 query 与
     fragment 值打码为 ***，user:pass@ 整段打码。

3) 剥掉三处正文上 span
   - loop：tool span 不再放 result，改放 result_summary（与 tool_execution.end
     帧同源、已脱敏截断）与 result_digest；
   - orchestration：subagent span 不再放 text，subagent.done 事件不再放 summary，
     改记 status/steps/chars/sha256；
   - automations：AddRuleByName 不再 %v 整个 payload，改记 subject/type/bytes/sha256。

测试：以哨兵正文在落盘字节上断言（JSONL / slog 输出），并分别对「编排层收到的
原始 span」与「写侧投影」两层各钉一遍；UpstreamError 用回显 input 的 422 报文
与 HTML 错误页各钉一条；解析出/未解析出 JSON 都不回原文。以上均做过变异验证
（去掉保护即变红）。

验收：go build ./... + go vet ./... + go test -count=1 ./... 全绿；
trace/loop/orchestration 另跑 -race 全绿。

2026-10-26 13:17:42 +08:00