refactor(trace): 把剥 url.Error 壳的实现收敛成 trace.URLCause
五处逐字同形的三行（mediafetch.sanitizeErr / httpclient.transportCause / vision.fetchCause / telegram.callCause / weixin_ilink.urlFreeCause）收敛为 trace 包里的唯一实现，13 个调用点改为直接调用；5 份 body 只剩 1 份，5 个 未导出符号与其文件内注释整份删除（不留薄封装）。 行为等价：只剥 *url.Error、不新增包装，内层哨兵链（context 取消/超时、 *net.DNSError 等）原样透传，因此重试/降级/熔断的分类判据不变。两处刻意的 收紧： - 逐层剥：内层若还是 *url.Error 也一起剥（只剥一层时内层仍带同一段地址）； - *url.Error 的 Err 为 nil（或链自引用）时不再回落到原串，退化成只含 Op 的 替身 —— 那种错误无法在不带地址的前提下原样返回，而地址里就是凭据。 顺带把 httpclient 的 user:pass@ 用例改成变异可打红：net/http 自己在 *url.Error 里就把密码打成 ***，「密码不出现」在剥壳与不剥壳下都成立（空跑）， 用户名才是分水岭。 验收：go build ./... + go vet ./... + 指定包 go test -count=1 全绿； 变异验证（把 URLCause 改成透传）⇒ 五处「不含 URL」断言全红。
This commit is contained in:
AskaEth committed
1 parent
af61b8ccfe
commit
4c187ac070
10 files changed
+249
-81
No files matched your search
@@ -229,13 +229,3 @@ func blockedAddressOf(err error) (*blockedAddressError, bool) {
|
||||
}
|
||||
return nil, false
|
||||
}
|
||||
|
||||
// fetchCause 返回取回失败的底层原因：*url.Error 会把整条 URL（含查询串里
|
||||
// 可能的凭据）拼进错误串，这里只取内层错误，哨兵链因此也保留下来。
|
||||
func fetchCause(err error) error {
|
||||
var uerr *url.Error
|
||||
if errors.As(err, &uerr) && uerr.Err != nil {
|
||||
return uerr.Err
|
||||
}
|
||||
return err
|
||||
}
|
||||
@@ -10,6 +10,8 @@ import (
|
||||
"os"
|
||||
"strings"
|
||||
"time"
|
||||
|
||||
"git.yeij.top/AskaEth/Cyrene_v2/internal/runtime/trace"
|
||||
)
|
||||
|
||||
// 读取图像字节与响应体的体积上限，使恶意或
|
||||
@@ -139,7 +141,7 @@ func fetchURL(ctx context.Context, rawURL string, client *http.Client) (string,
|
||||
if blocked, ok := blockedAddressOf(err); ok {
|
||||
return "", nil, blocked
|
||||
}
|
||||
return "", nil, fmt.Errorf("vision: %w: %w", ErrFetch, fetchCause(err))
|
||||
return "", nil, fmt.Errorf("vision: %w: %w", ErrFetch, trace.URLCause(err))
|
||||
}
|
||||
defer func() { _ = resp.Body.Close() }()
|
||||
if resp.StatusCode != http.StatusOK {
|
||||
|
||||
@@ -0,0 +1,58 @@
|
||||
package trace
|
||||
|
||||
import (
|
||||
"errors"
|
||||
"net/url"
|
||||
)
|
||||
|
||||
// 本文件是「从 net/http 的 *url.Error 里取回原因」的**唯一**实现。
|
||||
//
|
||||
// 为什么需要它：*url.Error 的 Error() 会把**整条地址**渲染进错误串 ——
|
||||
// `Get "https://h/p?access_token=…": dial tcp …`。而 net/http 在两条路上都会包出它：
|
||||
// 传输层失败（`client.Do`）与地址解析失败（`http.NewRequest`）。这条错误串会进日志、
|
||||
// 进工单、进模型可见视图，而平台的资源地址几乎都带凭据（预签名上传地址的
|
||||
// `encrypted_query_param`、CDN 的 `rkey`、Bot API 路径里的 `/bot<token>/`、OAuth 回调
|
||||
// 里的 `access_token`、user:pass@），于是「原样外抛」等于把凭据写进日志。
|
||||
//
|
||||
// 为什么不能 `fmt.Errorf("...: %w", err)` 直接外抛：%w 只给错误串加前缀，地址仍在串里
|
||||
// —— 包一层不是修复，只是换个位置泄漏。剥壳（取内层 cause）才是。
|
||||
//
|
||||
// 这段逻辑曾被五个客户端各写一份逐字同形的三行（mediafetch.sanitizeErr /
|
||||
// httpclient.transportCause / vision.fetchCause / telegram.callCause /
|
||||
// weixin_ilink.urlFreeCause，共 13 个调用点）。同形实现一分家，最容易发生的漂移是
|
||||
// 「其中一份为了多带点诊断把地址留下来」，而那正是凭据进日志的那一条路 —— 因此收敛
|
||||
// 到这里，调用点只剩一次函数调用（AGENTS.md §10「三次复制必须抽取」）。
|
||||
|
||||
// URLCause 剥掉 err 里**所有层**的 *url.Error 外壳，返回不携带任何 URL 的内层原因。
|
||||
//
|
||||
// 三条口径：
|
||||
// - **逐层剥**：内层若还是 *url.Error（调用方又包了一次 Do、或链上叠了两层），继续
|
||||
// 往下剥 —— 只剥一层的话内层那条仍然带着同一段地址；
|
||||
// - **只丢地址、不丢原因**：返回的是原来的底层 error 本身（不新增包装），因此
|
||||
// errors.Is/As 对 context.Canceled、context.DeadlineExceeded、*net.DNSError 等
|
||||
// 哨兵仍然成立 —— 调用方的分类（重试 / 降级 / 熔断）不受影响，也绝不会把同一个
|
||||
// 原因在文案里说两遍；
|
||||
// - **非 *url.Error 原样返回**：同一个值、不加包装，可安全当作「可能剥壳、也可能
|
||||
// 什么都没做」的透传。
|
||||
//
|
||||
// 唯一的例外是 `*url.Error` 没有内层原因（Err 为 nil）或链自引用：那种错误**无法**
|
||||
// 在不带地址的前提下原样返回，于是退化成只含操作名（Get/Post/parse）的替身 —— 宁可
|
||||
// 少一条原因，也不回落到原串（回落就是泄漏）。net/http 的两处构造都填了 Err，因此
|
||||
// 这条路在真实调用中到不了。
|
||||
func URLCause(err error) error {
|
||||
for {
|
||||
var uerr *url.Error
|
||||
if !errors.As(err, &uerr) {
|
||||
return err
|
||||
}
|
||||
if uerr.Err == nil || uerr.Err == err {
|
||||
return urlOpOnly(uerr.Op)
|
||||
}
|
||||
err = uerr.Err
|
||||
}
|
||||
}
|
||||
|
||||
// urlOpOnly 是「*url.Error 没有可用内层原因」时的替身：只留操作名，地址一个字节都不留。
|
||||
func urlOpOnly(op string) error {
|
||||
return errors.New("url " + op + " failed")
|
||||
}
|
||||
@@ -0,0 +1,162 @@
|
||||
package trace
|
||||
|
||||
// 本文件钉住 URLCause 的唯一职责：把 *url.Error 剥到内层 cause，且**不携带任何 URL**。
|
||||
//
|
||||
// 为什么值得单独一条：net/http 在传输层失败与地址解析失败时都会包出 *url.Error，
|
||||
// 而它的 Error() 里就是整条地址 —— 平台的资源地址几乎都带签名凭据（预签名 URL、
|
||||
// CDN rkey、Bot API 的 /bot<token>/、OAuth 的 access_token、user:pass@）。旧实现是
|
||||
// 五个客户端各写一份同形的三行剥离，任一份漂移就等于多一条凭据进日志的路。
|
||||
//
|
||||
// 每条用例都是「把它改回去就变红」的形状：断言的是剥壳**之后**的错误文本，也就是
|
||||
// 调用方实际打进日志的那段字符串。
|
||||
|
||||
import (
|
||||
"context"
|
||||
"errors"
|
||||
"fmt"
|
||||
"net/url"
|
||||
"strings"
|
||||
"testing"
|
||||
"time"
|
||||
)
|
||||
|
||||
// urlCauseTests 覆盖带凭据的三种地址形态：查询串里的 access_token、user:pass@
|
||||
// 用户信息、以及路径里的 token（Bot API 把 bot token 写在路径里）。
|
||||
var urlCauseTests = []struct {
|
||||
name string
|
||||
rawURL string
|
||||
secret string
|
||||
}{
|
||||
{"query-access-token", "https://cdn.example.com/a/b?access_token=QUERY-ACCESS-TOKEN&x=1", "QUERY-ACCESS-TOKEN"},
|
||||
{"userinfo", "https://user:USER-PASS-SECRET@api.example.com/x", "USER-PASS-SECRET"},
|
||||
{"path-token", "https://api.example.com/bot12345:BOT-TOKEN-SECRET/getUpdates", "BOT-TOKEN-SECRET"},
|
||||
}
|
||||
|
||||
// TestURLCauseStripsURLKeepsCause 剥壳后错误串里只剩原因：地址、路径、查询串、用户
|
||||
// 信息一个片段都不出现，而底层原因仍然在。改回原样 `%w` 外抛（或只剥一层）就变红。
|
||||
func TestURLCauseStripsURLKeepsCause(t *testing.T) {
|
||||
t.Parallel()
|
||||
inner := errors.New("dial tcp 10.0.0.1:443: connection refused")
|
||||
for _, tc := range urlCauseTests {
|
||||
t.Run(tc.name, func(t *testing.T) {
|
||||
t.Parallel()
|
||||
got := URLCause(&url.Error{Op: "Get", URL: tc.rawURL, Err: inner})
|
||||
msg := got.Error()
|
||||
if strings.Contains(msg, tc.secret) {
|
||||
t.Fatalf("地址里的凭据进了错误：%v", msg)
|
||||
}
|
||||
for _, fragment := range []string{"https://", "cdn.example.com", "api.example.com", "/bot12345", "?x=1"} {
|
||||
if strings.Contains(msg, fragment) {
|
||||
t.Fatalf("地址片段 %q 进了错误：%v", fragment, msg)
|
||||
}
|
||||
}
|
||||
if !strings.Contains(msg, "connection refused") {
|
||||
t.Fatalf("剥掉地址时把原因一起丢了：%v", msg)
|
||||
}
|
||||
})
|
||||
}
|
||||
}
|
||||
|
||||
// TestURLCauseKeepsSentinelChain 剥壳不得破坏哨兵链：调用方靠 errors.Is 分类
|
||||
// （重试 / 降级 / 熔断），而地址只是副作用面。改回「重新构造一条新错误」就变红。
|
||||
func TestURLCauseKeepsSentinelChain(t *testing.T) {
|
||||
t.Parallel()
|
||||
err := &url.Error{Op: "Get", URL: "https://h/x?access_token=S", Err: context.DeadlineExceeded}
|
||||
got := URLCause(err)
|
||||
if !errors.Is(got, context.DeadlineExceeded) {
|
||||
t.Fatalf("哨兵链断了：%v", got)
|
||||
}
|
||||
if strings.Contains(got.Error(), "access_token") {
|
||||
t.Fatalf("剥壳后仍带地址：%v", got)
|
||||
}
|
||||
}
|
||||
|
||||
// TestURLCauseStripsEveryLayer 内层若还是 *url.Error（调用方又包了一次 Do、或链上
|
||||
// 叠了两层），必须一起剥 —— 只剥一层的话内层那条仍然带着同一段地址。
|
||||
func TestURLCauseStripsEveryLayer(t *testing.T) {
|
||||
t.Parallel()
|
||||
inner := errors.New("connection reset by peer")
|
||||
nested := &url.Error{Op: "Get", URL: "https://inner.example.com/p?access_token=INNER-SECRET", Err: inner}
|
||||
outer := &url.Error{Op: "Get", URL: "https://outer.example.com/p?access_token=OUTER-SECRET", Err: nested}
|
||||
|
||||
msg := URLCause(outer).Error()
|
||||
for _, secret := range []string{"INNER-SECRET", "OUTER-SECRET"} {
|
||||
if strings.Contains(msg, secret) {
|
||||
t.Fatalf("某一层的凭据进了错误（%s）：%v", secret, msg)
|
||||
}
|
||||
}
|
||||
if !errors.Is(URLCause(outer), inner) {
|
||||
t.Fatalf("多层剥壳后没回到最内层原因：%v", msg)
|
||||
}
|
||||
}
|
||||
|
||||
// TestURLCauseStripsUnderOuterWrapper 调用方用 %w 包过一层时同样剥掉：外层前缀是
|
||||
// 我们自己的文案，带地址的仍然是里层那个 *url.Error。
|
||||
func TestURLCauseStripsUnderOuterWrapper(t *testing.T) {
|
||||
t.Parallel()
|
||||
inner := errors.New("i/o timeout")
|
||||
wrapped := fmt.Errorf("client: %w", &url.Error{Op: "Post", URL: "https://h/p?access_token=WRAPPED-SECRET", Err: inner})
|
||||
msg := URLCause(wrapped).Error()
|
||||
if strings.Contains(msg, "WRAPPED-SECRET") || strings.Contains(msg, "https://") {
|
||||
t.Fatalf("包一层的 *url.Error 仍把地址带了出来：%v", msg)
|
||||
}
|
||||
if !strings.Contains(msg, "i/o timeout") {
|
||||
t.Fatalf("剥掉地址时把原因一起丢了：%v", msg)
|
||||
}
|
||||
}
|
||||
|
||||
// TestURLCausePassesThroughNonURL 非 *url.Error 原样返回（同一个值、不加包装）：
|
||||
// 五个调用点把它当「可能剥壳、可能什么都没做」的透传，多包一层会把同一个原因在
|
||||
// 文案里说两遍。
|
||||
func TestURLCausePassesThroughNonURL(t *testing.T) {
|
||||
t.Parallel()
|
||||
sentinel := errors.New("boom")
|
||||
if got := URLCause(sentinel); got != sentinel {
|
||||
t.Fatalf("非 *url.Error 被改写了：got %v", got)
|
||||
}
|
||||
wrapped := fmt.Errorf("ctx: %w", sentinel)
|
||||
if got := URLCause(wrapped); got != wrapped {
|
||||
t.Fatalf("非 *url.Error 的包装被拆开了：got %v", got)
|
||||
}
|
||||
if got := URLCause(nil); got != nil {
|
||||
t.Fatalf("nil 被改写成了 %v", got)
|
||||
}
|
||||
}
|
||||
|
||||
// TestURLCauseWithoutCauseStaysURLLess *url.Error 没有内层原因时（Err 为 nil）也无法
|
||||
// 原样返回 —— 它照样会把地址渲染进 Error()。此时只留操作名：宁可少一条原因，也不
|
||||
// 回落到原串。改回「Err 为 nil 就 return err」就变红。
|
||||
func TestURLCauseWithoutCauseStaysURLLess(t *testing.T) {
|
||||
t.Parallel()
|
||||
got := URLCause(&url.Error{Op: "Get", URL: "https://h/p?access_token=NIL-CAUSE-SECRET"})
|
||||
if got == nil {
|
||||
t.Fatal("返回了 nil")
|
||||
}
|
||||
msg := got.Error()
|
||||
if strings.Contains(msg, "NIL-CAUSE-SECRET") || strings.Contains(msg, "https://") {
|
||||
t.Fatalf("没有内层原因时回落到了原串（泄漏地址）：%v", msg)
|
||||
}
|
||||
if !strings.Contains(msg, "Get") {
|
||||
t.Fatalf("连操作名都没留下（诊断面全丢）：%v", msg)
|
||||
}
|
||||
}
|
||||
|
||||
// TestURLCauseSelfReferentialChainTerminates 自引用的错误链不能让剥壳死循环。
|
||||
func TestURLCauseSelfReferentialChainTerminates(t *testing.T) {
|
||||
t.Parallel()
|
||||
self := &url.Error{Op: "Post", URL: "https://h/p?access_token=SELF-SECRET"}
|
||||
self.Err = self
|
||||
done := make(chan error, 1)
|
||||
go func() { done <- URLCause(self) }()
|
||||
select {
|
||||
case got := <-done:
|
||||
if got == nil {
|
||||
t.Fatal("返回了 nil")
|
||||
}
|
||||
if strings.Contains(got.Error(), "SELF-SECRET") {
|
||||
t.Fatalf("自引用链把地址带了出来：%v", got)
|
||||
}
|
||||
case <-time.After(5 * time.Second):
|
||||
t.Fatal("URLCause 在自引用链上没有终止")
|
||||
}
|
||||
}
|
||||
Reference in new issue
Block a user