Files
Cyrene_v2/internal/runtime/loop/steer_test.go
T
AskaEth 3d8822c922
CI / Backend (build / vet / test / cross-compile) (push) Has been cancelled
CI / Frontend (tsc + vite build) (push) Has been cancelled
feat(loop,gateway): 13.4.5 目标态 —— 回合内 steer(不打断、新消息进同一上下文流)+ steer_ack 帧
规格=design/15 末尾「13.4.5 目标态规格」(不变量 I1/I2/I3)。调研依据:豆包无公开技术文档(不编造);
同类成熟 Agent 产品无一做同会话并行回合,共同范式= queue + 回合内 steer(Claude Code / Cline PR #13958 /
Codex Queue·Steer / open-webui / LangGraph)。

- 注入点=**回合内边界**(上一模型步 + 它那批工具调用都已结束、下一次模型调用还没开始):
  driveTurn 每 step 组装前调用一次 SteerSource(run.go)——完成 step 只能靠工具批次推进,
  故唯一可注入处就是「工具批次结束之后」,循环里没有任何「起第二个回合」的分支(**I1 结构性成立**)
- **I2 恰好一次**:注入只进**本轮 view、绝不写回 msgs**(checkpoint 与记忆提取面保持干净);
  被注入的消息从 pending 移除,不会由自己的回合再答一次
- **I3 转向不取消工具**:注入调用点在 runToolCalls **之后**(此刻无工具在飞),循环从不因注入 cancel 任何 ctx;
  边界序列有测试钉死(恰为 [1 2 …],无批次中途值)
- 判定口径= **pending ∩ 转录**:候选是本会话 pending 条目,每个边界重读 history.Recent 验证已落库,
  按**行 id** 去重、按 pending FIFO 注入。**不用时间戳**(Windows time.Now() 步长 ~0.44ms,连发常同毫秒并列,
  任何 ms 基线都会漏注入或重复注入);跨重启不成立也不需要(在飞回合与 pending 都在内存)
- 新下行帧 `steer_ack`:`{type, sessionId, data:{messageId, atStep}}`,语义=「已被本回合吃进、尚未被正面回答」
  (驱动前端灰态);**不进 frameReachesAll** ⇒ fail-closed 只发 owner+admin(测试双钉);经 hub 广播、不经 bus
- 组合根**零改动**:per-turn 状态用 ctx 承载(loop.WithSteerSource),编排器在回合启动/续跑时挂
- 守卫:session_orchestrator.go 加完接线后 505 行 ⇒ 按职责纯搬出 session_events.go(常量取值未改、行为零变化)
- 复核:build/vet 绿 + **全树 0 FAIL** + linux/darwin 交叉编译绿;loop 6 例(含 3 子测)+ gateway 2 例 E2E;
  **4 条变异反证**(删 consumePending → 模型步数 4≠3;注入写回 msgs → 快照被污染;批次中途注入 → 边界 [1 1 2];
  把帧加进白名单 → viewer 收到)均已还原
- 未做(登记):IM 自有 Chatter 落库的消息不参与 steer(有意,避免重复作答);pending 条目无自落库 id
  ⇒ 配对用 (内容,图片) 逐行认领;同回合超 20 条用户消息时超出者留 pending 由各自回合作答(不丢)
2026-10-04 14:53:40 +08:00

396 lines
15 KiB
Go

package loop
import (
"context"
"encoding/json"
"strings"
"sync"
"testing"
"time"
"git.yeij.top/AskaEth/Cyrene_v2/internal/runtime/agent"
"git.yeij.top/AskaEth/Cyrene_v2/internal/runtime/model"
"git.yeij.top/AskaEth/Cyrene_v2/internal/runtime/trace"
)
// 本文件锁住裁决 13.4.5 的**目标态**在 loop 侧的三条不变量(design/15 §2.0/§2.4):
//
// I1 同会话在途回合数恒为 1:忙时新消息在**下一个回合内边界**被吃进**同一回合**
// (模型在该步看到的窗口里有它),循环绝不因此新开第二个回合;
// I2 恰好被处理一次:注入只并进本轮视图,不写回运行窗口 —— checkpoint 快照与
// 记忆提取面因此看不到它,它也不会被当成新输入再答一遍;
// I3 转向不取消已发起的工具:注入点只在**一批工具调用结束之后**、下一次模型调用
// 之前;正在执行的工具跑完,其结果仍在窗口里。
//
// 这些测试用真的 mockAdapter/mockTool 装配真循环,断言的是**模型实际收到的消息**
// 与**真的落下的 checkpoint/提取面**,不是内部字段的回读。
// steerTrace 是工具与转向源共享的**加锁**事件序:I3 要证明的「工具跑完 → 边界注入」
// 这个先后关系,在 Windows 上无法用 time.Now() 证明(粒度粗到两者拿到同一时间戳),
// 只能靠共享的单调事件序;加锁是为了让 -race 也保持干净。
type steerTrace struct {
mu sync.Mutex
events []string
}
func (t *steerTrace) add(ev string) {
if t == nil {
return
}
t.mu.Lock()
t.events = append(t.events, ev)
t.mu.Unlock()
}
func (t *steerTrace) snapshot() []string {
if t == nil {
return nil
}
t.mu.Lock()
defer t.mu.Unlock()
return append([]string(nil), t.events...)
}
// steerScript 是一份脚本化转向源:按 step 返回要注入的消息,并记录被问到的边界。
type steerScript struct {
mu sync.Mutex
at map[int][]model.Message
steps []int
returned [][]model.Message
// trace 非 nil 时把「真的注入了」记进共享事件序。
trace *steerTrace
}
func newSteerScript(at map[int][]model.Message) *steerScript {
return &steerScript{at: at}
}
// withTrace 让本转向源把「真的注入了」记进共享事件序。
func (s *steerScript) withTrace(tr *steerTrace) *steerScript {
s.trace = tr
return s
}
func (s *steerScript) Steer(_ context.Context, req SteerRequest) []model.Message {
s.mu.Lock()
defer s.mu.Unlock()
s.steps = append(s.steps, req.Step)
msgs := s.at[req.Step]
if len(msgs) == 0 {
return nil
}
s.returned = append(s.returned, msgs)
s.trace.add("steer:" + messageText(msgs[0]))
return msgs
}
// askedSteps 返回转向源被问到的边界序号序列。
func (s *steerScript) askedSteps() []int {
s.mu.Lock()
defer s.mu.Unlock()
return append([]int(nil), s.steps...)
}
// boundaryTool 是一个记录自己是否完整跑完、以及 ctx 是否在运行中被取消的工具,
// 供 I3 断言「注入没有取消已发起的工具」。
type boundaryTool struct {
mu sync.Mutex
calls int
// canceled 记录这次调用是否因 ctx 在运行中被取消而中断。
canceled bool
delay time.Duration
// trace 非 nil 时在完整跑完之际记下 "tool:done"。
trace *steerTrace
}
func (b *boundaryTool) Name() string { return "slow" }
func (b *boundaryTool) Description() string { return "slow tool for steering tests" }
func (b *boundaryTool) Parameters() (map[string]any, error) {
return nil, nil
}
func (b *boundaryTool) Execute(ctx context.Context, _ any) (any, error) {
if b.delay > 0 {
select {
case <-time.After(b.delay):
case <-ctx.Done():
b.mu.Lock()
b.canceled = true
b.mu.Unlock()
return nil, ctx.Err()
}
}
b.mu.Lock()
defer b.mu.Unlock()
b.calls++
b.trace.add("tool:done")
return "slow-done", nil
}
// counts 返回该工具被完整执行的次数与被取消的次数。
func (b *boundaryTool) counts() (calls int, canceled bool) {
b.mu.Lock()
defer b.mu.Unlock()
return b.calls, b.canceled
}
// steerTestCall 是一次「一步工具 + 一步收尾」的脚本:第 1 步请求工具调用,第 2 步
// 给出最终答复。它是 I1/I3 的公共前置(一个回合至少要有两条模型步,才存在边界)。
const steerTestToolCall = `{"tool_calls":[{"name":"slow","args":{}}]}`
// steerTestAdapter 返回一个两步脚本的适配器与它的工具。
func steerTestAdapter(tool *boundaryTool) *mockAdapter {
return &mockAdapter{chat: []mgResp{
{resp: model.Response{Content: steerTestToolCall}},
{resp: model.Response{Content: "两步收尾"}},
}}
}
// TestRun_SteerInjectedAtStepBoundary_SingleTurn 钉住 I1 与 §2.4 的最新性:忙时新消息
// 在**下一个 step 边界**被吃进同一回合 —— 第 2 步的模型窗口里有它(且排在工具结果
// 之后),而整轮只有 2 次模型调用、只有 1 个回合结果。
func TestRun_SteerInjectedAtStepBoundary_SingleTurn(t *testing.T) {
t.Parallel()
tool := &boundaryTool{}
ad := steerTestAdapter(tool)
td := dispatcherWith(t, tool)
l := New(Options{Agent: newTestAgent(t, ad, td), Tools: td, MaxRounds: 8})
src := newSteerScript(map[int][]model.Message{
2: {model.TextMessage(model.RoleUser, "忙时新消息")},
})
res, err := l.Run(WithSteerSource(WithSessionEnv(context.Background(), envOwner()), src), "sess-steer", []model.Message{model.TextMessage(model.RoleUser, "第一条")})
if err != nil {
t.Fatalf("Run: %v", err)
}
// I1:只有一个回合(Steps=2 的两步同一回合),不是「注入后又开了一回合」。
if res.Steps != 2 || res.StopReason != agent.StopReasonStop {
t.Fatalf("result = %+v, want a single 2-step turn ending with stop", res)
}
if len(ad.reqs) != 2 {
t.Fatalf("模型调用 %d 次, want 2(一次工具步 + 一次收尾步;注入绝不新开回合)", len(ad.reqs))
}
// 边界:每个 step 组装前问一次,正好 [1 2]。
if got := src.askedSteps(); len(got) != 2 || got[0] != 1 || got[1] != 2 {
t.Fatalf("转向边界 = %v, want [1 2]", got)
}
step2 := ad.reqs[1].Messages
last := step2[len(step2)-1]
if last.Role != model.RoleUser || messageText(last) != "忙时新消息" {
t.Fatalf("第 2 步窗口末条 = %+v, want 注入的忙碌消息(它必须对同一回合的下一个模型步立即可见)", last)
}
// 旧窗口已产出的内容(工具结果)完好:注入是追加,不是替换。
if !windowContainsRoleText(step2, model.RoleTool, "slow-done") {
t.Fatalf("第 2 步窗口丢了工具结果(注入不得顶掉旧窗口内容):%+v", windowTexts(step2))
}
// 第一条用户消息仍在窗口里(同一窗口,不是新回合)。
if !windowContainsRoleText(step2, model.RoleUser, "第一条") {
t.Fatalf("第 2 步窗口丢了本轮第一条用户消息:%+v", windowTexts(step2))
}
}
// TestRun_SteerDoesNotCancelInFlightTools 钉住 I3:注入发生在**一批工具调用结束之后**
// —— 工具完整跑完(未被取消),其结果在窗口里,且注入**在事件序上晚于**工具的完成
// (Windows 时间戳粒度粗到两者同值,故用共享事件序而不是时间比较)。
func TestRun_SteerDoesNotCancelInFlightTools(t *testing.T) {
t.Parallel()
tr := &steerTrace{}
tool := &boundaryTool{delay: 20 * time.Millisecond, trace: tr}
ad := steerTestAdapter(tool)
td := dispatcherWith(t, tool)
l := New(Options{Agent: newTestAgent(t, ad, td), Tools: td, MaxRounds: 8})
src := newSteerScript(map[int][]model.Message{
2: {model.TextMessage(model.RoleUser, "工具跑着的时候我插一句")},
}).withTrace(tr)
res, err := l.Run(WithSteerSource(context.Background(), src), "sess-tools", []model.Message{model.TextMessage(model.RoleUser, "去跑那个慢工具")})
if err != nil {
t.Fatalf("Run: %v", err)
}
calls, canceled := tool.counts()
if calls != 1 || canceled {
t.Fatalf("工具 calls=%d canceled=%v, want 1/false(转向绝不取消已发起的工具)", calls, canceled)
}
if res.ToolCallsExecuted != 1 {
t.Fatalf("ToolCallsExecuted = %d, want 1", res.ToolCallsExecuted)
}
// 事件序必须恰好是「工具跑完」→「边界注入」:注入点落在工具批次**之后**。
if got := tr.snapshot(); len(got) != 2 || got[0] != "tool:done" || got[1] != "steer:工具跑着的时候我插一句" {
t.Fatalf("事件序 = %v, want [tool:done steer:…](注入必须在工具批次结束之后的边界上)", got)
}
// 注入只能发生在边界上:整个回合的边界恰好是 [1 2],没有任何「批次中途」的调用。
if got := src.askedSteps(); len(got) != 2 || got[0] != 1 || got[1] != 2 {
t.Fatalf("转向边界 = %v, want [1 2](批次中途绝不注入)", got)
}
}
// TestRun_SteerDoesNotPolluteCheckpointOrExtraction 钉住 I2 的另一半:注入只进本轮
// 视图,**不进**该回合的运行窗口 —— checkpoint 快照与后台记忆提取的输入面里都不该
// 出现它,而该回合真正的输入与工具结果必须在。
func TestRun_SteerDoesNotPolluteCheckpointOrExtraction(t *testing.T) {
t.Parallel()
tool := &boundaryTool{}
ad := steerTestAdapter(tool)
td := dispatcherWith(t, tool)
cp := newTestCheckpointStore(t)
extractor := &knowledgeCaptureExtractor{}
l := New(Options{Agent: newTestAgent(t, ad, td), Tools: td, MaxRounds: 8, Checkpoint: cp, Memory: newTestMemoryStore(t), Extractor: extractor})
const busy = "忙时插进来的一句"
src := newSteerScript(map[int][]model.Message{2: {model.TextMessage(model.RoleUser, busy)}})
if _, err := l.Run(WithSteerSource(context.Background(), src), "sess-cp", []model.Message{model.TextMessage(model.RoleUser, "第一条")}); err != nil {
t.Fatalf("Run: %v", err)
}
// 模型确实看到了它(否则这条断言就没有意义)。
if !windowContainsRoleText(ad.reqs[len(ad.reqs)-1].Messages, model.RoleUser, busy) {
t.Fatal("测试前提不成立:注入的消息没有出现在模型窗口里")
}
latest, err := cp.LoadLatest(context.Background(), "sess-cp")
if err != nil {
t.Fatalf("LoadLatest: %v", err)
}
var st checkpointState
if err := json.Unmarshal(latest.State, &st); err != nil {
t.Fatalf("unmarshal checkpoint: %v", err)
}
if msgInAny(st.Messages, busy) {
t.Fatalf("注入的消息进了 checkpoint 快照(只应影响本轮视图):%+v", windowTexts(st.Messages))
}
if !windowContainsRoleText(st.Messages, model.RoleTool, "slow-done") {
t.Fatalf("快照里丢了工具结果:%+v", windowTexts(st.Messages))
}
if len(extractor.saw) == 0 {
t.Fatal("测试前提不成立:提取器没有被调用")
}
if msgInAny(extractor.saw, busy) {
t.Fatalf("注入的消息进了记忆提取面(会被写成记忆):%+v", windowTexts(extractor.saw))
}
}
// TestRun_SteerRestrictedSessionStaysRestricted 是红线回归:群聊/陌生人会话**不因
// 转向注入**而拿到主人身份知识(design/11 §0)—— 注入的只是那条用户消息,人格知识
// 块仍按会话环境门控(主人会话有、受限会话一个字都没有),且注入不改变本轮 env。
func TestRun_SteerRestrictedSessionStaysRestricted(t *testing.T) {
t.Parallel()
for _, tc := range []struct {
name string
env SessionEnv
wantKnow bool
}{
{name: "主人会话", env: envOwner(), wantKnow: true},
{name: "群聊", env: envGroup(), wantKnow: false},
{name: "陌生人私聊", env: envStranger(), wantKnow: false},
} {
tc := tc
t.Run(tc.name, func(t *testing.T) {
t.Parallel()
tool := &boundaryTool{}
ad := steerTestAdapter(tool)
td := dispatcherWith(t, tool)
l := New(Options{Agent: newTestAgent(t, ad, td), Tools: td, MaxRounds: 8, PersonaKnowledgeFor: gateKnowledge})
src := newSteerScript(map[int][]model.Message{2: {model.TextMessage(model.RoleUser, "群里插一句")}})
ctx := WithSteerSource(WithSessionEnv(context.Background(), tc.env), src)
if _, err := l.Run(ctx, "sess-env", []model.Message{model.TextMessage(model.RoleUser, "第一条")}); err != nil {
t.Fatalf("Run: %v", err)
}
step2 := ad.reqs[1].Messages
if !windowContainsRoleText(step2, model.RoleUser, "群里插一句") {
t.Fatal("测试前提不成立:注入的消息没有出现在模型窗口里")
}
if got := knowledgeIn(step2); got != tc.wantKnow {
t.Fatalf("身份知识块在窗口里 = %v, want %v(注入不得绕过会话门)", got, tc.wantKnow)
}
if env := SessionEnvFrom(ctx); env != tc.env {
t.Fatalf("本轮 env 被注入改变了:%+v, want %+v", env, tc.env)
}
})
}
}
// TestRun_SteerAbsent_ViewUnchanged 钉住向后兼容:没有转向源的 Run,模型窗口与接线
// 之前逐条一致(前导系统块 + 对话 + 工具结果),绝无多余消息。
func TestRun_SteerAbsent_ViewUnchanged(t *testing.T) {
t.Parallel()
tool := &boundaryTool{}
ad := steerTestAdapter(tool)
td := dispatcherWith(t, tool)
l := New(Options{Agent: newTestAgent(t, ad, td), Tools: td, MaxRounds: 8})
if _, err := l.Run(context.Background(), "sess-plain", []model.Message{model.TextMessage(model.RoleUser, "第一条")}); err != nil {
t.Fatalf("Run: %v", err)
}
step2 := ad.reqs[1].Messages
if len(step2) != 3 {
t.Fatalf("未接线转向源时第 2 步窗口 = %d 条 (%v), want 3(原用户消息 + 助手工具调用轮 + 工具结果)",
len(step2), windowTexts(step2))
}
if msgInAny(step2, "忙时新消息") {
t.Fatalf("未接线却出现了注入内容:%+v", windowTexts(step2))
}
}
// TestFlowPublisher_MarkInputSteered 钉住 design/15 §5 的 flow 标记:注入时给 input
// 节点打 steered:true,且**不新建节点**(图仍是一条主干,与 I1 一致)。
func TestFlowPublisher_MarkInputSteered(t *testing.T) {
t.Parallel()
var mu sync.Mutex
var published []any
p := NewFlowPublisher(func(_ string, payload any) {
mu.Lock()
published = append(published, payload)
mu.Unlock()
}, nil)
p.StartRound("web", "第一条")
p.MarkInputSteered("web")
mu.Lock()
last := published[len(published)-1]
mu.Unlock()
graph, ok := last.(*trace.FlowGraph)
if !ok {
t.Fatalf("published payload = %T", last)
}
if len(graph.Nodes) != 1 {
t.Fatalf("节点数 = %d, want 1(标记只并入既有 input 节点)", len(graph.Nodes))
}
got := graph.Nodes[0]
if got.ID != "input" || got.Props["steered"] != true || got.Label != "第一条" {
t.Fatalf("input 节点 = %+v, want 保留标签并带上 steered:true", got)
}
}
// windowTexts 把一份模型窗口渲染为 role:文本 列表,供失败信息定位。
func windowTexts(msgs []model.Message) []string {
out := make([]string, 0, len(msgs))
for _, m := range msgs {
out = append(out, string(m.Role)+":"+messageText(m))
}
return out
}
// windowContainsRoleText 报告窗口里是否存在该角色、且文本包含 want 的消息。
func windowContainsRoleText(msgs []model.Message, role model.Role, want string) bool {
for _, m := range msgs {
if m.Role == role && strings.Contains(messageText(m), want) {
return true
}
}
return false
}
// msgInAny 报告任何一条消息的文本里是否含 probe。
func msgInAny(msgs []model.Message, probe string) bool {
for _, m := range msgs {
if strings.Contains(messageText(m), probe) {
return true
}
}
return false
}