主人 2026-10-24 报障:QQ 群最新一条 assistant 消息里 6 处字面 `\n`
(反斜杠 + n,不是真换行)原样发出去,用户看到「F\n多利亚」。
落点选在**写入侧共享层** `turnreply.NormalizeParagraphs`(gateway 的
persistTurnReply 与 channelbridge 的 turnVisibleReply 都调它):
IM 的 deliverReply 拿同一个字符串既落库(= Web 主会话镜像)又发气泡,
Web chat 气泡是 whitespace-pre-wrap ⇒ 在共享层渲染,落库/WS/REST/IM
出站与历史一次性对齐;只在 channelbridge 清洗层改会留下「面板上仍是字面 \n」。
- 新增 internal/runtime/turnreply/literal_breaks.go 的 RenderLiteralLineBreaks:
逐字节扫描,围栏(```)与行内代码(`…` / ``…``)内原样保留,`\n` 与
`\t`/`\r`/`\uXXXX`、行尾孤立 `\` 一律不动;未闭合围栏保守保护到末尾;幂等。
- paragraph.go 在**围栏 skip 之前**调用它 ⇒ 含围栏的消息里围栏外的 `\n` 也渲染。
- 🔴 未改既有语义:只产出换行字符,绝不产出 <br>/<p> —— <br> 仍是气泡分隔符,
字面 \n 只做气泡内换行(一条列表不会被拆成 7 条消息)。
- channelbridge 源码零改动。
验证:真机原文(6 处 \n / 5 个 <p>)修前红(摘掉钩子 3 个测试变红)→ 修后绿;
三处变异(去掉围栏保护 / 去掉 \ 配对 / 把渲染挪到围栏 skip 之后)各自变红后还原复绿。
全树 go build ./... + go vet ./... + go test -count=1 ./... 全绿(73 包)。
212 lines
10 KiB
Go
212 lines
10 KiB
Go
package turnreply
|
|
|
|
import (
|
|
"strings"
|
|
"testing"
|
|
)
|
|
|
|
// 本文件锁定「字面 `\n`(反斜杠 + n)渲染成真换行」(literal_breaks.go)的判据。
|
|
//
|
|
// 重点三条:
|
|
// - **代码内容不许被改**:围栏(```)与行内代码(`…`)里的 `\n` 逐字不动 ——
|
|
// 模型讨论代码时写 `print("a\nb")`,全局替换会把代码改坏;
|
|
// - **`\\n` 不动**:它表示「一个反斜杠 + 字母 n」,当换行等于篡改内容;
|
|
// - **幂等**:它跑在每一条助手回复的写入路径上,二次调用必须逐字相同。
|
|
|
|
// literalEscapeSample 是模型实际写出的那两个字符:反斜杠 + n(不是换行)。
|
|
const literalEscapeSample = "\\n"
|
|
|
|
// realLiteralBreakReply 是真机原文(主人 2026-10-24 报障那条乐理回复,6 处字面
|
|
// `\n` 全挤在同一个 <p> 里)。它与 channelbridge 侧
|
|
// sanitize_literal_breaks_test.go 的同名字面量**逐字相同** —— 那正是「网关/落库
|
|
// 与 IM 出站吃同一份文本」的断言方式(同一份样本,两侧各自断言)。
|
|
const realLiteralBreakReply = `<p><action>看着那颗 CPU,忍不住叹了口气</action>R7 1700X……2017 年到现在,确实到了该享清福的年纪了♪</p>
|
|
|
|
<p><action>坐直身子,认真起来</action>乐理题人家来答。按「以 G♭ 为主音」的七种中古调式来算:</p>
|
|
|
|
<p>伊奥尼亚:G♭ A♭ B♭ C♭ D♭ E♭ F\n多利亚:G♭ A♭ B♭♭ C♭ D♭ E♭ F♭\n弗里吉亚:G♭ A♭♭ B♭♭ C♭ D♭ E♭♭ F♭\n利底亚:G♭ A♭ B♭ C D♭ E♭ F\n混合利底亚:G♭ A♭ B♭ C♭ D♭ E♭ F♭\n爱奥利亚:G♭ A♭ B♭♭ C♭ D♭ E♭♭ F♭\n洛克里亚:G♭ A♭♭ B♭♭ C♭ D♭♭ E♭♭ F♭</p>
|
|
|
|
<p>那些重降的等音:A♭♭=G、B♭♭=A、D♭♭=C、E♭♭=D。</p>
|
|
|
|
<p>不过要是题目问的是「G♭ 大调关系调式」那种,七种用的都是 G♭ A♭ B♭ C♭ D♭ E♭ F 这一组音,只是主音各站各的位置♪</p>`
|
|
|
|
// TestRenderLiteralLineBreaks_RealMachineMessage 是必测①的**修前红/修后绿**判据:
|
|
// 真机原文的 6 处字面 `\n` 全部渲染成真换行,段落结构(5 个 <p>)一字不变,且
|
|
// 绝不引入 `<br>`(它不是气泡分隔符,只是气泡内的换行)。
|
|
func TestRenderLiteralLineBreaks_RealMachineMessage(t *testing.T) {
|
|
t.Parallel()
|
|
|
|
got := RenderLiteralLineBreaks(realLiteralBreakReply)
|
|
if strings.Contains(got, literalEscapeSample) {
|
|
t.Fatalf("仍剩字面 `\\n` —— QQ 上还会看到「F\\n多利亚」:\n%q", got)
|
|
}
|
|
if wantGain := strings.Count(realLiteralBreakReply, literalEscapeSample); strings.Count(got, "\n")-strings.Count(realLiteralBreakReply, "\n") != wantGain {
|
|
t.Fatalf("新增真换行 = %d, want %d", strings.Count(got, "\n")-strings.Count(realLiteralBreakReply, "\n"), wantGain)
|
|
}
|
|
if n := strings.Count(got, "<p>"); n != 5 {
|
|
t.Fatalf("<p> 块 = %d, want 5(段落口径不得被改动)", n)
|
|
}
|
|
if strings.Contains(got, "<br") {
|
|
t.Fatalf("渲染出了 <br> —— 字面 `\\n` 只应是气泡内换行,不是消息分隔符:\n%q", got)
|
|
}
|
|
// 逐字校验第三段:七个调式各占一行。
|
|
const scaleHead = "<p>伊奥尼亚:G♭ A♭ B♭ C♭ D♭ E♭ F\n多利亚:"
|
|
if !strings.Contains(got, scaleHead) {
|
|
t.Fatalf("调式段没有被换行渲染:\n%q", got)
|
|
}
|
|
}
|
|
|
|
// TestRenderLiteralLineBreaks_CodeFenceProtected 是必测②:围栏代码块里的 `\n`
|
|
// 逐字保留(她解释 `print("a\nb")` 时那两下是**代码内容**),围栏前后的正文照常渲染。
|
|
func TestRenderLiteralLineBreaks_CodeFenceProtected(t *testing.T) {
|
|
t.Parallel()
|
|
|
|
in := "先说明一句" + literalEscapeSample + "这里要换行。\n" +
|
|
"```go\nfmt.Print(\"a" + literalEscapeSample + "b\")\n```\n" +
|
|
"围栏之后这句" + literalEscapeSample + "也换行。"
|
|
got := RenderLiteralLineBreaks(in)
|
|
|
|
if !strings.Contains(got, `fmt.Print("a\nb")`) {
|
|
t.Fatalf("围栏内的 `\\n` 被改坏了(代码内容必须逐字保留):\n%q", got)
|
|
}
|
|
if got := strings.Count(RenderLiteralLineBreaks(in), literalEscapeSample); got != 1 {
|
|
t.Fatalf("剩余字面 `\\n` = %d, want 1(只该剩围栏里那一处)", got)
|
|
}
|
|
for _, want := range []string{"先说明一句\n这里要换行。", "围栏之后这句\n也换行。"} {
|
|
if !strings.Contains(got, want) {
|
|
t.Fatalf("围栏外正文没有被渲染,want 含 %q:\n%q", want, got)
|
|
}
|
|
}
|
|
}
|
|
|
|
// TestRenderLiteralLineBreaks_InlineCodeProtected 是必测②的另一半:行内代码
|
|
// (“ `…` “ 与等长的 “ “…“ “)里的 `\n` 也不动。
|
|
func TestRenderLiteralLineBreaks_InlineCodeProtected(t *testing.T) {
|
|
t.Parallel()
|
|
|
|
in := "行内代码 `a" + literalEscapeSample + "b` 里那两下不动;真的换行这样写:" + literalEscapeSample + "下一句。"
|
|
got := RenderLiteralLineBreaks(in)
|
|
|
|
if !strings.Contains(got, "行内代码 `a"+literalEscapeSample+"b` 里那两下不动") {
|
|
t.Fatalf("行内代码里的 `\\n` 被改坏了:\n%q", got)
|
|
}
|
|
if !strings.HasSuffix(got, "真的换行这样写:\n下一句。") {
|
|
t.Fatalf("行内代码之外的 `\\n` 没被渲染:\n%q", got)
|
|
}
|
|
|
|
// 双反引号定界符同样受保护。
|
|
double := "``a" + literalEscapeSample + "b`` 不动,外面" + literalEscapeSample + "要换行"
|
|
if got := RenderLiteralLineBreaks(double); !strings.Contains(got, "``a"+literalEscapeSample+"b``") ||
|
|
!strings.HasSuffix(got, "外面\n要换行") {
|
|
t.Fatalf("双反引号行内代码处理错:\n%q", got)
|
|
}
|
|
|
|
// 落单反引号(没有等长闭合串)只是普通字符,不吞掉后面的正文。
|
|
stray := "一个孤零零的反引号 `,然后" + literalEscapeSample + "这里照常换行"
|
|
if got := RenderLiteralLineBreaks(stray); !strings.HasSuffix(got, "然后\n这里照常换行") {
|
|
t.Fatalf("落单反引号把后面的正文一并保护了(应为普通字符):\n%q", got)
|
|
}
|
|
}
|
|
|
|
// TestRenderLiteralLineBreaks_DoubleBackslashUntouched 是必测③:`\\n`(双反斜杠 +
|
|
// n,模型讲转义规则或写路径时会写)**原样保留** —— 它的语义是一个反斜杠加字母 n。
|
|
// 顺带钉住「`\\` 之后紧跟的字面 `\n` 仍要渲染」这条配对口径。
|
|
func TestRenderLiteralLineBreaks_DoubleBackslashUntouched(t *testing.T) {
|
|
t.Parallel()
|
|
|
|
const doubleBackslash = "\\\\n" // \\n:两个反斜杠 + n
|
|
unchanged := "字面反斜杠加 n 要写成 " + doubleBackslash + " 这样"
|
|
if got := RenderLiteralLineBreaks(unchanged); got != unchanged {
|
|
t.Fatalf("`\\\\n` 被改动了:\n got %q\nwant %q", got, unchanged)
|
|
}
|
|
|
|
paired := "先一个转义的反斜杠 \\\\ 然后" + literalEscapeSample + "这里换行"
|
|
if got := RenderLiteralLineBreaks(paired); !strings.HasSuffix(got, "然后\n这里换行") {
|
|
t.Fatalf("`\\\\` 之后的字面 `\\n` 没有被渲染:\n%q", got)
|
|
}
|
|
}
|
|
|
|
// TestRenderLiteralLineBreaks_OtherEscapesUntouched 记录本层的**范围边界**:只认
|
|
// `\n` 这一个形状,`\t` / `\r` / 行尾孤立的 `\` 一律不动(其余字面转义见切片报告,
|
|
// 本片不扩大语义)。
|
|
func TestRenderLiteralLineBreaks_OtherEscapesUntouched(t *testing.T) {
|
|
t.Parallel()
|
|
|
|
for _, tc := range []struct{ name, in string }{
|
|
{"tab", "缩进" + "\\t" + "不处理"},
|
|
{"carriage", "回车" + "\\r" + "不处理"},
|
|
{"trailing-backslash", "行尾孤立的反斜杠\\"},
|
|
{"unicode", "转义" + "\\u00e9" + "不处理"},
|
|
} {
|
|
t.Run(tc.name, func(t *testing.T) {
|
|
t.Parallel()
|
|
if got := RenderLiteralLineBreaks(tc.in); got != tc.in {
|
|
t.Fatalf("%s:被本层改动了:\n got %q\nwant %q", tc.name, got, tc.in)
|
|
}
|
|
})
|
|
}
|
|
}
|
|
|
|
// TestRenderLiteralLineBreaks_UnclosedFenceProtected 是保守兜底:围栏没闭合时,
|
|
// 后面的文本**一律原样保留**(宁可少渲染一处换行,也不把可能仍是代码的正文改坏)。
|
|
func TestRenderLiteralLineBreaks_UnclosedFenceProtected(t *testing.T) {
|
|
t.Parallel()
|
|
|
|
in := "```go\n代码里的" + literalEscapeSample + "不动"
|
|
if got := RenderLiteralLineBreaks(in); got != in {
|
|
t.Fatalf("未闭合围栏之后的正文被改了:\n got %q\nwant %q", got, in)
|
|
}
|
|
}
|
|
|
|
// TestRenderLiteralLineBreaks_IdempotentAndFastPath 是守门断言:没有字面 `\n` 的
|
|
// 文本逐字返回;有的话二次调用逐字相同(它跑在每条回复的写入路径上,破掉幂等就会
|
|
// 每读改写一次叠一层)。
|
|
func TestRenderLiteralLineBreaks_IdempotentAndFastPath(t *testing.T) {
|
|
t.Parallel()
|
|
|
|
for _, plain := range []string{"", "普通一句话,没有字面转义。", "<p>已经规整好的段落。</p>"} {
|
|
if got := RenderLiteralLineBreaks(plain); got != plain {
|
|
t.Fatalf("无字面 `\\n` 的文本被改动:\n got %q\nwant %q", got, plain)
|
|
}
|
|
}
|
|
samples := []string{
|
|
realLiteralBreakReply,
|
|
"甲" + literalEscapeSample + "乙",
|
|
"围栏外" + literalEscapeSample + "换行\n```\n代码" + literalEscapeSample + "\n```",
|
|
}
|
|
for _, s := range samples {
|
|
once := RenderLiteralLineBreaks(s)
|
|
if twice := RenderLiteralLineBreaks(once); twice != once {
|
|
t.Fatalf("不幂等:\n once %q\ntwice %q", once, twice)
|
|
}
|
|
}
|
|
}
|
|
|
|
// TestNormalizeParagraphs_CarriesLiteralBreaks 是必测①的**落点**断言:字面 `\n`
|
|
// 的渲染挂在 NormalizeParagraphs 上 —— 网关(Web)与渠道桥(IM)都调这一个函数,
|
|
// 因此落库、WS/REST 与 IM 出站拿到的是同一份真换行文本。
|
|
//
|
|
// 含围栏时段落规整整体 skip,但**围栏外的**字面 `\n` 仍必须被渲染(渲染刻意放在
|
|
// 围栏 skip 之前),围栏内的不动。
|
|
func TestNormalizeParagraphs_CarriesLiteralBreaks(t *testing.T) {
|
|
t.Parallel()
|
|
|
|
got := NormalizeParagraphs(realLiteralBreakReply)
|
|
if strings.Contains(got, literalEscapeSample) {
|
|
t.Fatalf("NormalizeParagraphs 没有渲染字面 `\\n`:\n%q", got)
|
|
}
|
|
if n := strings.Count(got, "<p>"); n != 5 {
|
|
t.Fatalf("<p> 块 = %d, want 5", n)
|
|
}
|
|
|
|
mixed := "<p>甲" + literalEscapeSample + "乙</p>\n\n" +
|
|
"```go\nfmt.Print(\"a" + literalEscapeSample + "b\")\n```"
|
|
got = NormalizeParagraphs(mixed)
|
|
if !strings.Contains(got, "<p>甲\n乙</p>") {
|
|
t.Fatalf("含围栏的消息里,围栏外那段没有被渲染:\n%q", got)
|
|
}
|
|
if !strings.Contains(got, `fmt.Print("a\nb")`) {
|
|
t.Fatalf("围栏内的 `\\n` 被改坏了:\n%q", got)
|
|
}
|
|
}
|