Files
AskaEth 53a0cb225c feat: 备份恢复 / 图片清理 / 单位恢复 / 审计过滤 / 模板引擎 M1 + 两个导入缺陷修复
用户点名的三件事(模板功能、删死代码、剩余缺口)这一批全部落地,另修掉两个刚暴露的导入缺陷:

**新增能力**
- 备份恢复:`POST /api/backup/restore`(admin)。先把校验做在拍快照之前(只读打开 + integrity_check +
  关键表校验 + 异类库标志表互斥),再用 VACUUM INTO 拍「恢复前安全副本」,然后关连接、整文件替换、
  触发优雅重启;`-wal` 还在时直接拒绝(宁可失败也不让旧库 WAL 套到新库上);恢复后审计直写"恢复之后
  还在的那份库"(不走通用 Auditor,否则记录只会落在被替换掉的旧文件上)。顺带修掉:裸服务端连续恢复
  第二次会在拍副本处崩出一句看不懂的 500,现在回 503「上次恢复后尚未重启,请先重启服务端」。
- 安全副本保留策略:每类库保留最近 5 份,独立于 .db 的 20 份滚动清理。
- 图片管理:`DELETE /api/uploads/{name}`(被引用 409 并列出引用点)、`GET /api/uploads/orphans`、
  `POST /api/uploads/orphans/delete`(只删列出的孤儿,宁漏勿误),全部 admin(与字体删除同档);
  `deploy/backup.bat` 补上 uploads/ 归档(logs 不归档:可再生的诊断且会无上限增长)。
- 已彻底删除单位的恢复:`POST /api/teams/{id}/restore`(与 hideTeam 同档)。幂等;恢复不会把「停用」
  变成「启用」;真机确认恢复前后榜单逐字节一致、change_log 最大值不变(数据一行没动,不需要重算)。
  界面加「显示已彻底删除的单位」(仅 admin)与恢复按钮;非 admin 的删除确认框里写明"本账号无法自行恢复"。
- 审计日志按 `action` 过滤(子串模糊,输入里的 %/_/\ 转义成字面量)。
- 删除死表 recent_projects(新增 system 迁移 0006,未动已应用的迁移)。
- points_override 不再"设了没效果":写入侧 400 + 引擎侧守卫,提示改用「积分调整」。
- 联队份额空壳清理(UnionAttribution/UnionSplit/Entry.TeamShares/resolvedShares 等;TeamShare 类型保留,
  因为 export/realtime/奖牌流水三处在生产路径上构造它)。
- 自定义大屏模板 M1:插值引擎(parseTemplate/renderTemplate),任何情况都不抛异常、未定义→空串+警告、
  警告按 (code,path) 合并计数、无 eval/innerHTML,57 个新用例。

**两个真缺陷(前两个已随 0.1.6 出包)**
- 基础数据包导入「排序」列口径不一致:小项/组别留空保持原值,单位/大项留空被写成 0(plan 没从库里
  现值起手)→ 四张表统一为「留空保持原值」。
- 同类第二处:布尔列「整列被删掉」被当成"取默认值",会把库里所有停用的单位/大项静默改回启用 →
  改为「缺列 = 不动」(写侧与解析侧都收口,补了"缺列保持/空格子=是/显式否=停用"三组对照用例)。

**删死代码**
- createEntry / updateEntry / deleteEntry / entryEventID / checkCategoryInEvent / getEntry /
  normalizeEntryStatus / ExportBaseDataXLSX(全仓 grep 零引用)。⚠️ 随之记入文档:「组别必须属于该小项」
  这道校验现在只由导入路径"按小项+组别名解析"天然保证,将来若新增从请求体接收 categoryId 的接口,
  必须自己补校验(库层没有复合外键)。

**文档**
- devdocs 全面同步(01/02/03/04/05/06/07/09/11/12/13/README;含身份口径、延迟结算、大屏单栏新版式、
  新增路由与设置键、R18/R19 风险);docs 复核 + 第二轮(身份口径三个易写反的分支、图片删除、备份覆盖、
  审计过滤、单位恢复、去掉硬编码版本号、上线检查清单 +5 项);debug/使用说明 6 份逐份 diff 一致。

测试:服务端 13 包(连跑两遍)、前端 406 例、Console 28 例 + 18 文件语法检查 —— 全绿。
版本号 dev_0.1.6 → dev_0.1.7。
2026-09-11 19:26:36 +08:00

171 lines
6.0 KiB
Go
Raw Permalink Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
package httpapi
import (
"bytes"
"context"
"database/sql"
"errors"
"fmt"
"log/slog"
"net/http"
"net/http/httptest"
"path/filepath"
"strings"
"testing"
"git.yeij.top/AskaEth/Scoreboard/server/internal/realtime"
"git.yeij.top/AskaEth/Scoreboard/server/internal/store"
)
/**
* 恢复流程会在请求末尾关掉目标库、换掉文件,随后进程才优雅退出。
* 广播中间件是在 handler 返回之后读 change_log 的,必然撞上「sql: database is closed」——
* 那不是故障,是一条 ERROR 却在现场最紧张的时刻出现,会被当成「恢复把系统搞坏了」。
*
* 这里钉住两条口径:库已关闭 → 只留 Debug;其它读库失败 → 照旧 ERROR,不许被静默吞掉。
*/
// stubRealtime 只实现广播中间件用到的那两个方法。
type stubRealtime struct {
loadErr error
}
func (s *stubRealtime) Broadcast([]realtime.Change) {}
func (s *stubRealtime) LoadChanges(context.Context, int64, int) ([]realtime.Change, error) {
return nil, s.loadErr
}
func (s *stubRealtime) Instances() []realtime.Instance { return nil }
func captureLogs() (*slog.Logger, *bytes.Buffer) {
buf := &bytes.Buffer{}
return slog.New(slog.NewTextHandler(buf, &slog.HandlerOptions{Level: slog.LevelDebug})), buf
}
func openSQLiteAt(t *testing.T, path string, migrate bool) *sql.DB {
t.Helper()
dsn := "file:" + path + "?_pragma=journal_mode(WAL)&_pragma=busy_timeout(5000)"
db, err := sql.Open("sqlite", dsn)
if err != nil {
t.Fatalf("打开 %s: %v", path, err)
}
db.SetMaxOpenConns(1)
t.Cleanup(func() { _ = db.Close() })
if migrate {
if err := store.MigrateEvent(db); err != nil {
t.Fatalf("迁移赛事库: %v", err)
}
}
return db
}
// closedDBError 拿一个真正的「sql: database is closed」。
// 标准库里这个错误是未导出的(database/sql 的 errDBClosed),只能打开一个库再关掉、
// 然后查询它,让驱动自己把它交出来。
func closedDBError(t *testing.T) error {
t.Helper()
db, err := sql.Open("sqlite", "file:"+filepath.Join(t.TempDir(), "closed.db")+"?_pragma=busy_timeout(5000)")
if err != nil {
t.Fatalf("打开库: %v", err)
}
if err := db.Close(); err != nil {
t.Fatalf("关闭库: %v", err)
}
var one int
return db.QueryRow("SELECT 1").Scan(&one)
}
// 库已关闭不是故障:changeVersion 只留 Debug,不出 ERROR。
func TestChangeVersionClosedDBIsNotLoggedAsError(t *testing.T) {
logger, logs := captureLogs()
db := openSQLiteAt(t, filepath.Join(t.TempDir(), "event.db"), false)
if err := db.Close(); err != nil {
t.Fatalf("关闭赛事库: %v", err)
}
s := &server{logger: logger, ev: db}
if _, ok := s.changeVersion(context.Background()); ok {
t.Fatal("已关闭的库不该给出变更版本")
}
if strings.Contains(logs.String(), "level=ERROR") {
t.Errorf("库已关闭不该记 ERROR:%s", logs.String())
}
if !strings.Contains(logs.String(), "库已关闭") {
t.Errorf("应留下一条 Debug 便于排查:%s", logs.String())
}
}
// 真的读不通(这里是表都不存在)仍然要记 ERROR,不能被「库已关闭」这条规则顺手吞掉。
func TestChangeVersionOtherErrorsAreStillLogged(t *testing.T) {
logger, logs := captureLogs()
// 没跑过迁移的库:没有 change_log 表。
db := openSQLiteAt(t, filepath.Join(t.TempDir(), "event.db"), false)
s := &server{logger: logger, ev: db}
if _, ok := s.changeVersion(context.Background()); ok {
t.Fatal("查不到 change_log 时不该给出变更版本")
}
if !strings.Contains(logs.String(), "level=ERROR") || !strings.Contains(logs.String(), "读取变更版本失败") {
t.Errorf("真失败仍要记 ERROR:%s", logs.String())
}
}
// 广播中间件:写请求成功后 LoadChanges 撞上「库已关闭」→ 不记 ERROR。
func TestBroadcastChangesClosedDBIsNotLoggedAsError(t *testing.T) {
logger, logs := captureLogs()
ev := openSQLiteAt(t, filepath.Join(t.TempDir(), "event.db"), true)
// 按 realtime 包的包装方式裹一层,确认 errors 链上的「库已关闭」也认得出。
loadErr := fmt.Errorf("读取增量变更: %w", closedDBError(t))
s := &server{logger: logger, ev: ev, realtime: &stubRealtime{loadErr: loadErr}}
h := s.broadcastChanges(http.HandlerFunc(func(w http.ResponseWriter, r *http.Request) {
w.WriteHeader(http.StatusOK)
}))
h.ServeHTTP(httptest.NewRecorder(), httptest.NewRequest(http.MethodPost, "/api/teams", nil))
if strings.Contains(logs.String(), "level=ERROR") {
t.Errorf("库已关闭不该记 ERROR:%s", logs.String())
}
if !strings.Contains(logs.String(), "库已关闭") {
t.Errorf("应留下一条 Debug 便于排查:%s", logs.String())
}
}
// 广播中间件:别的读库失败(磁盘 I/O、SQL 写错…)照旧记 ERROR。
func TestBroadcastChangesOtherErrorsAreStillLogged(t *testing.T) {
logger, logs := captureLogs()
ev := openSQLiteAt(t, filepath.Join(t.TempDir(), "event.db"), true)
s := &server{logger: logger, ev: ev, realtime: &stubRealtime{loadErr: errors.New("disk I/O error")}}
h := s.broadcastChanges(http.HandlerFunc(func(w http.ResponseWriter, r *http.Request) {
w.WriteHeader(http.StatusOK)
}))
h.ServeHTTP(httptest.NewRecorder(), httptest.NewRequest(http.MethodPost, "/api/teams", nil))
if !strings.Contains(logs.String(), "level=ERROR") || !strings.Contains(logs.String(), "读取实时变更失败") {
t.Errorf("真失败仍要记 ERROR:%s", logs.String())
}
}
// dbClosed 只认原文完全相等的那一层:子串、相似文案都不算。
func TestDbClosedMatchesOnlyExactMessage(t *testing.T) {
if !dbClosed(closedDBError(t)) {
t.Error("真正的「sql: database is closed」应被认出")
}
if !dbClosed(fmt.Errorf("读取增量变更: %w", closedDBError(t))) {
t.Error("被 %w 包过一层也要认出")
}
for _, err := range []error{
nil,
errors.New("database is closed"),
errors.New("sql: database is closed (something else)"),
errors.New("sql: database is locked"),
errors.New("disk I/O error"),
} {
if dbClosed(err) {
t.Errorf("%v 不该被当成「库已关闭」", err)
}
}
}