用户点名的三件事(模板功能、删死代码、剩余缺口)这一批全部落地,另修掉两个刚暴露的导入缺陷:
**新增能力**
- 备份恢复:`POST /api/backup/restore`(admin)。先把校验做在拍快照之前(只读打开 + integrity_check +
关键表校验 + 异类库标志表互斥),再用 VACUUM INTO 拍「恢复前安全副本」,然后关连接、整文件替换、
触发优雅重启;`-wal` 还在时直接拒绝(宁可失败也不让旧库 WAL 套到新库上);恢复后审计直写"恢复之后
还在的那份库"(不走通用 Auditor,否则记录只会落在被替换掉的旧文件上)。顺带修掉:裸服务端连续恢复
第二次会在拍副本处崩出一句看不懂的 500,现在回 503「上次恢复后尚未重启,请先重启服务端」。
- 安全副本保留策略:每类库保留最近 5 份,独立于 .db 的 20 份滚动清理。
- 图片管理:`DELETE /api/uploads/{name}`(被引用 409 并列出引用点)、`GET /api/uploads/orphans`、
`POST /api/uploads/orphans/delete`(只删列出的孤儿,宁漏勿误),全部 admin(与字体删除同档);
`deploy/backup.bat` 补上 uploads/ 归档(logs 不归档:可再生的诊断且会无上限增长)。
- 已彻底删除单位的恢复:`POST /api/teams/{id}/restore`(与 hideTeam 同档)。幂等;恢复不会把「停用」
变成「启用」;真机确认恢复前后榜单逐字节一致、change_log 最大值不变(数据一行没动,不需要重算)。
界面加「显示已彻底删除的单位」(仅 admin)与恢复按钮;非 admin 的删除确认框里写明"本账号无法自行恢复"。
- 审计日志按 `action` 过滤(子串模糊,输入里的 %/_/\ 转义成字面量)。
- 删除死表 recent_projects(新增 system 迁移 0006,未动已应用的迁移)。
- points_override 不再"设了没效果":写入侧 400 + 引擎侧守卫,提示改用「积分调整」。
- 联队份额空壳清理(UnionAttribution/UnionSplit/Entry.TeamShares/resolvedShares 等;TeamShare 类型保留,
因为 export/realtime/奖牌流水三处在生产路径上构造它)。
- 自定义大屏模板 M1:插值引擎(parseTemplate/renderTemplate),任何情况都不抛异常、未定义→空串+警告、
警告按 (code,path) 合并计数、无 eval/innerHTML,57 个新用例。
**两个真缺陷(前两个已随 0.1.6 出包)**
- 基础数据包导入「排序」列口径不一致:小项/组别留空保持原值,单位/大项留空被写成 0(plan 没从库里
现值起手)→ 四张表统一为「留空保持原值」。
- 同类第二处:布尔列「整列被删掉」被当成"取默认值",会把库里所有停用的单位/大项静默改回启用 →
改为「缺列 = 不动」(写侧与解析侧都收口,补了"缺列保持/空格子=是/显式否=停用"三组对照用例)。
**删死代码**
- createEntry / updateEntry / deleteEntry / entryEventID / checkCategoryInEvent / getEntry /
normalizeEntryStatus / ExportBaseDataXLSX(全仓 grep 零引用)。⚠️ 随之记入文档:「组别必须属于该小项」
这道校验现在只由导入路径"按小项+组别名解析"天然保证,将来若新增从请求体接收 categoryId 的接口,
必须自己补校验(库层没有复合外键)。
**文档**
- devdocs 全面同步(01/02/03/04/05/06/07/09/11/12/13/README;含身份口径、延迟结算、大屏单栏新版式、
新增路由与设置键、R18/R19 风险);docs 复核 + 第二轮(身份口径三个易写反的分支、图片删除、备份覆盖、
审计过滤、单位恢复、去掉硬编码版本号、上线检查清单 +5 项);debug/使用说明 6 份逐份 diff 一致。
测试:服务端 13 包(连跑两遍)、前端 406 例、Console 28 例 + 18 文件语法检查 —— 全绿。
版本号 dev_0.1.6 → dev_0.1.7。
171 lines
6.0 KiB
Go
171 lines
6.0 KiB
Go
package httpapi
|
||
|
||
import (
|
||
"bytes"
|
||
"context"
|
||
"database/sql"
|
||
"errors"
|
||
"fmt"
|
||
"log/slog"
|
||
"net/http"
|
||
"net/http/httptest"
|
||
"path/filepath"
|
||
"strings"
|
||
"testing"
|
||
|
||
"git.yeij.top/AskaEth/Scoreboard/server/internal/realtime"
|
||
"git.yeij.top/AskaEth/Scoreboard/server/internal/store"
|
||
)
|
||
|
||
/**
|
||
* 恢复流程会在请求末尾关掉目标库、换掉文件,随后进程才优雅退出。
|
||
* 广播中间件是在 handler 返回之后读 change_log 的,必然撞上「sql: database is closed」——
|
||
* 那不是故障,是一条 ERROR 却在现场最紧张的时刻出现,会被当成「恢复把系统搞坏了」。
|
||
*
|
||
* 这里钉住两条口径:库已关闭 → 只留 Debug;其它读库失败 → 照旧 ERROR,不许被静默吞掉。
|
||
*/
|
||
|
||
// stubRealtime 只实现广播中间件用到的那两个方法。
|
||
type stubRealtime struct {
|
||
loadErr error
|
||
}
|
||
|
||
func (s *stubRealtime) Broadcast([]realtime.Change) {}
|
||
|
||
func (s *stubRealtime) LoadChanges(context.Context, int64, int) ([]realtime.Change, error) {
|
||
return nil, s.loadErr
|
||
}
|
||
|
||
func (s *stubRealtime) Instances() []realtime.Instance { return nil }
|
||
|
||
func captureLogs() (*slog.Logger, *bytes.Buffer) {
|
||
buf := &bytes.Buffer{}
|
||
return slog.New(slog.NewTextHandler(buf, &slog.HandlerOptions{Level: slog.LevelDebug})), buf
|
||
}
|
||
|
||
func openSQLiteAt(t *testing.T, path string, migrate bool) *sql.DB {
|
||
t.Helper()
|
||
dsn := "file:" + path + "?_pragma=journal_mode(WAL)&_pragma=busy_timeout(5000)"
|
||
db, err := sql.Open("sqlite", dsn)
|
||
if err != nil {
|
||
t.Fatalf("打开 %s: %v", path, err)
|
||
}
|
||
db.SetMaxOpenConns(1)
|
||
t.Cleanup(func() { _ = db.Close() })
|
||
if migrate {
|
||
if err := store.MigrateEvent(db); err != nil {
|
||
t.Fatalf("迁移赛事库: %v", err)
|
||
}
|
||
}
|
||
return db
|
||
}
|
||
|
||
// closedDBError 拿一个真正的「sql: database is closed」。
|
||
// 标准库里这个错误是未导出的(database/sql 的 errDBClosed),只能打开一个库再关掉、
|
||
// 然后查询它,让驱动自己把它交出来。
|
||
func closedDBError(t *testing.T) error {
|
||
t.Helper()
|
||
db, err := sql.Open("sqlite", "file:"+filepath.Join(t.TempDir(), "closed.db")+"?_pragma=busy_timeout(5000)")
|
||
if err != nil {
|
||
t.Fatalf("打开库: %v", err)
|
||
}
|
||
if err := db.Close(); err != nil {
|
||
t.Fatalf("关闭库: %v", err)
|
||
}
|
||
var one int
|
||
return db.QueryRow("SELECT 1").Scan(&one)
|
||
}
|
||
|
||
// 库已关闭不是故障:changeVersion 只留 Debug,不出 ERROR。
|
||
func TestChangeVersionClosedDBIsNotLoggedAsError(t *testing.T) {
|
||
logger, logs := captureLogs()
|
||
db := openSQLiteAt(t, filepath.Join(t.TempDir(), "event.db"), false)
|
||
if err := db.Close(); err != nil {
|
||
t.Fatalf("关闭赛事库: %v", err)
|
||
}
|
||
s := &server{logger: logger, ev: db}
|
||
|
||
if _, ok := s.changeVersion(context.Background()); ok {
|
||
t.Fatal("已关闭的库不该给出变更版本")
|
||
}
|
||
if strings.Contains(logs.String(), "level=ERROR") {
|
||
t.Errorf("库已关闭不该记 ERROR:%s", logs.String())
|
||
}
|
||
if !strings.Contains(logs.String(), "库已关闭") {
|
||
t.Errorf("应留下一条 Debug 便于排查:%s", logs.String())
|
||
}
|
||
}
|
||
|
||
// 真的读不通(这里是表都不存在)仍然要记 ERROR,不能被「库已关闭」这条规则顺手吞掉。
|
||
func TestChangeVersionOtherErrorsAreStillLogged(t *testing.T) {
|
||
logger, logs := captureLogs()
|
||
// 没跑过迁移的库:没有 change_log 表。
|
||
db := openSQLiteAt(t, filepath.Join(t.TempDir(), "event.db"), false)
|
||
s := &server{logger: logger, ev: db}
|
||
|
||
if _, ok := s.changeVersion(context.Background()); ok {
|
||
t.Fatal("查不到 change_log 时不该给出变更版本")
|
||
}
|
||
if !strings.Contains(logs.String(), "level=ERROR") || !strings.Contains(logs.String(), "读取变更版本失败") {
|
||
t.Errorf("真失败仍要记 ERROR:%s", logs.String())
|
||
}
|
||
}
|
||
|
||
// 广播中间件:写请求成功后 LoadChanges 撞上「库已关闭」→ 不记 ERROR。
|
||
func TestBroadcastChangesClosedDBIsNotLoggedAsError(t *testing.T) {
|
||
logger, logs := captureLogs()
|
||
ev := openSQLiteAt(t, filepath.Join(t.TempDir(), "event.db"), true)
|
||
// 按 realtime 包的包装方式裹一层,确认 errors 链上的「库已关闭」也认得出。
|
||
loadErr := fmt.Errorf("读取增量变更: %w", closedDBError(t))
|
||
s := &server{logger: logger, ev: ev, realtime: &stubRealtime{loadErr: loadErr}}
|
||
|
||
h := s.broadcastChanges(http.HandlerFunc(func(w http.ResponseWriter, r *http.Request) {
|
||
w.WriteHeader(http.StatusOK)
|
||
}))
|
||
h.ServeHTTP(httptest.NewRecorder(), httptest.NewRequest(http.MethodPost, "/api/teams", nil))
|
||
|
||
if strings.Contains(logs.String(), "level=ERROR") {
|
||
t.Errorf("库已关闭不该记 ERROR:%s", logs.String())
|
||
}
|
||
if !strings.Contains(logs.String(), "库已关闭") {
|
||
t.Errorf("应留下一条 Debug 便于排查:%s", logs.String())
|
||
}
|
||
}
|
||
|
||
// 广播中间件:别的读库失败(磁盘 I/O、SQL 写错…)照旧记 ERROR。
|
||
func TestBroadcastChangesOtherErrorsAreStillLogged(t *testing.T) {
|
||
logger, logs := captureLogs()
|
||
ev := openSQLiteAt(t, filepath.Join(t.TempDir(), "event.db"), true)
|
||
s := &server{logger: logger, ev: ev, realtime: &stubRealtime{loadErr: errors.New("disk I/O error")}}
|
||
|
||
h := s.broadcastChanges(http.HandlerFunc(func(w http.ResponseWriter, r *http.Request) {
|
||
w.WriteHeader(http.StatusOK)
|
||
}))
|
||
h.ServeHTTP(httptest.NewRecorder(), httptest.NewRequest(http.MethodPost, "/api/teams", nil))
|
||
|
||
if !strings.Contains(logs.String(), "level=ERROR") || !strings.Contains(logs.String(), "读取实时变更失败") {
|
||
t.Errorf("真失败仍要记 ERROR:%s", logs.String())
|
||
}
|
||
}
|
||
|
||
// dbClosed 只认原文完全相等的那一层:子串、相似文案都不算。
|
||
func TestDbClosedMatchesOnlyExactMessage(t *testing.T) {
|
||
if !dbClosed(closedDBError(t)) {
|
||
t.Error("真正的「sql: database is closed」应被认出")
|
||
}
|
||
if !dbClosed(fmt.Errorf("读取增量变更: %w", closedDBError(t))) {
|
||
t.Error("被 %w 包过一层也要认出")
|
||
}
|
||
for _, err := range []error{
|
||
nil,
|
||
errors.New("database is closed"),
|
||
errors.New("sql: database is closed (something else)"),
|
||
errors.New("sql: database is locked"),
|
||
errors.New("disk I/O error"),
|
||
} {
|
||
if dbClosed(err) {
|
||
t.Errorf("%v 不该被当成「库已关闭」", err)
|
||
}
|
||
}
|
||
}
|