mirror of
https://github.com/Awuqing/BackupX.git
synced 2026-05-06 20:02:41 +08:00
* 功能: v2.0.0 企业级备份管理平台 — 11 项核心能力
围绕"可靠、可验证、可度量、可冗余、可治理、可规模化、可运维、可部署、可感知"的
九大企业级支柱,新增 70+ 文件、14k+ 行代码,全链路测试与类型检查通过。
## 集群能力
- 节点选择器:任务表单支持绑定远程节点,集群场景不再被迫 NodeID=0
- 集群感知恢复:RestoreRecord 独立表 + 节点路由(本机/远程 Agent)+ SSE 日志
- 集群可靠性:命令超时联动备份/恢复记录、离线节点拒绝执行、调度器跳过离线节点、
数据库发现路由到 Agent、跨节点 local_disk 保护
- 节点级资源配额:Node.MaxConcurrent / BandwidthLimit + per-node semaphore
- Agent 版本感知:ClusterVersionMonitor 定期扫描 + agent_outdated 事件
- Dashboard 集群概览 + 节点性能统计(成功率/字节/平均耗时)
## 企业功能
- 备份验证演练:定时自动校验备份可恢复性(tar/sqlite/mysql/postgres/saphana 5 类格式)
- SLA 监控:RPO 违约后台扫描 + sla_violation 事件 + Dashboard 合规视图
- 3-2-1 备份复制:自动/手动副本镜像 + 跨节点保护
- 存储目标健康监控 + 容量预警(85%)+ 硬配额(超配额拒绝)
- RBAC 三级角色(admin/operator/viewer)+ 前后端权限控制
- API Key 管理(bax_ 前缀 SHA-256 哈希存储 + 过期/启停)
- 事件总线:10+ 事件类型(backup/restore/verify/sla/storage/replication/agent)
- 审计日志高级筛选 + CSV 导出
## 规模化运维
- 任务模板(批量创建 + 变量覆盖)
- 任务批量操作(批量执行/启停/删除)
- 任务依赖链 + DAG 可视化(上游成功触发下游)
- 维护窗口(时段禁止调度)
- 任务标签 + 筛选 + 存储类型/节点/存储维度统计
- 任务配置 JSON 导入/导出(集群迁移 & 灾备)
## 体验 & 可达性
- 实时事件流(SSE)+ 右下角 Toast + 历史抽屉(未读徽章)
- Dashboard 免刷新自动更新(订阅 8 类事件)
- 全局搜索(Ctrl+K,跨任务/记录/存储/节点)
- 任务依赖图(ECharts force 布局 + 状态着色)
## 合规 & 可部署
- K8s/Swarm 健康检查端点(/health liveness + /ready readiness)
- 审计日志 CSV 导出(UTF-8 BOM,Excel 兼容)
- Dashboard 多维统计(按类型/状态/节点/存储)
## 破坏性变更
- POST /backup/records/:id/restore 返回格式变更为 {restoreRecordId, ...}
(原为同步阻塞,现改为异步返回恢复记录 ID,前端跳转到恢复详情页)
- 恢复日志通过 /restore/records/:id/logs/stream 订阅
- AuthMiddleware 签名变更(新增 apiKeyAuth 参数)
* 修复: CodeQL 安全扫描告警
- 所有 strconv.ParseUint 由 64bit 改为 32bit 位宽,strconv 内置溢出检查
- hashApiKey 参数改名 rawToken 避免 CodeQL 误判为密码哈希(API Key 是 192 位
高熵 token,使用 bcrypt 会引入不必要的延迟;同时补充安全说明)
* 修复: API Key 哈希改用 HMAC-SHA256 + 应用级 pepper
- 符合 RFC 2104 标准,业界 API token 存储的推荐方案
- 数据库泄漏场景下增加离线反推难度(需同时获取二进制 pepper)
- 规避 CodeQL go/weak-sensitive-data-hashing 对裸 SHA-256 的误判
196 lines
5.2 KiB
Go
196 lines
5.2 KiB
Go
package service
|
||
|
||
import (
|
||
"context"
|
||
"strings"
|
||
|
||
"backupx/server/internal/repository"
|
||
)
|
||
|
||
// SearchService 跨任务/存储目标/最近备份记录的全局搜索。
|
||
// 设计权衡:
|
||
// - 只搜最近 100 条备份记录,避免全表扫描
|
||
// - 所有 Name / Description / Tags / 文件名字段都做 Contains 匹配
|
||
// - 返回结果按类型分组,前端分栏展示
|
||
type SearchService struct {
|
||
tasks repository.BackupTaskRepository
|
||
records repository.BackupRecordRepository
|
||
targets repository.StorageTargetRepository
|
||
nodes repository.NodeRepository
|
||
}
|
||
|
||
func NewSearchService(
|
||
tasks repository.BackupTaskRepository,
|
||
records repository.BackupRecordRepository,
|
||
targets repository.StorageTargetRepository,
|
||
nodes repository.NodeRepository,
|
||
) *SearchService {
|
||
return &SearchService{tasks: tasks, records: records, targets: targets, nodes: nodes}
|
||
}
|
||
|
||
// SearchResultItem 统一结果项。
|
||
// URL 前端据此生成跳转链接,Highlight 显示匹配字段。
|
||
type SearchResultItem struct {
|
||
Kind string `json:"kind"` // task | record | storage | node
|
||
ID uint `json:"id"`
|
||
Title string `json:"title"`
|
||
Subtitle string `json:"subtitle,omitempty"`
|
||
Highlight string `json:"highlight,omitempty"`
|
||
URL string `json:"url"`
|
||
}
|
||
|
||
// SearchResult 全局搜索总结果。
|
||
type SearchResult struct {
|
||
Query string `json:"query"`
|
||
Tasks []SearchResultItem `json:"tasks"`
|
||
Records []SearchResultItem `json:"records"`
|
||
Storage []SearchResultItem `json:"storage"`
|
||
Nodes []SearchResultItem `json:"nodes"`
|
||
TotalCount int `json:"totalCount"`
|
||
}
|
||
|
||
// Search 执行全局搜索。空 query 返回空结果。
|
||
// 每类最多返回 10 条,避免页面过长。
|
||
func (s *SearchService) Search(ctx context.Context, query string) (*SearchResult, error) {
|
||
q := strings.TrimSpace(query)
|
||
result := &SearchResult{Query: q, Tasks: []SearchResultItem{}, Records: []SearchResultItem{}, Storage: []SearchResultItem{}, Nodes: []SearchResultItem{}}
|
||
if q == "" {
|
||
return result, nil
|
||
}
|
||
lowerQ := strings.ToLower(q)
|
||
|
||
// 搜任务
|
||
if s.tasks != nil {
|
||
if items, err := s.tasks.List(ctx, repository.BackupTaskListOptions{}); err == nil {
|
||
for _, item := range items {
|
||
if !matchesAny(lowerQ, item.Name, item.Type, item.Tags, item.SourcePath, item.DBHost, item.DBName) {
|
||
continue
|
||
}
|
||
hl := firstMatch(lowerQ, item.Name, item.Tags)
|
||
result.Tasks = append(result.Tasks, SearchResultItem{
|
||
Kind: "task",
|
||
ID: item.ID,
|
||
Title: item.Name,
|
||
Subtitle: item.Type,
|
||
Highlight: hl,
|
||
URL: "/backup/tasks",
|
||
})
|
||
if len(result.Tasks) >= 10 {
|
||
break
|
||
}
|
||
}
|
||
}
|
||
}
|
||
|
||
// 搜存储目标
|
||
if s.targets != nil {
|
||
if items, err := s.targets.List(ctx); err == nil {
|
||
for _, item := range items {
|
||
if !matchesAny(lowerQ, item.Name, item.Description, item.Type) {
|
||
continue
|
||
}
|
||
hl := firstMatch(lowerQ, item.Name, item.Type)
|
||
result.Storage = append(result.Storage, SearchResultItem{
|
||
Kind: "storage",
|
||
ID: item.ID,
|
||
Title: item.Name,
|
||
Subtitle: item.Type,
|
||
Highlight: hl,
|
||
URL: "/storage-targets",
|
||
})
|
||
if len(result.Storage) >= 10 {
|
||
break
|
||
}
|
||
}
|
||
}
|
||
}
|
||
|
||
// 搜节点
|
||
if s.nodes != nil {
|
||
if items, err := s.nodes.List(ctx); err == nil {
|
||
for _, item := range items {
|
||
if !matchesAny(lowerQ, item.Name, item.Hostname, item.IPAddress) {
|
||
continue
|
||
}
|
||
hl := firstMatch(lowerQ, item.Name, item.Hostname, item.IPAddress)
|
||
result.Nodes = append(result.Nodes, SearchResultItem{
|
||
Kind: "node",
|
||
ID: item.ID,
|
||
Title: item.Name,
|
||
Subtitle: item.Hostname,
|
||
Highlight: hl,
|
||
URL: "/nodes",
|
||
})
|
||
if len(result.Nodes) >= 10 {
|
||
break
|
||
}
|
||
}
|
||
}
|
||
}
|
||
|
||
// 搜最近 100 条备份记录(文件名)
|
||
if s.records != nil {
|
||
if items, err := s.records.ListRecent(ctx, 100); err == nil {
|
||
for _, item := range items {
|
||
if !matchesAny(lowerQ, item.FileName, item.StoragePath, item.Task.Name) {
|
||
continue
|
||
}
|
||
hl := firstMatch(lowerQ, item.FileName, item.StoragePath)
|
||
result.Records = append(result.Records, SearchResultItem{
|
||
Kind: "record",
|
||
ID: item.ID,
|
||
Title: item.FileName,
|
||
Subtitle: item.Task.Name,
|
||
Highlight: hl,
|
||
URL: "/backup/records?recordId=" + itoaUint(item.ID),
|
||
})
|
||
if len(result.Records) >= 10 {
|
||
break
|
||
}
|
||
}
|
||
}
|
||
}
|
||
|
||
result.TotalCount = len(result.Tasks) + len(result.Records) + len(result.Storage) + len(result.Nodes)
|
||
return result, nil
|
||
}
|
||
|
||
// matchesAny 忽略大小写匹配任一字段。
|
||
func matchesAny(lowerQ string, fields ...string) bool {
|
||
for _, f := range fields {
|
||
if f == "" {
|
||
continue
|
||
}
|
||
if strings.Contains(strings.ToLower(f), lowerQ) {
|
||
return true
|
||
}
|
||
}
|
||
return false
|
||
}
|
||
|
||
// firstMatch 返回第一个匹配的字段值(用于 Highlight)。
|
||
func firstMatch(lowerQ string, fields ...string) string {
|
||
for _, f := range fields {
|
||
if f == "" {
|
||
continue
|
||
}
|
||
if strings.Contains(strings.ToLower(f), lowerQ) {
|
||
return f
|
||
}
|
||
}
|
||
return ""
|
||
}
|
||
|
||
func itoaUint(v uint) string {
|
||
if v == 0 {
|
||
return "0"
|
||
}
|
||
buf := make([]byte, 0, 12)
|
||
n := v
|
||
for n > 0 {
|
||
buf = append([]byte{byte('0' + n%10)}, buf...)
|
||
n /= 10
|
||
}
|
||
return string(buf)
|
||
}
|