指南 恢复 Runbook

恢复 Runbook 按系统整理可执行的恢复手册，覆盖 etcd、Velero、PostgreSQL、Kafka 与 Elasticsearch，强调前置检查、数据边界、验证标准和失败回退，适合演练、变更评审和事故恢复时逐项执行。

• runbook-backup-restore-verification - 通过隔离环境中的恢复演练，验证备份可用性、RPO/RTO、数据一致性与应用验收，并形成改进闭环。
• runbook-cert-rotation - 从证书盘点、签发新链、分批下发到验证与回滚，完成一次集群或内部 CA 的证书轮换。
• runbook-db-failover - 以 PostgreSQL 和 MySQL 为主线，完成数据库主从切换或故障转移的确认、摘流量、提升、切换、验证与回切。
• runbook-dns-failover - 在权威 DNS 提供商之间安全切换域名解析，通过 TTL 预降、记录核对和 DNSSEC 处理控制解析中断与回滚。
• runbook-es-restore - 用快照仓库把 Elasticsearch 索引和集群元数据恢复到确定时点，并验证、切换或回滚。
• runbook-etcd-restore - 用快照把 Kubernetes 控制面恢复到确定时点，并完成证书校准、验证与回滚。
• runbook-k8s-upgrade - 按“评估、控制面、节点、addon、验证、回滚”的顺序完成一次可审计的 Kubernetes 集群升级。
• runbook-kafka-broker-replace - 在 Kafka 集群中安全替换或退役 broker，迁移分区副本，并验证 controller 选举、ISR、生产与消费链路。
• runbook-kafka-restore - 在副本不足、磁盘故障或整集群损坏后，恢复 Kafka 的 topic 元数据、分区副本与消费者位点。
• runbook-postgres-pitr - 用基础备份和连续 WAL 归档把 PostgreSQL 恢复到指定时间点，并验证、切换或回滚。
• runbook-redis-failover - 在 Redis 主从、Sentinel 或 Cluster 部署中完成一次可控的主节点切换，覆盖只读副本提升、客户端重连、脑裂隔离与数据丢失窗口核算。
• runbook-velero-restore - 从 Velero 备份恢复命名空间或整集群，确认 PV 数据、处理部分失败并安全回滚。