11.7 복구 시나리오와 정기 복구 훈련

# 1. 새 호스트에 PITR (drop 1분 전으로)
sudo -u postgres pgbackrest --stanza=main restore \
  --type=time --target='2026-05-23 09:54:00' \
  --target-action=promote

# 2. 기동 후 테이블만 dump
pg_dump -h staging -t public.orders app_main > orders_recovered.sql

# 3. 운영에 재생
psql -h primary app_main < orders_recovered.sql

# staging에서
psql -h staging -c "
COPY (SELECT * FROM orders WHERE updated_at > '2026-05-23 09:50:00')
  TO '/tmp/before.csv' WITH CSV;
"

# 운영에서
\COPY orders_before FROM '/tmp/before.csv' WITH CSV;

UPDATE orders o SET status = b.status FROM orders_before b WHERE o.id = b.id;

# 1. 새 호스트에 PostgreSQL 설치
sudo dnf install postgresql17-server pgbackrest

# 2. pgBackRest 설정 복사 (저장소 위치·인증)
sudo scp old_admin:/etc/pgbackrest.conf /etc/

# 3. 새 PGDATA 디렉토리 (비어 있어야)
sudo -u postgres mkdir -p /var/lib/pgsql/17/data
sudo chmod 0700 /var/lib/pgsql/17/data

# 4. 가장 최근 백업 복원
sudo -u postgres pgbackrest --stanza=main restore

# 5. 기동
sudo systemctl start postgresql-17

# 6. 검증
psql -c "SELECT count(*) FROM critical_table;"

# standby에서
sudo -u postgres pg_ctl -D /var/lib/pgsql/17/data promote

# 1. corrupt 페이지 위치 확인
psql -c "SELECT ctid, * FROM bad_table LIMIT 1;"  # 어디가 깨졌는지

# 2. 영향 받는 row 추출 (가능한 만큼)
SELECT * FROM bad_table WHERE ctid::text NOT LIKE '(<bad_page>,%)';

# 3. 최근 백업에서 같은 테이블 export
pgbackrest --stanza=main restore --tablespace-map=... --type=immediate ...
# 그 staging에서
pg_dump -t bad_table app_main > recover.sql

# 4. 운영의 corrupt 테이블 교체
DROP TABLE bad_table;
\i recover.sql

# 1. 다른 리전·클라우드에 PostgreSQL 설치
# 2. S3 cross-region 또는 그 리전의 백업 저장소에서 pgBackRest restore
# 3. DNS·CDN·LB 전환

#!/bin/bash
# 매분기 첫째 토요일 — staging 호스트에서
set -e

STAGING_PG=/var/lib/pgsql/staging/data
TARGET_TIME="$(date -d '1 hour ago' '+%Y-%m-%d %H:%M:%S')"

# 1. staging 정지·디렉토리 비움
sudo -u postgres pg_ctl -D $STAGING_PG stop -m fast || true
sudo -u postgres rm -rf $STAGING_PG/*

# 2. 최근 백업으로 PITR
sudo -u postgres pgbackrest --stanza=staging \
  --pg1-path=$STAGING_PG --type=time --target="$TARGET_TIME" restore

# 3. 기동
sudo systemctl start postgresql@staging

# 4. 핵심 검증 쿼리
psql -p 5433 -c "SELECT count(*) FROM critical_table;" || {
  echo "FAIL: 검증 쿼리 실패"
  exit 1
}

# 5. 알람 발송 — 성공
curl -X POST https://alert/.../ -d "Recovery drill OK at $(date)"