Disaster recovery: бэкап и восстановление

«Надейтесь на лучшее, готовьтесь к худшему»

#Snapshot TSDB

# Включите admin API
prometheus --web.enable-admin-api

# Создайте snapshot
curl -X POST http://localhost:9090/api/v1/admin/tsdb/snapshot

# Скопируйте snapshot в prometheus_data/
cp -r snapshots/*/wal prometheus_data/
cp -r snapshots/*/blocks prometheus_data/

# Перезапустите Prometheus

2+ Prometheus реплик с загрузкой в bucket через Sidecar.

Load balancer направляет на активный Prometheus. При падении — переключение на резервный.

«Надейтесь на лучшее, готовьтесь к худшему»

# Включите admin API
prometheus --web.enable-admin-api

# Создайте snapshot
curl -X POST http://localhost:9090/api/v1/admin/tsdb/snapshot

# Скопируйте snapshot в prometheus_data/
cp -r snapshots/*/wal prometheus_data/
cp -r snapshots/*/blocks prometheus_data/

# Перезапустите Prometheus

2+ Prometheus реплик с загрузкой в bucket через Sidecar.

Load balancer направляет на активный Prometheus. При падении — переключение на резервный.