Repository navigation
Periodic Loops
이 표는 지도일 뿐이다. 진짜 감시는 S3 비용 대시보드와
S3RequestRateSurge알림이 한다 — rate가 7일 평균의 3배를 넘으면 Discord 비용 채널로 온다. 표의 값은 조사 시점(2026-08-11)의 것이고 반년 뒤에는 틀릴 수 있다. 값을 믿지 말고 "어디를 봐야 하는지"만 가져가라.
ELOG-027에서 thanos compact에 독립적인 주기 루프가 4개 있었고 전부 기본값이 짧았다. 하나만 보고 PR을 3개로 쪼개 냈다. 처음부터 전수 조사를 했으면 한 번에 끝났다.
같은 종류의 루프가 Loki · Tempo · Longhorn · MySQL 백업에도 있고, 앞으로 붙일 컴포넌트에도 있다.
가장 위험한 루프는 아무 데도 안 적혀 있는 것이다. 차트 values에 없으면 기본값으로 도는데, 그 기본값은 대개 짧다.
조사는 반드시 런타임 설정으로 한다:
# Loki — 실제 병합된 설정 전체
kubectl port-forward -n monitoring svc/loki 3100:3100
curl -s localhost:3100/config | grep -nE "interval|poll|period"
# Tempo
kubectl port-forward -n monitoring svc/tempo 3200:3200
curl -s localhost:3200/status/config | grep -nE "blocklist_poll|cycle|interval"
# Thanos 등 플래그 기반 컴포넌트
kubectl get sts -n monitoring thanos-compactor -o jsonpath='{.spec.template.spec.containers[0].args}'S3 열은 그 루프가 S3 요청을 만드는가다. 비용은 여기서만 난다.
| 컴포넌트 | 설정 | 현재값 | 선언 위치 | S3 |
|---|---|---|---|---|
| thanos-compactor | --wait-interval |
1h | thanos/values.yaml |
✅ |
| thanos-compactor | --compact.cleanup-interval |
1h | 〃 | ✅ |
| thanos-compactor | --block-viewer.global.sync-block-interval |
1h | 〃 | ✅ |
| thanos-compactor | --compact.progress-interval |
1h | 〃 | ✅ |
| loki | storage_config.tsdb_shipper.resync_interval |
30m | loki/values.yaml |
✅ |
| loki | compactor.compaction_interval |
10m | ✅ | |
| loki | compactor.apply_retention_interval |
24h | loki/values.yaml |
✅ |
| loki | compactor.retention_delete_delay |
2h | 미선언(기본값) | ✅ |
| tempo | storage.trace.blocklist_poll |
5m | ✅ | |
| tempo | compactor.compaction.compaction_cycle |
30s | 미선언(기본값) | ✅ |
| tempo | ingester.max_block_duration |
30m | 미선언(기본값) | ✅ (PUT 주기) |
| prometheus |
scrapeInterval / evaluationInterval
|
30s | kube-prometheus-stack/values.yaml |
❌ |
| prometheus → thanos | 블록 업로드 | 2h (고정) | — | ✅ |
| loki / tempo ServiceMonitor | interval |
60s | 각 values.yaml
|
❌ |
| 컴포넌트 | 설정 | 현재값 | 선언 위치 | S3 |
|---|---|---|---|---|
longhorn daily-backup
|
RecurringJob cron |
0 4 * * * (retain 7) |
longhorn/ |
✅ |
| mysql-backup | CronJob schedule | 0 4 * * * |
mysql/values.yaml |
✅ |
@Scheduled로 도는 것들. AWS S3가 아니라 자체 호스팅 MinIO라 요청 과금은 없지만,
외부 저장소를 주기적으로 훑는 루프는 세어 둔다.
| 배치 | cron (KST) | 무엇을 하나 | 저장소 |
|---|---|---|---|
VisitRetentionScheduler |
0 30 3 * * * |
원시 방문 90일 정리 | ❌ 로컬 MySQL |
가계부 제거로 이 표의 배치 4개가 사라졌다(Ledger-Removal · #1409). 앱의 주기 작업이 7개 → 3개가 됐고(휴일·방문 보존·여행 알림), MinIO를 훑는 애플리케이션 루프가 하나도 남지 않았다 —
LedgerReceiptRetentionScheduler가ledger/receipts/prefix를 전수 LIST하던 유일한 자리였다.지워진 넷:
LedgerReceiptRetentionScheduler(0 50 3 * * *) ·StatementCycleScheduler(0 10 4 * * *) ·RecurringPostingScheduler(0 0 * * * *) ·ScheduledPromotionScheduler(0 0 * * * *).
| 컴포넌트 | 설정 | 현재값 | 왜 무해한가 |
|---|---|---|---|
| loki | storage_config.boltdb_shipper.resync_interval |
5m | boltdb_shipper를 안 쓴다 (tsdb + schema v13). 테이블이 없어 LIST할 대상이 없다 |
| loki | ruler.poll_interval |
1m | 룰 저장소가 local(ConfigMap 마운트)이라 S3가 아니다 |
| loki | table_manager.poll_interval |
2m | compactor retention을 쓰므로 table_manager는 비활성 경로 |
| argocd | timeout.reconciliation |
120s | Git 폴링. S3 무관 |
조사에서 코드 어디에도 안 적혀 있는데 S3를 두드리는 루프가 둘 나왔다. ELOG-027이 잡은 것과 같은 종류다.
| 루프 | 기본값 | 왜 문제인가 |
|---|---|---|
loki compactor.compaction_interval |
10m | 하루 144회 인덱스 압축. retention 집행도 이 주기에 얹힌다 |
tempo storage.trace.blocklist_poll |
5m | 하루 288회 블록 목록 LIST. blocklist_poll_concurrency: 50이라 한 번에 여러 요청이 나간다 |
여기서 바로 값을 바꾸지 않는다. 실측 Tier1은 15.8k/day이고 남은 절감 여지는 월 $2.8 미만이라, 조정 여부는 대시보드에서 이 둘의 기여분을 확인한 뒤 판단한다(취미 클러스터 과투자 금지). 다만 "안 적혀 있어서 안 보였다"는 상태는 이 문서로 끝났다.
- 런타임 설정을 위 방법으로 덤프해
interval·poll·period·cycle을 전부 훑는다 - S3나 유료 API를 두드리는 것만 이 표에 한 줄 추가한다
- 기본값이 짧으면(≤5m) values.yaml에 명시적으로 적는다. 값을 바꾸지 않더라도 적어라 — 안 적힌 값은 다음 사람에게 존재하지 않는 값이다
- ELOG-027 — 이 문서가 생긴 계기
- ELOG-008 — 첫 S3 요청 비용 사건
- Observability — 관측성 스택 전반