Skip to content

Periodic Loops

wcorn edited this page Sep 20, 2026 · 4 revisions

주기 루프 인벤토리 (Periodic Loops)

이 표는 지도일 뿐이다. 진짜 감시는 S3 비용 대시보드와 S3RequestRateSurge 알림이 한다 — rate가 7일 평균의 3배를 넘으면 Discord 비용 채널로 온다. 표의 값은 조사 시점(2026-08-11)의 것이고 반년 뒤에는 틀릴 수 있다. 값을 믿지 말고 "어디를 봐야 하는지"만 가져가라.

왜 이 문서가 있나

ELOG-027에서 thanos compact에 독립적인 주기 루프가 4개 있었고 전부 기본값이 짧았다. 하나만 보고 PR을 3개로 쪼개 냈다. 처음부터 전수 조사를 했으면 한 번에 끝났다.

같은 종류의 루프가 Loki · Tempo · Longhorn · MySQL 백업에도 있고, 앞으로 붙일 컴포넌트에도 있다.

⚠️ values.yaml만 보면 절반을 놓친다

가장 위험한 루프는 아무 데도 안 적혀 있는 것이다. 차트 values에 없으면 기본값으로 도는데, 그 기본값은 대개 짧다.

조사는 반드시 런타임 설정으로 한다:

# Loki — 실제 병합된 설정 전체
kubectl port-forward -n monitoring svc/loki 3100:3100
curl -s localhost:3100/config | grep -nE "interval|poll|period"

# Tempo
kubectl port-forward -n monitoring svc/tempo 3200:3200
curl -s localhost:3200/status/config | grep -nE "blocklist_poll|cycle|interval"

# Thanos 등 플래그 기반 컴포넌트
kubectl get sts -n monitoring thanos-compactor -o jsonpath='{.spec.template.spec.containers[0].args}'

인벤토리 (2026-08-11)

S3 열은 그 루프가 S3 요청을 만드는가다. 비용은 여기서만 난다.

관측성

컴포넌트 설정 현재값 선언 위치 S3
thanos-compactor --wait-interval 1h thanos/values.yaml ✅
thanos-compactor --compact.cleanup-interval 1h 〃 ✅
thanos-compactor --block-viewer.global.sync-block-interval 1h 〃 ✅
thanos-compactor --compact.progress-interval 1h 〃 ✅
loki storage_config.tsdb_shipper.resync_interval 30m loki/values.yaml ✅
loki compactor.compaction_interval 10m ⚠️ 미선언(기본값) ✅
loki compactor.apply_retention_interval 24h loki/values.yaml ✅
loki compactor.retention_delete_delay 2h 미선언(기본값) ✅
tempo storage.trace.blocklist_poll 5m ⚠️ 미선언(기본값) ✅
tempo compactor.compaction.compaction_cycle 30s 미선언(기본값) ✅
tempo ingester.max_block_duration 30m 미선언(기본값) ✅ (PUT 주기)
prometheus scrapeInterval / evaluationInterval 30s kube-prometheus-stack/values.yaml ❌
prometheus → thanos 블록 업로드 2h (고정) — ✅
loki / tempo ServiceMonitor interval 60s 각 values.yaml ❌

백업

컴포넌트 설정 현재값 선언 위치 S3
longhorn daily-backup RecurringJob cron 0 4 * * * (retain 7) longhorn/ ✅
mysql-backup CronJob schedule 0 4 * * * mysql/values.yaml ✅

애플리케이션 배치 (orino-app-api)

@Scheduled로 도는 것들. AWS S3가 아니라 자체 호스팅 MinIO라 요청 과금은 없지만, 외부 저장소를 주기적으로 훑는 루프는 세어 둔다.

배치 cron (KST) 무엇을 하나 저장소
VisitRetentionScheduler 0 30 3 * * * 원시 방문 90일 정리 ❌ 로컬 MySQL

가계부 제거로 이 표의 배치 4개가 사라졌다(Ledger-Removal · #1409). 앱의 주기 작업이 7개 → 3개가 됐고(휴일·방문 보존·여행 알림), MinIO를 훑는 애플리케이션 루프가 하나도 남지 않았다 — LedgerReceiptRetentionScheduler가 ledger/receipts/ prefix를 전수 LIST하던 유일한 자리였다.

지워진 넷: LedgerReceiptRetentionScheduler(0 50 3 * * *) · StatementCycleScheduler(0 10 4 * * *) · RecurringPostingScheduler(0 0 * * * *) · ScheduledPromotionScheduler(0 0 * * * *).

도는데 S3는 안 두드리는 것 (오해 방지)

컴포넌트 설정 현재값 왜 무해한가
loki storage_config.boltdb_shipper.resync_interval 5m boltdb_shipper를 안 쓴다 (tsdb + schema v13). 테이블이 없어 LIST할 대상이 없다
loki ruler.poll_interval 1m 룰 저장소가 local(ConfigMap 마운트)이라 S3가 아니다
loki table_manager.poll_interval 2m compactor retention을 쓰므로 table_manager는 비활성 경로
argocd timeout.reconciliation 120s Git 폴링. S3 무관

발견 — 미선언 기본값 2개

조사에서 코드 어디에도 안 적혀 있는데 S3를 두드리는 루프가 둘 나왔다. ELOG-027이 잡은 것과 같은 종류다.

루프 기본값 왜 문제인가
loki compactor.compaction_interval 10m 하루 144회 인덱스 압축. retention 집행도 이 주기에 얹힌다
tempo storage.trace.blocklist_poll 5m 하루 288회 블록 목록 LIST. blocklist_poll_concurrency: 50이라 한 번에 여러 요청이 나간다

여기서 바로 값을 바꾸지 않는다. 실측 Tier1은 15.8k/day이고 남은 절감 여지는 월 $2.8 미만이라, 조정 여부는 대시보드에서 이 둘의 기여분을 확인한 뒤 판단한다(취미 클러스터 과투자 금지). 다만 "안 적혀 있어서 안 보였다"는 상태는 이 문서로 끝났다.

새 컴포넌트를 붙일 때

  1. 런타임 설정을 위 방법으로 덤프해 interval · poll · period · cycle을 전부 훑는다
  2. S3나 유료 API를 두드리는 것만 이 표에 한 줄 추가한다
  3. 기본값이 짧으면(≤5m) values.yaml에 명시적으로 적는다. 값을 바꾸지 않더라도 적어라 — 안 적힌 값은 다음 사람에게 존재하지 않는 값이다

관련

Clone this wiki locally