3ee1c1ee23
이슈 #9에서 결정된 CloudNativePG 채택을 카탈로그 앱에 확장 적용한다. airflow/lakekeeper/mlflow/superset/flowise 5개 차트가 내장하던 bitnami postgresql 서브차트를 끄고 앱 전용 cnpg-cluster 인스턴스를 외부 DB로 쓰도록 전환했다. 5개 모두 dev 클러스터 격리 네임스페이스에서 배포 테스트로 실측 검증했다. gitea/keycloak/dnsup 는 서브차트가 아니라 공유 postgresql-ha 를 외부 참조하며 paasup/dipup 레포 관리 대상이라 제외했다 — 인수인계 문서만 추가했다. 배포 구조: - ArgoCD ApplicationSet 으로 DB(syncWave 0) → 앱(syncWave 1) 순서를 보장한다. 기존 openmetadata/victoria-metrics 관례를 따랐다. cnpg-cluster 차트는 범용 상태로 유지하고 앱별 값은 manifests/applicationset/<app>/ 에 둔다. 검증 중 발견해 함께 고친 문제: - lakekeeper: cnpg 의 -ro 는 replica 전용이라 instances:1 에서 엔드포인트가 0개다. 읽기 연결을 -r(전체 라운드로빈)로 교체했다. - airflow/superset: ingressClassName 누락 + kong 애노테이션 잔존으로 이 클러스터(apisix 전용)에서 ingress 접근이 아예 불가능했다. apisix + regex path 로 교체했다. - 배포 테스트가 PV 만 지우고 Longhorn Volume CR 을 남겨 storageScheduled 가 누적됐다(orphan 112개 ~1TB 로 배포 차단). 두 스크립트의 정리 로직을 고쳤다. 재사용 구조화: - .claude/skills/chart-to-cnpg/ 신규. 남은 4개 차트(langflow-ide, langfuse, litellm, nemo)에 같은 절차를 재사용한다. flowise 에 실제 적용해 검증했다. - 배포 테스트 공통 절차는 .claude/deploy-test-procedure.md, 환경 함정은 .claude/pitfalls.md 로 단일화하고 앱별 README 는 참조만 남겼다. 관련: #9, #14 Co-Authored-By: Claude Opus 5 (1M context) <noreply@anthropic.com>
6.0 KiB
6.0 KiB
배포 테스트 절차
CLAUDE.md 에서 분리했다. 배포 테스트를 실제로 수행할 때만 참고한다. security-catalog 프로젝트에서 포팅했다.
CVE 0건이어도 동작하지 않는 이미지는 카탈로그에 넣을 수 없다. 게이트 통과와 기능 검증은 둘 다 필수다.
CNPG (cnpg-postgresql 이미지) — 자동화됨
build-image.yml 이 새 이미지로 카탈로그 PR 을 열면, 병합 전에 로컬 kubeconfig 로
scripts/deploy-test/deploy-test-cnpg-cluster.sh 를 실행해 "실제로 뜨는가"만 빠르게 확인한다(PR 본문에도
안내됨).
IMAGE_NAME=docker.io/wbsong111/cnpg-postgresql:<태그> bash scripts/deploy-test/deploy-test-cnpg-cluster.sh /tmp/deploy-test-out
- Operator(
cloudnative-pg)는 상시 컴포넌트다 — releasecnpg, namespacecnpg-system에 1회만 설치되고 스크립트가 재사용한다. cloudnative-pg 차트의 웹훅 설정 이름이 릴리스와 무관하게 클러스터 전역 고정이라(cnpg-validating-webhook-configuration등) 두 번째 설치가 원천적으로 불가능하다 — 그래서 상시 설치로 전환됐다. - 앱(
cnpg-cluster)만 고정 네임스페이스(pg-test-build)에 매번 재생성되고, 검증은 차트 기본값 +postgresql.imageNameoverride만으로 이루어진다(custom-values.yaml안 씀). 확인 범위는 "psql 로 응답하는가" 수준의 스모크 테스트다. - 정리(uninstall + PVC/PV + 네임스페이스 삭제)는 성공/실패와 무관하게 항상 수행된다. Operator 는 정리 대상이 아니다.
- CI(GitHub Actions) 통합은 아직 없다 — 러너에서 dev 클러스터로의 네트워크 경로가 없다.
- 백업/PITR, pooler, 동기 복제 등 스모크 테스트 밖의 항목은 아래 수동 절차를 따른다.
security-catalog 프로젝트에 상세 배포 테스트 기록(
doc/charts/cnpg/deploy-test.md)이 있으나 dip-catalog 에는 아직 이관되지 않았다.
etcd (etcd 이미지) — 스크립트 있음, 수동 실행
cnpg 와 달리 상시 오퍼레이터가 없다 — 단일 차트라 매 실행 테스트 네임스페이스
(etcd-test-build)에 설치하고 끝나면 지운다.
IMAGE_NAME=quay.io/coreos/etcd:v3.7.1 bash scripts/deploy-test/deploy-test-etcd.sh /tmp/deploy-test-out
- 차트 기본값 +
image.*/initImage.*/replicasoverride 만으로 검증한다 (custom-values.yaml안 씀 — cnpg 원칙과 동일). - 확인 범위: StatefulSet 롤아웃, 컨테이너 실행 계정(uid 999 기대), 전 멤버 quorum
health(
etcdctl endpoint health --cluster), 쓰기/읽기 왕복(etcdctl put/get). - 정리(uninstall + PVC/PV + 네임스페이스 삭제)는 성공/실패와 무관하게 항상 수행된다.
- TLS·백업 등 스모크 테스트 밖의 항목은
manifests/helm/etcd/1.1.12/CUSTOM-README.md를 따른다. security-catalog 프로젝트에 상세 배포 테스트 기록(doc/charts/etcd/deploy-test.md)이 있으나 dip-catalog 에는 아직 이관되지 않았다.
카탈로그 앱 → cnpg-cluster 전환 배포 테스트 (deploy-test-app-with-cnpg.sh)
airflow/lakekeeper/mlflow/superset처럼 내장 bitnami postgresql 서브차트를 cnpg-cluster
전용 인스턴스로 전환한 앱은 이 공용 스크립트로 검증한다. 각 앱의 ApplicationSet 배포 구조·
사전조건은 manifests/applicationset/<app>/<version>/README.md에 있다 — 여기서는 배포
테스트 자체의 공통 절차만 다룬다.
APP_CHART_DIR=manifests/helm/<app>/<version> \
APP_RELEASE=<app> \
DB_CUSTOM_VALUES=manifests/applicationset/<app>/<version>/<app>-db-values.yaml \
DB_SECRET_USER=<user> DB_SECRET_PASSWORD=<password> \
TEST_NAMESPACE=<app>-test-build \
APP_EXTRA_VALUES=scripts/deploy-test/fixtures/<app>-deploy-test-overrides.yaml \
APP_POD_SELECTOR="<DB에 실제로 연결하는 파드의 label selector>" \
bash scripts/deploy-test/deploy-test-app-with-cnpg.sh /tmp/deploy-test-<app>
- operator(
cloudnative-pg)는 상시 컴포넌트로 재사용한다. DB(cnpg-cluster)를 먼저 띄워 healthy 대기 후 앱을 설치하고, 실제 DB 소비 파드가 Running+Ready 상태가 되고 로그에 DB 연결 실패 패턴이 없으면 PASS. 정리는 성공/실패와 무관하게 항상 수행한다. APP_POD_SELECTOR는 반드시 지정한다 — 미지정 시 네임스페이스의 아무 파드나 Running이면 통과로 오판할 수 있다(DB와 무관한 다른 파드가 떠 있으면 실제 실패를 놓친다 — 실측).APP_EXTRA_VALUES(fixture,scripts/deploy-test/fixtures/<app>-deploy-test-overrides.yaml)는 DB 연결과 무관하지만 격리된 테스트 네임스페이스에서만 막히는 의존성을 끈다. 카탈로그의 실제 권장 설정(custom-values.yaml)은 건드리지 않는다. 앱별로 무엇을 왜 끄는지는 각 fixture 파일 자체의 주석에 있다 — 문서를 이중으로 유지하지 않는다.- PV뿐 아니라 Longhorn Volume 커스텀 리소스까지 지워야 한다 — PV만 지우면 Longhorn 쪽에 실제 디스크가 계속 쌓인다. 상세: pitfalls.md.
- ingress host 충돌 주의: pitfalls.md 참고.
그 외 차트 — 수동 절차
- 전용 네임스페이스를 새로 만든다 (
pg-test-<name>). 기존 워크로드가 있는 NS 를 쓰지 않는다. - 오퍼레이터는 가능하면 권한을 축소해 설치한다 (CNPG 는
config.clusterWide=false). - 개발 환경 크기로 축소해 배포한다 (
--set storage.size=2Gi등).custom-values.yaml자체를 개발용 값으로 바꾸지 않는다. - 검증 항목은 해당 차트의
BUILD-README.md"배포 검증" 절에 정의한다. - 결과는 실측값으로 기록한다(장소는
MEMORY.md또는 PR 설명 —doc/charts/관례는 dip-catalog 에 아직 없다). 통과 항목만 쓰지 말고 발견된 문제와 미검증 항목을 반드시 남긴다. - 정리한다. 정리 명령은 문서에 함께 기록한다.