Skip to content

Secure Provisioner GHCR pull smoke 증거 강화 - #6

Merged
wlsdnd2367 merged 14 commits into
mainfrom
runtime-smoke-evidence
Sep 14, 2026
Merged

wlsdnd2367 merged 14 commits into
mainfrom
runtime-smoke-evidence

Conversation

@wlsdnd2367

@wlsdnd2367 wlsdnd2367 commented Aug 28, 2026 •

Copy link
Copy Markdown
Collaborator

작업 내용

  • artifact-v2.json publish bundle을 Runtime smoke 입력으로 사용합니다.
  • Backend Poller가 소비하는 bundle의 ports: [{port, public}] 형식은 유지합니다.
  • Runtime 계약에 맞춰 각 컨테이너를 ports와 exposed_ports로 변환합니다.
  • Runtime 요청에는 expose와 internal_connections를 보내지 않습니다.
  • 실제 Runtime target 입력값은 aws-k3s-lab을 사용합니다.
  • PWN 문제는 공개 컨테이너가 정확히 1개이고 해당 컨테이너의 포트도 정확히 1개인지 info.yaml 검증과 Runtime 변환 경계에서 모두 검사합니다.

Runtime 응답과 cleanup 검증

  • endpoints[] 필수 필드의 타입, HTTP | TCP, URI 형식과 공개 포트의 정확한 (container_name, port) 집합을 확인합니다.
  • endpoint가 누락·추가·중복되거나 형식이 잘못된 경우에도 생성된 workload를 삭제한 뒤 smoke를 실패시킵니다.
  • create 결과에서 runtime_workload_id가 빠지면 runtime-status를 cleanup 제한 시간까지 재시도해 ID를 복구하고 삭제합니다.
  • Runtime API 오류에 service token이 포함돼도 [REDACTED]로 가립니다.

현재 계약

  • 같은 challenge instance 내부 컨테이너 통신은 Runtime STANDARD@v2 기본 정책이 담당합니다.
  • challenge·team·instance 사이 격리와 외부 egress 기본 차단은 Runtime이 적용합니다.
  • DevSecOps는 raw Kubernetes manifest나 internal_connections 연결 그래프를 전달하지 않습니다.
  • Backend 등록은 DevSecOps가 API를 직접 호출하지 않고, Backend Poller가 문제 저장소의 Actions artifact를 수집하는 방식입니다.

검증

  • 단위 테스트 86개 통과
  • 잘못된 endpoint 응답에서도 workload 삭제 완료 확인
  • PWN 공개 컨테이너·포트 경계 검사 통과
  • GitHub Actions 통과

아직 남은 실제 통합 검증

실제 GHCR → K3s 생성·확인·삭제 smoke는 Runtime PR #41 반영 버전과 인증 정보가 준비된 뒤 공동 검증합니다.

  1. GHCR digest cold pull 성공과 소요 시간
  2. GHCR 인증 실패 및 ImagePullBackOff 재현
  3. 공개·비공개 포트 분리와 endpoint 결과
  4. 같은 인스턴스 내부 통신과 다른 인스턴스·팀 사이 차단
  5. 실패 및 성공 뒤 workload cleanup

관련 Runtime 계약: MSG-CTF/secure-provisioner#41

@wlsdnd2367
wlsdnd2367 changed the base branch from main to registry-integration September 1, 2026 14:07
@wlsdnd2367
wlsdnd2367 force-pushed the runtime-smoke-evidence branch from 26132d9 to e01fc18 Compare September 1, 2026 14:07
@jongcoding

Copy link
Copy Markdown
Contributor

digest 이미지, UUID team_id, internal_connections, token 가림, 같은 request_id 재시도는 Runtime 최신 계약과 맞습니다
다만 artifact의 public 포트가 2개인데 Runtime이 endpoint 1개만 반환해도 smoke가 성공하는 반례가 있습니다
빈 배열 여부만 보지 말고 artifact에서 예상 container_name과 port 집합을 만든 뒤 Runtime endpoints와 정확히 일치하는지 검사해 주세요
불일치할 때 workload를 먼저 정리하는 현재 동작은 유지하면 됩니다
PR #7 수정과 병합이 끝나면 base를 main으로 옮기고 cold pull, 인증 실패, ImagePullBackOff와 cleanup까지 실제 K3s에서 확인해 주세요

@wlsdnd2367

wlsdnd2367 commented Sep 2, 2026 •

Copy link
Copy Markdown
Collaborator Author

PR #6 리뷰 항목은 PR #7 계약 수정 다음 순서로 반영하겠습니다.

구현할 검증은 artifact의 모든 ports[].public == true에서 (container_name, port) 집합을 만들고 Runtime endpoints[]의 동일 집합과 정확히 비교하는 방식입니다. 누락, 추가, 중복, 잘못된 container/port를 모두 실패 처리하고, 불일치 시 기존처럼 delete 요청과 종료 확인을 먼저 수행합니다.

PR #7 병합 뒤 base를 main으로 변경하고, Runtime/Secure Provisioner 전용 target과 credential을 받아 cold pull, 인증 실패, ImagePullBackOff, cleanup을 실제 K3s에서 공동 검증하겠습니다.

@wlsdnd2367

Copy link
Copy Markdown
Collaborator Author

Runtime PR #39와 Backend PR #62 답변을 기준으로 후속 보완을 올렸습니다.

  • Runtime 요청을 ports + exposed_ports로 변환하고 expose 제거
  • internal_connections 보존
  • target_id=aws-k3s-lab 반영
  • PWN 공개 컨테이너 1포트 제한 추가
  • Runtime endpoint 필드·protocol·URI·공개 포트 집합 검증 강화
  • 불완전한 create 결과에서 runtime-status 재시도 후 cleanup
  • node-local service token 계약으로 문서 통일

현재 커밋 4af2e9b 기준 로컬 검증:

  • 전체 단위 테스트 82개 통과
  • Python 문법 검사 통과
  • git diff --check 통과
  • Gitleaks 누출 0건
  • 독립 재리뷰 새 finding 없음

실제 aws-k3s-lab 배포 smoke는 Runtime service token 미수령 및 PR #39 배포 전이므로 아직 실행하지 않았습니다. PR #7 병합 후 base를 main으로 변경하고, 문제 저장소의 실제 publish bundle로 Backend 수집·Runtime 배포 통합 결과를 후속으로 남기겠습니다.

@wlsdnd2367

Copy link
Copy Markdown
Collaborator Author

최종 head 3f580d5에서 수동 workflow_dispatch 검증도 성공했습니다.

  • 실행 결과: https://github.com/MSG-CTF/msgctf-devsecops/actions/runs/34079153296
  • 단위 테스트·문법 검사 성공
  • info.yaml/build context/Gitleaks 검증 성공
  • web과 helper image build·Trivy vulnerability/secret scan·CycloneDX SBOM 생성 성공
  • main 발행 전용 sample/KOTH publish job은 branch 실행 조건 때문에 의도적으로 skipped

실제 K3s smoke는 service token과 Runtime PR #39 배포가 준비된 후 별도로 확인합니다.

@wlsdnd2367

wlsdnd2367 commented Sep 7, 2026 •

Copy link
Copy Markdown
Collaborator Author

리뷰 보완사항을 커밋 7a7d363에 반영했습니다.

  • endpoint protocol 타입을 문자열로 먼저 검증해 hash 불가능한 값에서도 검증 오류로 처리
  • endpoint 응답 검증 실패 후에도 생성된 workload의 DELETE 요청과 삭제 Operation 완료 확인
  • PWN 문제는 공개 컨테이너가 정확히 1개이고, 해당 컨테이너의 전체 포트도 정확히 1개인지 info.yaml 검증과 Runtime 요청 변환 양쪽에서 확인
  • cleanup 회귀 테스트의 cleanup_timeout을 50ms에서 1초로 조정
  • 관련 회귀 테스트 추가 및 문서 계약 갱신

검증 결과:

실제 K3s smoke는 Runtime #39 반영 버전 배포와 노드 service token 준비 전이므로 아직 실행하지 않았습니다. PR #7 병합 후 이 PR의 base를 main으로 변경하고 최종 CI를 다시 확인하겠습니다.

@wlsdnd2367
wlsdnd2367 changed the base branch from registry-integration to main September 7, 2026 05:13
@wlsdnd2367

Copy link
Copy Markdown
Collaborator Author

후속 순서를 반영했습니다.

실제 K3s smoke는 Runtime #39 반영 버전 배포와 노드 service token 준비 후 진행합니다.

@wlsdnd2367

Copy link
Copy Markdown
Collaborator Author

PR #8 병합 commit a682bd0d7098913aee52235b46ec8205b3ad73ed을 반영하고 6개 충돌 파일을 정리했습니다.

반영 내용:

  • 신규 Runtime 요청에서 internal_connections를 전달하지 않음
  • publish bundle의 ports[].public을 ports / exposed_ports로 변환
  • endpoint 필드·주소·중복·누락 검사 유지
  • endpoint 응답 검증 실패 후에도 생성된 workload 삭제 유지
  • 불완전한 create 결과에서 workload ID를 복구해 삭제하는 처리 유지
  • Runtime 오류의 service token 마스킹 유지
  • PWN 공개 컨테이너 1개·전체 포트 1개 제한 유지
  • 폐기된 internal_connections 기반 설계 문서 제거

검증:

실제 GHCR -> K3s smoke는 Runtime PR #41 반영 버전이 배포되고 target/service token/GHCR pull 인증이 준비된 뒤 별도로 실행하겠습니다.

@jongcoding jongcoding left a comment

Copy link
Copy Markdown
Contributor

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

수정한 부분 확인했고 코드 기준으로는 머지해도 될 것 같습니다

단위 테스트 86개와 추가 실패 경로 검사까지 통과했고, 잘못된 endpoint 응답을 받았을 때 삭제 완료까지 확인하는 처리도 확인했습니다

실제 GHCR → K3s 생성·삭제 검증은 Runtime #41 반영 버전과 인증 준비 후 별도로 진행해주세요
PR 본문에 남아 있는 internal_connections 보존이랑 이전 PR 기준 설명도 현재 계약으로 맞춰주시면 됩니다

@wlsdnd2367
wlsdnd2367 merged commit 617b1df into main Sep 14, 2026
6 checks passed
@wlsdnd2367
wlsdnd2367 deleted the runtime-smoke-evidence branch September 14, 2026 04:50
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

2 participants