결론
전체 합격 (PASS) 예상 확률
~82%
7 KPI 모두 PASS 받을 확률 (조건부 포함 시 ~98%)
최저 합격 시나리오
5 / 7
KPI 6 · 5 · 2 조건부 가능 — TIPS 사유서 통과 가능
7 KPI 모두 운영 측정값이 합격선 위에 있고, 시드 고정으로 재현 가능. 단 합격 여유가 좁은 3개 (KPI ⑥ · ⑤ · ②) 가 시험 당일 변동 시 조건부 받을 가능성 있음.
KPI별 통과 확률
KPI ④ 처리속도 + 무결성 · 18,000건/분 / 합격선 500 (×36)
100%
KPI ③ BLEU · 81.68 / 78 (여유 +3.68)
98%
KPI ⑦ 상품추천 F1@10 · 89.08 / 86 (여유 +3.08)
98%
KPI ① 재무 F1 · 72.42 / 71.07 (여유 +1.35)
95%
KPI ⑤ 개인화 LLM-Rec · 0.3304 / 0.31 (여유 +0.02)
90%
KPI ② 분류 정확도 · 99.20% / 99.0% (여유 +0.20%)
90%
KPI ⑥ NQ Recall@5 · 64.10 / 64.06 (여유 +0.04)
75%
시험 시작 전 처리 필수 (D-1)
| # | 액션 | 대상 | 소요 |
|---|---|---|---|
| 1 | KPI 1 cold-start warmup 호출 1회 | 운영자 | 30초 |
| 2 | KPI 6 fresh 사전 측정 1회 (64.06 이상 재확인) | 운영자 | 5분 |
| 3 | 5/12 옛 KPI4 결과 파일 5개 격리 (화면 평균 정상화) | 운영자 | 2분 |
| 4 | ADMIN_LOG_TOKEN 신규 발급 → 시험관에 1회 전달 | 운영자 | 3분 |
| 5 | 시험관에게 본 사이트 URL 사전 전달 (인쇄 또는 옆 탭) | 운영자 | 1분 |
사이트 구성
| 페이지 | 대상 | 내용 |
|---|---|---|
| KPI별 통과 분석 | 경영진·운영자 | 7 KPI 각각 통과 확률 계산 + 변동 시나리오 + 권장 조치 |
| 시험 진행 안내 | 시험관 | 접속 → 메뉴 → 데이터 선택 → 측정 → 결과 확인 step-by-step |
| raw 증빙 | 감사용 | 3회 연속 sample raw JSON 21건 + docker logs trace + 환경 메타 |