본문으로 건너뛰기
고급약 7시간 (예상)

시험성적서 작성 실무

시험성적서를 읽는 쪽에서 쓰는 쪽으로 넘어간다. 의뢰 범위와 제외 범위를 먼저 명문화하는 법, 하드웨어·소프트웨어·네트워크·데이터·시점 다섯 축으로 환경을 기재해 재현 가능하게 만드는 법, 판정을 '기준값+측정 방식+결정 규칙'으로 선언하는 법(단순 수용과 가드밴드), 성능 결과를 평균이 아니라 백분위와 분포로 제시하는 법(coordinated omission 포함), 그리고 성적서가 계약·조달·분쟁에서 갖는 실제 효력과 오류 발견 시 개정·재발행 절차, 마지막으로 발주처가 양식을 정하는 SI 납품 성적서를 지정 양식 + 표준 별첨 두 층으로 맞추는 법까지 다룬다.

★ 성적서가 주장하는 것은 결과가 아니라 재현 가능성이다 — 범위·환경·결정 규칙이 없으면 숫자는 검증 불가능한 주장이 된다.

학습 목표

이 모듈 한 줄 요약 — "읽는 쪽에서 쓰는 쪽으로". 지금까지 성적서는 받아 보는 문서였다. 여기서는 직접 쓴다. 어디까지 시험했고 어디는 안 했는지, 어떤 환경에서 쟀는지, 무엇을 기준으로 합격이라 했는지 — 남이 그대로 재현할 수 있게 적는 기술을 다룬다. 이 문서가 나중에 계약 분쟁의 증거가 된다.

이 모듈을 마치면 시험성적서를 읽는 사람에서 쓰는 사람 으로 넘어간다. 의뢰가 들어왔을 때 시험 범위를 정의하고 제외 범위를 먼저 명문화하는 법, 시험 환경과 구성을 제3자가 재현할 수 있는 수준으로 기재하는 법, 판정 기준을 측정불확도까지 감안한 결정 규칙(decision rule)으로 선언하는 법, 성능·부하 결과를 평균 하나가 아니라 분포로 제시하는 법을 익힌다. 나아가 발급된 성적서가 계약과 분쟁에서 실제로 어디까지 버티는지, 오류가 발견됐을 때 정정·재발행 절차가 어떻게 돌아가는지까지 다룬다.

모듈 25가 "어떤 증명 수단이 있는가"의 지도라면, 이 모듈은 그 증명 수단을 직접 문서로 만들어내는 작업대 다.

완료 후 할 수 있는 것

  • 의뢰 범위(scope)와 제외 범위(exclusion)를 구분해 시험 계획서에 명문화하고, 범위 밖 요구가 들어왔을 때 계약서를 근거로 협의할 수 있다
  • ISO/IEC/IEEE 29119-3의 시험 계획 항목을 성적서 발급을 전제로 한 형태로 축약해 쓸 수 있다
  • 시험 환경·구성을 하드웨어·소프트웨어·네트워크·데이터·시점 다섯 축으로 기재해, 6개월 뒤 다른 사람이 같은 결과를 재현할 수 있게 만든다
  • 판정 기준을 "기준값 + 측정불확도 처리 방식 + 결정 규칙"의 세 요소로 선언하고, 단순 수용과 가드밴드 방식의 차이를 설명할 수 있다
  • 성능·부하 결과를 백분위·분포·반복 측정으로 제시하고, coordinated omission 같은 측정 편향을 성적서에 어떻게 밝힐지 판단할 수 있다
  • 일반·KOLAS·GS 성적서가 계약 검수와 분쟁에서 갖는 효력의 차이를 설명하고, 유효기간과 책임 범위를 문구로 방어할 수 있다
  • 성적서 오류를 발견했을 때 정정본·추가본·재발행 중 무엇을 택할지 판단하고, ISO/IEC 17025가 요구하는 불만·부적합 처리 절차를 따라갈 수 있다

채용시장에서의 위치

시험인증기관(TTA·KTL·KTC·KOLAS 인정 시험소)의 시험원 직무와, 발주처· SI 쪽에서 성적서를 받아서 검증하는 품질 담당 직무가 이 모듈의 직접 수요처다. 두 자리 모두 공고에 "시험성적서 작성 경험", "공인시험 대응 경험" 이라고 적히지만, 실제로 묻는 것은 규격 번호가 아니라 "당신이 쓴 문서가 6개월 뒤 분쟁에서 버틸 수 있는가" 다.

이 능력은 시험기관 바깥에서도 값이 붙는다. 정부 R&D 과제의 정량 목표 증빙, 공공 조달 성능 증빙, 대기업 납품 검수 — 성적서가 개입하는 순간 그 문서를 누가 설계했느냐가 일정과 비용을 가른다. 범위를 좁게 못 박아둔 계획서 한 장이 재시험 두 바퀴를 없애는 장면은 이 업계에서 흔하다.

반대로 이 문서를 못 쓰면 생기는 일도 분명하다. 범위가 모호한 성적서는 발주처가 "우리가 요구한 건 이게 아니다"라고 말할 여지를 남기고, 환경 기재가 부실한 성적서는 재현 요구 앞에서 무너진다. 면접에서 힘을 갖는 답변은 "성적서를 발급했다"가 아니라 "성적서에 무엇을 적지 않기로 했고 그 근거가 무엇이었는지" 를 말할 수 있는 쪽이다.

레슨 (7개)

  1. 중급약 25분

    의뢰 범위 정의와 시험 계획서 — 무엇을 시험하지 않을 것인지 먼저 적는다

    성적서 분쟁의 대부분은 결과가 틀려서가 아니라 범위가 모호해서 생긴다. 시험 계획서에서 제외 범위를 먼저 명문화하는 법과, ISO/IEC 17025가 의뢰 검토 단계에 요구하는 것을 다룬다.

  2. 중급약 25분

    시험 환경·구성 기재 — 재현 가능해야 성적서다

    같은 제품을 같은 방법으로 시험해도 환경이 다르면 결과가 다르다. 하드웨어·소프트웨어·네트워크·데이터·시점 다섯 축으로 환경을 기재해 제3자가 재현할 수 있는 성적서를 만드는 법.

  3. 고급약 30분

    판정 기준 명시와 합부 판정 — 결정 규칙을 선언하지 않은 적합은 의견일 뿐이다

    기준값 1.5초에 측정값 1.49초가 나오면 적합인가. 측정불확도를 어떻게 처리할지 정하지 않으면 답할 수 없다. ISO/IEC 17025가 요구하는 결정 규칙(decision rule)과 가드밴드를 소프트웨어 시험에 옮긴다.

  4. 고급약 30분

    성능·부하 결과의 통계적 표현 — 평균만 적으면 안 되는 이유

    평균 응답시간 0.8초짜리 시스템에서 사용자 20명 중 1명이 5초를 기다리고 있을 수 있다. 백분위·분포·반복 측정으로 성능 결과를 성적서에 적는 법과, 측정 자체를 왜곡하는 coordinated omission을 다룬다.

  5. 고급약 25분

    성적서 종류별 법적 효력 — 계약과 분쟁에서 어디까지 버티는가

    일반·KOLAS·GS의 제도적 차이는 모듈 25에서 봤다. 이 레슨은 그 뒤를 잇는다 — 각 성적서가 계약 검수·조달 심사·분쟁에서 실제로 갖는 힘, 유효기간, 책임 범위, 그리고 어느 기관에 맡길 것인가의 판단.

  6. 고급약 25분

    성적서 오류·클레임 대응과 재발행 절차

    발급한 성적서에서 오류가 발견됐다. 조용히 고쳐 다시 보내는 것이 가장 나쁜 선택이다. ISO/IEC 17025의 부적합 업무·불만 처리·성적서 개정 절차를 따라 수습하는 법.

  7. 고급약 30분

    SI 납품용 성적서 템플릿 — 발주처가 정한 형식에 맞추기

    의뢰 기반 성적서는 시험기관이 양식을 정하지만, SI 납품 성적서는 발주처가 양식을 정한다. 발주 문서에서 성적서 요구를 캐내고, 우리 시험 결과를 발주처 양식에 손실 없이 옮기고, 증빙 첨부 체계와 서명·제출 형태까지 맞추는 템플릿을 설계한다. 양식이 주어지지 않았을 때 먼저 제안하는 방법도 다룬다.