1) 운영의 효과성 테스트 시 발견된 예외사항 평가
운영의 효과성 평가 시 발견된 예외사항의 미비점으로의 분류여부를 판단하는 흐름도를 이용한 적용사례로서 각각의 의사결정 및 근거를 제시함
흐름도 |
의사결정 |
근거 |
Box1. 예외사항이 발생하게 된 원인과 결과를 조사하고 이해한다. 테스트 목적이 충족되었다고 판단하는가? |
예 |
45개의 테스트 결과 예외사항이 1개만 발견됨. 이는 얻고자하는 확신 수준의 허용오류에 포함되는 수준이므로 무시할 수 있는 예외사항임. 추가 고려사항 없음.
|
아니오 |
45개 테스트 결과 예외사항이 3개 발견됨. 이는 얻고자하는 확신 수준의 허용오류를 초과하므로 무시할 수 없는 예외사항임. Bo2에서 추가 고려 필요함.
|
Box2. Box1에서 얻은 정보와 테스트 결과를 고려할 때, 추가적인 테스트가 기 확인된 예외사항이 모집단을 대표하지 않는다는 결론을 뒷받침할 수 있다고 판단되는가? |
아니오 |
테스트 중 3개의 예외사항이 발견됨.
|
발견된 예외사항은 과다한 업무량으로 인한 형식적인 승인으로 인한 것임. 따라서 발견된 예외사항은 구조적인 문제로 인한 것으로 판단하고, 추가적인 테스트가 불필요하다고 결정함. (통제 미비점으로 분류)
|
예 |
테스트 중 3개의 예외사항이 발견됨.
|
발견된 예외사항의 원인이 극히 예외적인 상황(병원에 긴급후송으로 하루간 병가)으로 인한 것으로 판단함. 이에 예외사항이 모집단을 대표하지 않는다고 판단하여 추가적인 테스트가 필요하다고 결정함.
|
Box3. 테스트의 범위를 확대하고 재평가한다. 테스트 목적이 충족되었다고 판단하는가? |
예 |
추가적으로 25개의 테스트를 수행함.(70개 모집단의 3개 예외사항은 9.3%이하의 예외율을 90%신뢰수준으로 달성할 수 있음)
|
추가 테스트 결과 예외사항이 발견되지 않아 총 70개의 표본 중 3개의 예외사항이 발견되어 테스트 목적이 충족되었다고 판단하였음. 즉, 무시할 수 있는 예외사항으로 추가 고려할 필요 없음.
|
아니오 |
추가 테스트 결과 1개의 예외사항을 확인함. 총 70개의 표본 중 4개의 예외사항이 발견되어 테스트 목적이 충족되지 않았다고 판단하였음. 즉, 통제 미비점으로 구분함.
|