가이드 · 검증
요구사항 검증 매트릭스(RVTM): 열, 방법, 실습 예제
이 가이드 듣기(영어 오디오) 29분
요구사항 검증 매트릭스(RVTM)는 모든 요구사항을 어떻게 검증할지, 이를 검증하는 활동, 결과, 증거와 함께 나열합니다. 이 가이드는 열, 검사·분석·시연·시험 중 선택하기, 계획과 결과, 불합격 및 변경된 결과가 나타나는 방식, 마일스톤 전 커버리지 검토를 6U 지구 관측 CubeSat의 RVTM으로 실습하며 다룹니다.
이 페이지의 내용
요구사항 검증 매트릭스란
검증은 시스템이 올바르게 만들어졌는지, 즉 작성된 각 요구사항을 충족하는지 묻습니다. 요구사항 검증 매트릭스는 그 질문에 요구사항별로 답하는 곳입니다. 각 행은 요구사항 하나입니다. 열은 요구사항을 어떻게, 어느 조립 수준에서, 어떤 활동으로 검증할지, 그리고 그 활동에서 무엇이 나왔는지 말합니다. 시스템을 이해관계자 니즈에 대해 확인하는 확인(validation)이 검증과 어떻게 다른지는 검증과 확인을 참조하십시오.
같은 표가 여러 이름으로 불립니다. RVTM(requirements verification traceability matrix)은 요구사항에서 시험으로의 연결을 강조합니다. VCRM(verification cross-reference matrix)은 국방 및 항공우주 프로그램에서 흔하며, 대개 계획 부분인 요구사항, 방법, 수준을 뜻합니다. 검증 매트릭스나 준수 매트릭스는 고객을 위해 행마다 준수 진술을 더하기도 합니다. 내용은 조직마다 조금씩 다르지만 생각은 같습니다. 요구사항마다 한 행이고, 충족을 보여 줄 계획된 방법이 없는 것은 하나도 남기지 않습니다.
ISO/IEC/IEEE 15288은 검증을 검증 조치를 계획하고, 필요한 것을 준비하고, 수행하고, 결과를 기록하는 프로세스로 설명하며, 모든 요구사항이 적어도 하나의 조치로 다뤄지기를 기대합니다. 매트릭스는 그 커버리지의 일반적인 기록입니다. INCOSE Systems Engineering Handbook도 같은 방식으로 다룹니다. 개발 중에는 작업 도구이고 검토 때는 산출물입니다. 매트릭스는 요구사항 추적성의 검증 쪽 끝입니다. 추적성이 요구사항이 어디서 왔고 무엇이 이를 충족하는지 묻는다면, RVTM은 무엇이 이를 증명하는지 묻습니다.
전체에 걸친 실습 예제는 고도 500 km 궤도에서 농경지를 네 개의 분광 밴드로 촬영하는 가상의 6U CubeSat EO-1입니다. 사양서에는 요구사항 32개가 있고, 두 개의 테스트 스위트에 검증 활동 19개가 있으며, 세 번째 스위트에는 이해관계자 니즈에 대한 확인 활동이 있습니다. MBSE 예제 프로젝트 둘러보기가 이해관계자 니즈부터 문서까지 따라가는 것과 같은 프로젝트이므로, 여기의 행을 그에 답하는 기능, 구성 요소, 분석까지 거슬러 추적할 수 있습니다.
누가, 언제 사용하는가
- 요구사항 검토(예: 시스템 요구사항 검토). 검토자는 모든 요구사항에 방법과 수준이 있는지 확인합니다. 아무도 검증 방법을 말할 수 없는 요구사항은 대개 모호하거나 측정할 수 없으며, 검토 때가 이를 다시 쓰는 가장 저렴한 시점입니다.
- 설계 검토. 이제 매트릭스에 테스트 케이스, 분석, 검사가 이름으로 나옵니다. 검토자는 아직 활동이 없는 요구사항과, 아무도 계획하지 않은 시설이나 시험품이 필요한 시험을 찾습니다.
- 시험 준비 검토. 캠페인이 시작되기 전에 매트릭스는 캠페인이 종결할 요구사항과 준비된 절차를 보여 줍니다.
- 인증. 인증은 이를 위해 만든 시험품에서 설계가 흔히 여유를 두고 요구사항을 충족함을 보여 줍니다. 매트릭스는 각 인증 결과와 그 보고서를 나열합니다.
- 인수. 인수는 인도된 각 유닛이 설계대로 만들어지고 작동함을 보여 줍니다. 고객은 증거를 첨부하거나 참조한 매트릭스에 대해 행별로 승인합니다.
- 감사와 공식 인증. 감사자는 행을 골라 증거까지 따라갑니다. 증거 열이 실제로 버전이 관리되는 파일을 가리키는 매트릭스는 이를 통과하지만, 버전 없이 "시험 보고서 참조"라고만 적힌 매트릭스는 통과하지 못합니다.
열
실용적인 매트릭스에는 다음 열이 있습니다. 일부 조직은 이를 나누거나 이름을 바꾸지만, 빼는 경우는 드뭅니다.
| 열 | 내용 | 작성 시점 |
|---|---|---|
| 요구사항 | 식별자와 짧은 이름. 전체 진술은 붙여 넣지 않고 클릭 한 번으로 볼 수 있음 | 요구사항을 작성할 때 |
| 방법 | 검사, 분석, 시연 또는 시험. 필요하면 둘 이상 | 요구사항 분석 |
| 수준 | 검증 위치: 구성 요소, 하위 시스템 또는 시스템(또는 유닛, 조립체, 세그먼트) | 요구사항 분석 |
| 성공 기준 | 충족으로 인정되는 측정 가능한 결과와 조건 | 요구사항 분석 |
| 검증 활동 | 이를 수행하는 테스트 케이스, 분석, 검사 또는 시연 | 설계 |
| 상태 | 미검증, 계획됨, 미실행, 합격 또는 불합격 | 통합 및 시험 |
| 증거 | 결과를 보여 주는 보고서, 데이터 파일 또는 기록과 그 버전, 그리고 실행된 빌드와 시험품 | 통합 및 시험 |
처음 네 열은 계획이고 마지막 세 열은 결과입니다. 두 부분을 분리해 두는 것이 중요합니다. 서로 다른 시점에, 서로 다른 이유로 바뀌기 때문입니다(계획과 결과 참조).
검증 방법 선택
표준 방법은 네 가지입니다. 여기서는 가장 저렴한 것부터 가장 비싼 것 순으로 나열하며, 둘 이상이 가능할 때 대개 이 순서로 선호합니다. 방법은 요구사항을 작성할 때 정하는 것이 가장 좋으며, 요구사항 작성 가이드가 TC-06으로 그 이유를 보여 줍니다.
- 검사
- 항목을 작동시키지 않고 항목이나 그 문서를 살펴보는 것입니다. 치수 측정, 라벨 읽기, 인증서나 도면, 구성 설정 확인 등입니다. 물리적 특징, 표시, 재료, 그리고 "shall have"나 "shall be made of"로 진술된 모든 것에 적합합니다. 다른 곳에서 만든 기록을 검토하는 것도 포함됩니다. EO-1은 3.4 Bus Regulation(12 V, 2% 이내)을 시험을 반복하는 대신 전력 분배 장치의 인증 보고서와 부하 단계 데이터를 검사하여 검증합니다.
- 분석
- 계산, 모델링 또는 시뮬레이션으로 요구사항이 충족됨을 보이는 것이며, 흔히 하위 수준의 시험 데이터를 사용합니다. 실물을 시험하는 것이 불가능하거나 안전하지 않을 때, 또는 분석이 어떤 시험보다 훨씬 많은 경우를 다룰 때 적합합니다. EO-1의 1.7 Mission Lifetime(궤도상 730일)은 신뢰성 분석으로만 보일 수 있고, 1.6.1 Ground Track Repeat는 궤도 전파로 보입니다.
- 시연
- 항목을 작동시켜 무언가를 한다는 것을 보이는 것으로, 관찰은 하지만 정밀 측정용 계측은 하지 않습니다. 결과가 예 또는 아니요인 기능 및 운용 요구사항에 적합합니다. EO-1의 6.1 Contact Scheduling(48시간 전에 교신 예약)은 운용팀이 14일간의 리허설을 수행하는 것으로 보입니다.
- 시험
- 통제된 조건에서 항목을 작동시키고 결과를 수치와 비교해 측정하는 것입니다. 2.1 Pointing Accuracy(목표의 0.1도 이내)처럼 값과 허용 오차가 있는 성능 요구사항에 적합합니다. 시험은 가장 강력한 증거를 만들며 대개 비용이 가장 많이 듭니다.
선택을 정하는 몇 가지 질문:
- 요구사항에 수치가 있습니까? 그렇다면 대개 시험이나 분석이 필요합니다. 시연으로는 "0.1도 이내"를 보일 수 없습니다.
- 조건을 재현할 수 있습니까? 궤도상 2년이나 실제 밭 위의 천저 외 25도 패스는 실험실에서 연출할 수 없습니다. 이런 것은 실험실이 도달할 수 있는 지점의 시험으로 뒷받침하는 분석으로 갑니다.
- 어느 수준에서 볼 수 있습니까? 배터리 용량은 배터리 팩(구성 요소 수준)에서 시험할 수 있고, 지향 정확도에는 자세 하위 시스템이 필요하며, 72시간 재방문은 임무 전체에만 존재합니다. 각 요구사항은 그 특성이 온전히 나타나는 가장 낮은 수준에서 검증합니다.
- 고객은 무엇을 받아들입니까? 계약은 흔히 핵심 요구사항의 방법을 고정합니다. 인수 때가 아니라 일찍 합의하십시오.
성공 기준도 동시에 작성합니다. "요구사항을 충족함"은 기준이 아닙니다. "명령한 목표 20개 각각에 대해 오차 최대 0.1도"는 기준입니다. 누구나 실행해서 같은 판정에 이를 수 있습니다.
계획과 결과
매트릭스의 계획 부분은 요구사항 분석과 설계 중에 정해집니다. "어떻게 알 것인가?"에 답하며, 하드웨어가 존재하기 훨씬 전에 완성되어 있어야 합니다. 요구사항 검토 시점에 방법이 없는 요구사항은 시험 프로그램의 공백이 아니라 요구사항 집합의 결함입니다.
결과 부분은 통합 및 시험 중에 채워집니다. 활동을 실행할 때마다 바뀌며, 무엇을 시험했는지와 함께일 때만 의미가 있습니다. 빌드나 소프트웨어 버전, 시험품의 일련번호, 날짜, 담당자입니다. 빌드와 시험품이 없는 결과는 반복하거나 감사할 수 없고, 어느 빌드가 불합격을 고쳤는지 알려 주지 못합니다.
두 가지 습관이 두 부분을 정직하게 유지합니다.
- 증거 한 줄마다 활동 하나. 분석 보고서, 검사 기록, 시연은 테스트 케이스와 마찬가지로 검증 활동입니다. 각각에 결과가 있는 별도 항목을 두면, 매트릭스가 시험뿐 아니라 모든 방법에 대한 증거를 보여 줍니다.
- 말단을 검증하고 상위는 합산합니다. 하위 요구사항으로 분해된 상위 요구사항은 모든 하위 요구사항이 검증되거나 자체 활동이 있을 때 검증됩니다. 합산하면 상위 요구사항에 대한 중복 시험 계획을 피하고, 어느 가지가 발목을 잡고 있는지 바로 보입니다.
상태 값과 합산
다섯 가지 상태 값이 행의 일생을 다룹니다.
| 상태 | 의미 | 할 일 |
|---|---|---|
| 미검증 | 방법도 활동도 없음 | 계획하거나, 요구사항에 의문을 제기함 |
| 계획만 | 방법은 정해졌지만 활동이 아직 없음 | 테스트 케이스, 분석 또는 검사를 작성함 |
| 미실행 | 활동은 있지만 결과가 있는 것이 없음 | 일정을 잡음 |
| 합격 | 활동이 합격했고 불합격한 것은 없음 | 증거를 빌드 및 시험품과 함께 보관함 |
| 불합격 | 활동이 불합격함 | 이슈를 제기하고, 수정하고, 다시 실행함 |
검증 활동에는 더 세분화된 자체 상태가 있습니다. 미실행, 진행 중, 차단됨, 불합격, 합격입니다. 매트릭스에서는 진행 중이거나 차단된 활동은 아직 판정이 없으므로, 그 요구사항은 미실행으로 셉니다.
상위 요구사항은 그 아래 어디에서든 불합격이 있으면 불합격이 되고, 모든 하위 요구사항이 합격할 때(또는 자체 활동이 합격할 때)만 합격합니다. 그 외에는 가장 덜 다뤄진 가지가 어디까지 왔는지를 보여 줍니다. 상태별로 행을 세면 대부분의 검토가 가장 먼저 묻는 숫자 하나가 나옵니다. 전체 요구사항 중 몇 개가 검증되었는가입니다.
모델에서 생성된 상태로 유지
대부분의 매트릭스는 스프레드시트로 시작하고, 대부분의 스프레드시트는 어긋납니다. 요구사항 문장을 붙여 넣으면 요구사항이 바뀔 때 낡게 됩니다. 시험 상태는 실행 후마다 기억하는 사람이 손으로 입력합니다. 검토 전에 두 사본이 돌아다니고, 고객이 어느 쪽을 봤는지 아무도 확신하지 못합니다. 이 중 어느 것도 부주의 때문이 아닙니다. 스프레드시트는 사본이고, 사본은 갈라집니다.
대안은 매트릭스의 내용을 이미 있는 곳에 두고 거기서 표를 생성하는 것입니다.
- 방법, 수준, 성공 기준은 요구사항의 속성입니다.
- 각 검증 활동은 그것이 검증하는 요구사항에 연결된 항목입니다.
- 각 결과는 빌드, 시험품, 증거와 함께 활동이 실행될 때 그 활동에 기록됩니다.
- 매트릭스는 이 연결에 대한 쿼리이며, 열거나 내보낼 때마다 다시 만들어집니다.
그러면 매트릭스는 자체 데이터가 없으므로 요구사항이나 시험 기록과 어긋날 수 없습니다. 검토용으로 내보낸 사본은 여전히 스냅샷이지만, 손으로 관리하는 대신 현재 모델에서 몇 초 만에 만들어집니다. 이는 요구사항, 설계, 검증을 하나의 모델에 두는 가장 분명한 이점 중 하나이며, 검증 기능 페이지가 Holarch에서 이를 어떻게 하는지 설명합니다.
불합격 및 변경된 결과가 나타나는 방식
완료된 것처럼 보이던 행을 틀리게 만드는 변경은 두 종류입니다.
불합격 결과
불합격은 부끄러운 일이 아니라 정보이며, 매트릭스는 이를 분명히 보여 주어야 합니다. 불합격한 활동은 다시 실행될 때까지 불합격 상태로 남으며, 조용히 재설정되지 않습니다. 각 불합격에는 활동과 그 활동이 검증하는 요구사항에 연결된 이슈(문제 보고서 또는 불일치 보고서)가 생기므로, 매트릭스의 행이 조사로 이어집니다. 수정이 나오면 활동을 새 빌드에서 다시 실행하고, 기록은 두 실행을 모두 남깁니다. 이전 빌드의 불합격과 새 빌드의 합격입니다. 각 시험 캠페인의 결과를 스냅샷(흔히 테스트 주기라고 함)으로 저장하면 캠페인을 비교하고 정확히 어느 행이 바뀌었는지 볼 수 있습니다.
변경된 요구사항
더 조용한 문제는 시험이 합격한 후에 바뀌는 요구사항입니다. 전력 요구사항이 28 W에서 30 W로 오르면 이전 합격은 새 값에 대해 아무것도 증명하지 못하지만, 상태 열은 여전히 "합격"이라고 말합니다. 좋은 매트릭스는 변경된 요구사항과 그 검증 활동 사이의 연결을 누군가 검토할 때까지 의심 상태로 표시합니다. 활동이 이미 새 값을 다루거나, 절차를 바꾸고 활동을 다시 실행해야 합니다. 요구사항의 상위에서 무언가가 바뀔 때도 마찬가지입니다. 의심 연결 일반은 추적성 가이드의 의심 연결 섹션에서 다룹니다. 검증에 대한 규칙은 짧습니다. 요구사항이 마지막으로 바뀌기 전에 기록된 합격은 마일스톤에서 인정되기 전에 검토가 필요합니다. 변경 영향 분석 가이드는 같은 변경을 변경 요청부터 재시험까지 따라갑니다.
마일스톤 전 커버리지 검토
검토 일주일 전에 다음 질문으로 매트릭스를 훑어봅니다.
- 미검증 행. 모든 요구사항에는 적어도 방법이 있어야 합니다. 방법이 없는 행은 계획이 빠졌거나, 작성된 그대로는 검증할 수 없는 것입니다.
- 계획만 있는 행. 설계 검토에서는 각각 활동이 있거나 아직 없는 이유가 있어야 합니다. 인수 시점에는 하나도 남아 있으면 안 됩니다.
- 불합격 행. 각각 담당자와 계획이 있는 연결된 이슈가 필요합니다. 이슈가 없는 불합격은 시험 검토에서 가장 흔한 발견 사항입니다.
- 의심 행. 각각 결정이 필요합니다. 여전히 유효한지, 다시 실행할지입니다.
- 수준과 방법의 타당성. 구성 요소 시험으로만 검증되는 시스템 수준 요구사항, 시연으로만 검증되는 수치 요구사항, 절차가 요구사항이 진술하는 것을 측정하지 않는 활동을 찾습니다.
- 증거. 합격한 행 몇 개를 표본 점검합니다. 증거가 존재합니까? 그 빌드와 시험품이 검토 대상과 일치합니까?
- 고아 활동. 어떤 요구사항도 검증하지 않는 테스트 케이스는 돈이 들면서 기록상 아무것도 증명하지 않습니다. 연결하거나 폐기합니다.
마일스톤마다 상태별 개수를 기록합니다. 추세(미검증 감소, 합격 증가, 불합격 해소)가 어떤 단일 스냅샷보다 프로그램의 건전성을 더 잘 말해 줍니다.
실습 예제: EO-1 CubeSat RVTM
예제는 Holarch의 CubeSat EO-1 데모 프로젝트입니다. 요구사항은 SRS-001 EO-1 System Requirements Specification에 있고, 검증 활동은 두 Test Suite의 Test Case이며, 각 테스트 케이스는 해당 요구사항을 verifies합니다(세 번째 스위트 TS-3 Mission Validation은 이해관계자 니즈를 확인하며 RVTM에는 포함되지 않습니다). 이 가이드를 위해 데모에 변경 하나를 추가했습니다. MBSE 예제의 변경 단계와 같은 변경입니다. 예비 설계 검토 후 궤도 평균 부하가 26 W로 늘어, 요구사항 3.1 Orbit Average Power를 28 W에서 30 W로 올렸습니다.
예제 다운로드: EO-1 요구사항 검증 매트릭스 Excel 통합 문서(.xlsx, 32행) 또는 같은 매트릭스의 CSV. 둘 다 아래 프로젝트를 Holarch 자체 RVTM 내보내기로 만든 것입니다. 요구사항 번호와 이름, 방법, 수준, 성공 기준, 검증 테스트 케이스와 그 상태, 자체 상태, 합산 상태가 있습니다. 자신의 열을 위한 템플릿으로 사용하십시오.
계획
방법과 수준마다 하나씩 고른 행이며, 성공 기준은 사양서에 작성된 대로입니다.
| # | 요구사항 | 방법 | 수준 | 성공 기준 |
|---|---|---|---|---|
| 1.2 | Ground Sample Distance: 500 km 궤도에서 4.5 m | 시험 | 시스템 | 4 m 막대 표적에서 나이퀴스트 MTF 0.12 이상 |
| 1.6.1 | Ground Track Repeat: 3일마다 | 분석 | 시스템 | 궤도 전파가 3일 ± 1시간의 반복을 보임 |
| 2.1 | Pointing Accuracy: 0.1도 이내 | 시험 | 하위 시스템 | 명령한 목표 20개 각각에 대해 오차 최대 0.1도 |
| 3.1 | Orbit Average Power: 수명 종료 시 30 W 이상(이전 28 W) | 시험 | 하위 시스템 | 측정한 최대 전력에서 예측한 수명 종료 시 궤도 평균 전력 |
| 3.2 | Battery Capacity: 수명 초기 77 Wh 이상 | 시험 | 구성 요소 | C/2, 20 °C에서 측정 용량 77 Wh 이상 |
| 3.4 | Bus Regulation: 12 V, 2% 이내 | 검사 | 구성 요소 | 모든 부하 단계에서 버스 전압 11.76–12.24 V |
| 6.1 | Contact Scheduling: 48시간 전 | 시연 | 시스템 | 리허설에서 14일 연속으로 48시간 전에 교신 예약 |
| 6.5 | Planning Cycle Time: 100분 이내 | 분석 | 시스템 | Monte Carlo 시뮬레이션에서 90% 이상의 확률로 100분 충족 |
| 2.5 | Safe Mode Recovery: "quickly … as appropriate" | (없음) | (없음) | (없음) |
네 가지 방법이 모두 세 수준에서 나타납니다. 배터리 용량은 특성이 팩에 온전히 존재하므로 팩만으로 시험합니다. 지향 정확도에는 공기 베어링 테이블 위의 자세 하위 시스템이 필요합니다. 지상 궤적 반복은 궤도의 특성이므로 분석으로 갑니다. 6.5는 운용 타임라인의 확률적 분석으로 검증되며, Monte Carlo 가이드가 그런 검사를 단계별로 설명합니다. 3.1의 기준은 측정에서 나온 예측입니다. 시험은 어레이의 최대 전력을 측정하고, 전력 예산의 방정식이 이를 궤도 평균 수치로 바꿉니다. 2.5는 작성된 그대로는 검증할 수 없으므로 방법이 없습니다.
결과와 시험 캠페인
검증 테스트 케이스 19개는 두 스위트에 있습니다. TS-1 Spacecraft Qualification Tests(광학 벤치 시험부터 분석까지 테스트 케이스 15개)와 TS-2 Communications and Ground Tests(4개)입니다. 세 번째 스위트 TS-3 Mission Validation에는 VAL-01~VAL-03이 있는데, 이는 요구사항이 아니라 이해관계자 니즈를 검증하므로 RVTM에서 제외됩니다(검증과 확인 참조). 기록된 각 결과에는 시험자, 날짜, 빌드(비행 소프트웨어 버전), 시험품(하드웨어 일련번호), 그리고 있는 경우 증거 파일이 담깁니다.
TC-04 Pointing Accuracy Test는 불합격했습니다. 비행 소프트웨어 2.3.1로 한 두 번째 실행에서 목표 20개 중 세 개가 0.1도를 벗어났고, 가장 큰 것은 0.14도였으며, 휠 마찰이 의심됩니다. 이 불합격에는 테스트 케이스에 연결되고 이를 통해 요구사항 2.1과 2.2에 연결된 이슈가 있습니다. TC-09 Safe Mode Entry Test도 같은 방식으로 불합격했으며(10초 기준에 14초) 자체 이슈가 있습니다. 두 테스트 케이스 TC-11 UHF Command Test와 TC-17 Slew Time Analysis는 진행 중이며, 매트릭스에서는 판정이 나올 때까지 미실행으로 셉니다.
flatsat 캠페인은 두 번 실행되었고, 각 캠페인의 결과는 테스트 주기로 저장되었습니다. 둘을 비교하면 두 번째 캠페인이 무엇을 바꿨는지 보입니다.
- Flatsat Cycle 1: 9개 중 5개 합격. TC-03과 TC-06은 실행되지 않았고, TC-04(목표 5개에서 0.16도)와 TC-09(15초)는 불합격했습니다.
- Flatsat Cycle 2: 11개 중 8개 합격. TC-03과 TC-06은 합격했고, 분석 TC-13이 추가되어 합격했으며, TC-14는 추가되었지만 실행되지 않았습니다. TC-04와 TC-09는 개선되었지만(목표 3개에서 0.14도, 14초) 여전히 불합격입니다.
"개선되었지만 여전히 불합격"은 상태 열이 숨기고 주기 비교가 보존하는 바로 그것입니다. 캠페인 사이의 수정이 수치를 올바른 방향으로 움직였지만, 어느 쪽도 종결되지 않았습니다.
매트릭스 읽기
매트릭스는 위의 요구사항과 테스트 케이스에서 생성되며, 표에 직접 입력한 것은 하나도 없습니다. 카드는 합산 상태별로 행을 세며, 다섯 개수를 더하면 요구사항 32개가 됩니다. 합격 11, 불합격 3, 미실행 12, 계획만 3, 미검증 3입니다. 검토 위원회가 읽듯이 읽어 보면 다음과 같습니다.
- 32개 중 11개 검증(34%). 시험(1.2, 3.2), 분석(1.6.1, 1.7), 검사(3.4)로 합격했습니다. 시연은 아직 합격한 것이 없습니다. 세 개(5.4, 6.1, 6.2) 모두 TS-2의 지상 세그먼트 리허설을 기다립니다.
- 2.1과 2.2는 하나의 시험으로 불합격했습니다. TC-04가 둘 다 검증하므로 불합격 하나가 두 행을 불합격시킵니다. 자세히 보면 2.2 Pointing Stability에는 두 번째 문제가 있습니다. 기준은 각 40초 촬영 동안의 드리프트인데, TC-04는 각 목표에서의 지향 오차만 측정합니다. TC-04가 합격해도 2.2의 충족을 보여 주지 못합니다. 이는 방법 타당성 발견 사항입니다. 2.2에는 자체 측정이 필요하거나, TC-04의 절차가 드리프트를 기록해야 합니다.
- 4.3 불합격: TC-09 때문입니다. 이슈와, 워치독 폴링 빈도를 높이고 TC-09를 다시 실행하는 작업이 기록되어 있습니다. 이 행은 TC-09가 새 소프트웨어에서 합격할 때까지 불합격으로 남습니다.
- 1.6 Revisit Time은 합산됩니다. 자체로는 계획만 있지만(분석, 활동 없음), 두 하위 요구사항이 결정합니다. 1.6.1은 합격했고 1.6.2 Off-Nadir Imaging은 미실행이므로 1.6은 미실행으로 표시됩니다. 두 하위 요구사항이 모두 합격하면 상위에 대한 별도 시험은 필요 없습니다.
- 계획만: 1.5, 4.4, 6.5. 각각 방법은 있고 활동은 없습니다. 4.4 Downlink Encryption은 수준도 기준도 없으므로 계획이 끝나지 않았습니다.
- 미검증: 2.5, 3.5, 6.4. 방법도 활동도 없습니다. 이것들은 사양서에서 가장 약한 요구사항 세 개이기도 합니다("quickly … as appropriate", "warm enough (TBD)", "user friendly and/or easy to use"). 매트릭스의 공백은 빠진 시험보다는 다시 써야 할 요구사항을 가리키는 경향이 있습니다.
- 3.1은 의심 상태입니다. 다음 섹션을 참조하십시오.
변경된 요구사항: PDR 이후의 3.1
TC-06 Solar Array Power Test는 합격했습니다. 예상 결과는 최대 72 W 이상이었고 어레이는 75.1 W를 냈습니다. 그 후 3.1이 28 W에서 30 W로 올라갔습니다. TC-06이 실제로 합격했으므로 상태 열은 여전히 합격입니다. 요구사항과 TC-06 뒤의 ⚠는 합격이 요구사항보다 오래되었다는 뜻입니다. 이를 클릭하면 변경으로 의심 상태가 된 3.1의 모든 연결이 나열됩니다.
검증 연결에 대한 질문은 구체적입니다. 측정된 최대 전력 75.1 W가 여전히 궤도 평균 30 W를 보여 줍니까? 전력 예산이 답합니다. 그 방정식 EQ-1.3은 궤도의 일조 비율(0.62)과 전력 경로 효율(0.6)로 최대 전력을 궤도 평균 전력으로 바꿉니다.
| 최대 전력 | 궤도 평균(× 0.62 × 0.6) | 의미 |
|---|---|---|
| 72.0 W | 26.8 W | TC-06의 예상 결과 |
| 75.1 W | 27.9 W | TC-06의 측정 결과 |
| 75.3 W | 28.0 W | 이전 3.1에 필요한 값 |
| 80.6 W | 30.0 W | 새 3.1에 필요한 값 |
따라서 합격을 이어받을 수 없습니다. 30 W를 보이려면 어레이의 최대 전력이 약 80.6 W여야 하는데, TC-06은 수명 말기 열화가 생기기 전인 수명 초기에 인증용 패널에서 75.1 W를 측정했습니다. 검토는 변경이 드러낸 더 오래된 문제도 찾아냅니다. TC-06의 72 W 임계값은 궤도 평균 26.8 W에 불과하므로, 28 W에 대해서도 시험의 예상 결과는 전력 예산을 통해 요구사항에서 도출된 것이 아니었습니다. 올바른 결과는 연결을 의심 상태로 두고, 이슈를 제기하고, TC-06의 예상 결과를 방정식으로 수정하고(그리고 어레이와 여유 중 무엇을 바꿀지 전력 엔지니어와 결정하고), 다시 실행하는 것입니다. 의심 표시는 그 결정이 기록될 때까지 남으므로, 아무도 이전의 "합격"을 30 W에 대한 증거로 읽지 않습니다.
내보낸 매트릭스에는 검증 결과만 있고 의심 표시는 없습니다. 다운로드한 통합 문서에서 3.1은 합격으로 나옵니다. 마일스톤용 사본을 내보내기 전에 모델에서 의심 행을 검토하십시오.
검토 전에 남은 행 계획하기
커버리지 목록은 아직 검증되지 않은 21개 행(32 빼기 11)을 계획을 마무리하는 컨트롤과 함께 보여 줍니다. 상세 설계 검토 전에 이 목록이 제시하는 작업은 다음과 같습니다.
- 2.5, 3.5, 6.4를 검증할 수 있게 다시 쓴 다음, 각각에 방법, 수준, 기준을 줍니다.
- 4.4에 수준과 기준을 주고 이에 대한 검사를 만듭니다. 1.5와 6.5에 대한 분석을 만듭니다.
- 불합격을 종결합니다. TC-04는 휠 조사 후, TC-09는 워치독 변경 후이며, 2.2의 드리프트는 따로 측정합니다.
- 3.1을 결정합니다. TC-06을 30 W에 맞춰 수정하고 다시 실행합니다.
- 미실행 활동의 일정을 잡습니다. TC-19 Array Deployment Test와 TS-2 활동 네 개부터 시작하며, 이들이 합쳐서 요구사항 여덟 개를 검증합니다.
검토마다 개수(여기서는 합격 11, 불합격 3, 미실행 12, 계획만 3, 미검증 3)를 기록하면 다음 검토가 비교할 추세가 생깁니다.
제품 라인의 제품마다 매트릭스 하나
이 가이드에서 "빌드"는 시험이 실행된 대상, 즉 소프트웨어 버전과 시험품의 일련번호를 뜻합니다. 제품 라인은 다른 개념입니다. EO-1 Flight와 더 저렴한 EO-1 Lite처럼 여러 제품을 하나의 모델에 두며, 각각이 제품 구성입니다. 요구사항은 겹치지만 같지 않으며, 한 제품의 합격이 다른 제품을 검증하지 않습니다. EO-1 Lite는 S 밴드 무선기를 탑재하므로, EO-1 Flight에서 합격한 X 밴드 링크 시험은 이에 대해 아무것도 말해 주지 않습니다.
그래서 매트릭스는 제품별로 읽어야 합니다. Holarch에서 보기 기준 ▾에서 제품 구성을 선택하면, RVTM은 그 구성의 요구사항과 그 구성에 대해 기록된 결과만 보여 주므로 "검증됨"은 그 제품에 대해 검증되었다는 뜻이고, 내보내기에도 구성 이름이 들어갑니다. 모든 구성은 구성마다 합산 상태 열을 하나씩 추가하며, 요구사항이 그 구성에 속하지 않으면 "—"로 표시합니다. 구성 보기에서 스위트 실행을 하면 결과가 그 구성의 결과로 기록되고 구성 / 빌드 필드에 제품 이름이 채워집니다. 빌드와 시험품도 여전히 기록해 둘 가치가 있습니다. 제품 라인에는 Individual 또는 Team 요금제가 필요합니다. 제품 라인: RVTM과 제품 라인 엔지니어링 가이드를 참조하십시오.
흔한 실수
- 요구사항을 성공 기준으로 다시 말하기. "ADCS는 0.1도 이내로 지향한다"는 목표가 몇 개인지, 어떤 조건에서인지, 무엇을 기준으로 하는지 아무것도 말하지 않습니다.
- 요구사항에서 도출하지 않은 시험 임계값. 시험의 예상 결과는 둘을 연결하는 분석을 거쳐 요구사항에서 나와야 하는데, TC-06의 72 W는 그렇지 않았습니다. 요구사항이 바뀔 때가 아니라 시험을 작성할 때 계산을 확인하십시오.
- 각각을 측정하지 않고 여러 요구사항에 시험 하나. 시험을 공유하는 것은 효율적이지만, 절차가 연결된 요구사항이 진술하는 모든 양을 기록할 때만 그렇습니다.
- 상위 요구사항을 직접 검증하기. 하위 요구사항의 시험을 반복할 뿐인 상위 요구사항 시험을 작성하면 작업과 서류가 두 배가 됩니다. 말단을 검증하고 상위는 합산되게 하십시오.
- 증거 없는 분석. 분석은 검증 활동이며, 다른 시험과 마찬가지로 보고서, 버전, 판정이 필요합니다.
- 일반적인 "related" 연결로 시험을 요구사항에 연결하기. 매트릭스는 검증 연결만 세므로, 다른 방식으로 연결된 시험은 요구사항을 미검증처럼 보이게 둡니다.
- 매트릭스를 정리하려고 불합격을 "미실행"으로 재설정하기. 불합격과 그 이슈를 유지하십시오. 감사자가 요구하는 것은 그 이력입니다.
- 인수 시점에 의심 행 무시하기. 검증한다고 주장하는 요구사항보다 먼저 기록된 합격은 현재 요구사항에 대한 증거가 아닙니다.
Holarch에서 해 보기
- EO-1 프로젝트를 만듭니다. 프로젝트 관리 → 프로젝트 파일 ▾ → 새 데모 프로젝트 → CubeSat(안내형 시스템 엔지니어링). 또는 요구사항 문서의 자체 요구사항에서 시작합니다. 요구사항을 참조하십시오.
- 검증 → 테스트 센터를 엽니다. 검증 커버리지에서 A, D, I, T로 각 요구사항의 방법을 설정하고, 수준…에서 수준을 선택하고, + 기준으로 성공 기준을 추가합니다.
- + 새로 만들기 ▾와 + 테스트 케이스로 테스트 스위트와 테스트 케이스를 만들고, Verifies 열의 +로 각 테스트 케이스를 요구사항에 연결합니다. 분석, 검사, 시연도 테스트 케이스입니다.
- 상태 버튼으로 결과를 기록하거나, 스위트 실행으로 캠페인을 진행합니다. 스위트 실행은 실행마다 시험자, 빌드(구성 / 빌드 필드), 시험품, 증거 파일을 기록합니다. 불합격 후에는 + Issue 만들기를 클릭합니다.
- 새 주기 시작…으로 캠페인을 저장하고, 스위트의 ⋯ → 테스트 주기…에서 캠페인을 비교합니다.
- 검증 → RVTM을 엽니다. 상태 카드를 클릭하면 행이 필터링됩니다. 의심 표시를 보려면 요구사항 3.1의 문장을 바꾼 다음 옆의 ⚠를 클릭합니다.
- 내보내기 ▾를 클릭하여 Excel (.xlsx), CSV 또는 Word (.docx)를 받습니다. 위의 다운로드 가능한 예제가 그 내보내기입니다.
전체 참조는 검증에 있습니다.
다음에 읽을 내용
- Holarch의 검증: 하나의 모델에서 테스트 케이스, 증거가 있는 실행, 테스트 주기, RVTM.
- 검증 문서: 계획 속성, 상태 규칙, 실행 모드, 테스트 주기, RVTM 참조.
- 요구사항 문서: 요구사항 작성과 승인, 그리고 검토할 연결 페이지.