ガイド · 検証
要求検証マトリックス(RVTM):列、手法、実践例
このガイドを聴く(英語音声) 29 min
要求検証マトリックス(RVTM)は、すべての要求を、それをどう検証するか、検証するイベント、結果、エビデンスとともに一覧します。このガイドでは、列、検査・解析・実証・テストの選び方、計画と結果、不合格や変更された結果の表れ方、マイルストーン前のカバレッジレビューを、6U 地球観測 CubeSat の RVTM で実践しながら扱います。
このページの内容
要求検証マトリックスとは
検証は、システムが正しく作られたかどうか、つまり書かれたとおりに各要求を満たしているかを問います。要求検証マトリックスは、その問いに要求ごとに答える場所です。各行が一つの要求です。列は、それをどう検証するか、どの組立レベルで、どのイベントによって行うか、そしてそのイベントから何が得られたかを示します。代わりにステークホルダーニーズに照らしてシステムを確認する妥当性確認と検証との違いについては、検証と妥当性確認を参照してください。
同じ表にはいくつかの呼び名があります。RVTM(requirements verification traceability matrix)は要求からテストへのリンクを強調します。VCRM(verification cross-reference matrix)は防衛や航空宇宙のプログラムで一般的で、計画の部分、つまり要求、方法、レベルを指すことがよくあります。検証マトリックスやコンプライアンスマトリックスは、顧客向けに行ごとの適合性の記述を加えることがあります。内容は組織によって少しずつ異なりますが、考え方は同じです。要求ごとに一行とし、満たされていることを示す方法が計画されていないものを残さないことです。
ISO/IEC/IEEE 15288 は、検証を、検証アクションを計画し、それに必要なものを準備し、実施し、結果を記録するプロセスとして説明しており、すべての要求が少なくとも一つのアクションでカバーされることを求めています。マトリックスは、そのカバレッジの通常の記録です。INCOSE Systems Engineering Handbook も同じように扱っています。開発中は作業ツールであり、レビューでは成果物です。マトリックスは要求トレーサビリティの検証側の端です。トレーサビリティが、要求がどこから来て何がそれを満たすかを問うのに対し、RVTM は何がそれを証明するかを問います。
全体を通じた実践例は EO-1 です。高度 500 km の軌道から四つのスペクトルバンドで農地を撮影する架空の 6U CubeSat です。仕様書には 32 件の要求があり、二つのテストスイートに 19 の検証イベントがあります。三つ目のスイートには、ステークホルダーニーズの妥当性確認イベントが入っています。MBSE サンプルプロジェクトのウォークスルーがステークホルダーニーズからドキュメントまで追っているのと同じプロジェクトなので、ここでの行は、それに応える機能、コンポーネント、解析までさかのぼってトレースできます。
誰がいつ使うか
- 要求レビュー(たとえばシステム要求審査)。レビュー担当者は、すべての要求に方法とレベルがあることを確認します。どう検証するかを誰も言えない要求は、たいていあいまいか測定不可能であり、レビューは書き直すのに最も安い時期です。
- 設計レビュー。この段階でマトリックスはテストケース、解析、検査を名指しします。レビュー担当者は、まだイベントのない要求や、誰も計画していない設備や供試体を必要とするテストを探します。
- 試験準備審査。キャンペーンの開始前に、マトリックスはそのキャンペーンでクローズする要求と、準備のできている手順を示します。
- 認定。認定では、そのために作られた供試体で、設計が要求を(多くの場合マージンをもって)満たすことを示します。マトリックスは各認定結果とその報告書を一覧します。
- 受け入れ。受け入れでは、納入される各ユニットが設計どおりに作られ、動作することを示します。顧客は、エビデンスを添付または参照したマトリックスに照らして、行ごとにサインオフします。
- 監査と認証。監査員は行を選び、それをエビデンスまでたどります。エビデンスの列が実在し、バージョン管理されたファイルを指すマトリックスはそれに耐えますが、バージョンなしで「see test report」と書いてあるだけのマトリックスは耐えられません。
列
実用的なマトリックスには次の列があります。列を分けたり名前を変えたりする組織はありますが、どれかを省く組織はほとんどありません。
| 列 | 内容 | 記入時期 |
|---|---|---|
| 要求 | 識別子と短い名前。全文はクリック一つで見られるようにし、貼り付けない | 要求を書いたとき |
| 手法 | 検査、解析、実証、テスト。必要なら複数 | 要求分析 |
| レベル | 検証する場所:コンポーネント、サブシステム、システム(またはユニット、アセンブリ、セグメント) | 要求分析 |
| 成功基準 | 満たしたと見なす測定可能な結果と、その条件 | 要求分析 |
| 検証イベント | それを実施するテストケース、解析、検査、実証 | 設計 |
| ステータス | 未検証、計画のみ、未実行、合格、不合格 | 統合とテスト |
| 証拠 | 結果を示す報告書、データファイル、記録。そのバージョンと、実行したビルドと供試体を含む | 統合とテスト |
最初の四つの列が計画で、最後の三つが結果です。二つを分けておくことが重要です。変わる時期も理由も異なるからです(計画と結果を参照)。
検証方法の選び方
標準的な方法は四つあります。ここでは費用の安い順に並べており、複数の方法が使える場合の通常の優先順位でもあります。方法は要求を書くときに選ぶのが最善です。その理由は要求の書き方のガイドで TC-06 を例に示しています。
- 検査
- 品目またはその文書を、動作させずに調べることです。寸法の測定、ラベルの読み取り、証明書、図面、構成設定の確認などです。物理的な特徴、表示、材料、そして「shall have」や「shall be made of」と書かれたものすべてに適しています。他所で作られた記録のレビューも含みます。EO-1 は 3.4 Bus Regulation(12 V、2% 以内)を、テストを繰り返す代わりに電力分配ユニットの認定報告書と負荷ステップのデータを検査して検証します。
- 解析
- 計算、モデリング、シミュレーションによって要求が満たされていることを示すことです。下位レベルのテストデータを使うことがよくあります。実物のテストが不可能または危険な場合や、解析がどのテストよりもはるかに多くのケースをカバーできる場合に適しています。EO-1 の 1.7 Mission Lifetime(軌道上 730 日)は信頼性解析でしか示せず、1.6.1 Ground Track Repeat は軌道の伝播で示します。
- 実証
- 品目を動作させて何かを行うことを示すことです。観察はしますが、精密な測定のための計装はしません。結果が「はい」か「いいえ」の機能要求や運用要求に適しています。EO-1 の 6.1 Contact Scheduling(48 時間前にコンタクトを予約)は、運用チームに 14 日間のリハーサルを行わせて示します。
- テスト
- 管理された条件の下で品目を動作させ、結果を数値と比べて測定することです。2.1 Pointing Accuracy(ターゲットから 0.1 度以内)のような、値と許容差を持つ性能要求に適しています。テストは最も強いエビデンスを生み、通常は最も費用がかかります。
選択を決めるいくつかの問い:
- 要求に数値が含まれているか?含まれていれば、通常はテストか解析が必要です。実証では「within 0.1 degrees」を示せません。
- 条件を再現できるか?軌道上の 2 年間や、実際の圃場上空での 25 度のオフナディアのパスは、実験室では再現できません。それらは解析に回し、実験室で到達できる点でのテストで裏付けます。
- どのレベルで見えるか?バッテリー容量はバッテリーパック(コンポーネントレベル)でテストできます。指向精度には姿勢サブシステムが必要です。72 時間の再訪はミッション全体でしか存在しません。各要求は、その特性が完全に現れる最も低いレベルで検証します。
- 顧客は何を受け入れるか?契約は主要な要求の方法を定めていることがよくあります。受け入れのときではなく、早い段階で合意してください。
成功基準も同時に書きます。「Meets the requirement」は基準ではありません。「Error of at most 0.1 degrees on each of 20 commanded targets」は基準です。誰が実施しても同じ判定に達します。
計画と結果
マトリックスの計画の部分は、要求分析と設計の間に決まります。「どうすればわかるか?」に答えるもので、ハードウェアが存在するずっと前に完成しているべきです。要求レビューの時点で方法のない要求は、テストプログラムのギャップではなく、要求セットの欠陥です。
結果の部分は統合とテストの間に記入されます。イベントを実行するたびに変わり、何をテストしたか、つまりビルドやソフトウェアのバージョン、供試体のシリアル番号、日付、担当者とともにあって初めて意味を持ちます。ビルドと供試体のない結果は、再現も監査もできず、どのビルドで不合格が修正されたかもわかりません。
二つの習慣が、両方の部分を正直に保ちます。
- エビデンスの各行に一つのイベント。解析報告書、検査記録、実証は、テストケースと同じく検証イベントです。それぞれに結果付きの独自のエントリーを与えれば、マトリックスはテストだけでなく、すべての方法のエビデンスを示します。
- 末端を検証し、親は集約する。子に分解された親要求は、すべての子が検証されたとき、または独自のイベントを持つときに検証されます。集約すれば、親のために重複するテストを計画せずに済み、どの枝が足を引っ張っているかがすぐにわかります。
ステータスの値と集約
五つのステータス値で、行のライフサイクル全体をカバーします。
| ステータス | 意味 | すること |
|---|---|---|
| 未検証 | 方法もイベントもない | 計画するか、要求を見直す |
| 計画のみ | 方法は設定済みで、イベントはまだない | テストケース、解析、検査を書く |
| 未実行 | イベントはあるが、どれにも結果がない | 日程を組む |
| 合格 | イベントが合格し、不合格がない | エビデンスをビルドと供試体とともに保管する |
| 不合格 | イベントが不合格になった | 課題を起票し、修正し、再実行する |
検証イベントには、より細かい独自の状態があります。未実行、進行中、ブロック、不合格、合格です。マトリックスでは、進行中またはブロックのイベントにはまだ判定がないため、その要求は未実行として数えます。
親要求では、その下のどこかに不合格があれば不合格になり、すべての子が合格したとき(または独自のイベントが合格したとき)にだけ合格します。それ以外の場合は、最もカバーの遅れた枝がどこまで進んだかを示します。ステータスごとに行を数えると、ほとんどのレビューが最初に求める一つの数値が得られます。何件中何件の要求が検証済みかです。
モデルから生成し続ける
ほとんどのマトリックスはスプレッドシートとして始まり、ほとんどのスプレッドシートは次第に食い違っていきます。要求の文が貼り付けられ、要求が変わると古くなります。テストのステータスは、実行のたびに覚えている人が手で入力します。レビューの前に二つのコピーが出回り、顧客がどちらを見たのか誰にも確かではありません。これは不注意のせいではありません。スプレッドシートはコピーであり、コピーは分岐するのです。
代わりの方法は、マトリックスの内容をすでにある場所に置いたまま、そこから表を生成することです。
- 方法、レベル、成功基準は要求の属性とする。
- 各検証イベントは、それが検証する要求にリンクされた項目とする。
- 各結果は、ビルド、供試体、エビデンスとともに、実行時にイベントに記録する。
- マトリックスはそれらのリンクに対するクエリであり、開くたび、エクスポートするたびに作り直す。
そうすればマトリックスは独自のデータを持たないため、要求やテスト記録と食い違うことがありません。レビュー用にエクスポートしたコピーはやはりスナップショットですが、手で保守するのではなく、現在のモデルから数秒で作られます。これは、要求、設計、検証を一つのモデルに保つことの最もわかりやすい効用の一つです。Holarch でのやり方は検証機能のページで説明しています。
不合格と変更された結果の表れ方
二種類の変更が、完了したように見えた行を誤ったものにします。
不合格の結果
不合格は恥ではなく情報であり、マトリックスはそれをはっきり示すべきです。不合格のイベントは再実行されるまで不合格のままで、黙ってリセットされることはありません。各不合格には、イベントと、それが検証する要求にリンクされた課題(問題報告書や不具合報告書)を起票するので、マトリックスの行から調査にたどり着けます。修正が届いたら、新しいビルドでイベントを再実行し、記録には両方の実行を残します。古いビルドでの不合格と新しいビルドでの合格です。各テストキャンペーンの結果をスナップショット(テストサイクルと呼ばれることが多い)として保存しておけば、キャンペーン同士を比較し、どの行が変わったかを正確に確認できます。
変更された要求
より目立たない問題は、テストが合格した後で変わる要求です。電力要求が 28 W から 30 W に上がると、古い合格は新しい値について何も証明しなくなりますが、ステータス列には「合格」と表示されたままです。良いマトリックスは、変更された要求とそれを検証するイベントとの間のリンクに、誰かがレビューするまで要確認のフラグを立てます。イベントがすでに新しい値をカバーしているか、手順を変えてイベントを再実行しなければならないかのどちらかです。要求の上流で何かが変わったときも同じです。要確認リンク全般についてはトレーサビリティのガイドの要確認リンクのセクションで扱っています。検証についての規則は短いものです。要求が最後に変わる前に記録された合格は、マイルストーンで数える前にレビューが必要です。変更影響分析のガイドでは、同じ変更を変更要求から再テストまで追っています。
マイルストーン前のカバレッジレビュー
レビューの一週間前に、次の問いでマトリックスを確認します。
- 未検証の行。すべての要求に少なくとも方法があるべきです。方法のない行は、計画が欠けているか、書かれたとおりでは検証できないかのどちらかです。
- 計画のみの行。設計レビューでは、それぞれにイベントか、まだない理由があるべきです。受け入れでは一つも残っていてはなりません。
- 不合格の行。それぞれに、担当者と計画を持つリンクされた課題が必要です。課題のない不合格は、試験審査で最もよくある指摘事項です。
- 要確認の行。それぞれに判断が必要です。まだ有効か、再実行か。
- レベルと方法の妥当性。コンポーネントのテストだけで検証されたシステムレベルの要求、実証だけで検証された数値の要求、要求が述べることを手順が測定していないイベントを探します。
- エビデンス。合格した行をいくつか抜き取って確認します。エビデンスは存在するか、そのビルドと供試体はレビュー対象と一致しているか。
- 孤立したイベント。どの要求も検証しないテストケースは、費用がかかるのに記録上は何も証明しません。リンクするか、廃止してください。
各マイルストーンでステータスごとの数を記録します。傾向(未検証が減り、合格が増え、不合格がクローズしていく)は、どの単一のスナップショットよりもプログラムの健全性を物語ります。
実践例:EO-1 CubeSat の RVTM
例は Holarch の CubeSat EO-1 デモプロジェクトです。要求は SRS-001 EO-1 System Requirements Specification にあり、検証イベントは二つの Test Suite の Test Case で、各テストケースが要求を検証します(三つ目のスイート TS-3 Mission Validation はステークホルダーニーズの妥当性確認を行い、RVTM には含まれません)。このガイドのためにデモに一つの変更を加えました。MBSE の例の変更ステップと同じ変更です。基本設計審査の後、軌道平均の負荷が 26 W に増えたため、要求 3.1 Orbit Average Power を 28 W から 30 W に引き上げました。
例をダウンロード:EO-1 の要求検証マトリックス(Excel ブック)(.xlsx、32 行)または同じマトリックスの CSV。どちらも、下に示すプロジェクトを Holarch 自身の RVTM エクスポートで出力したものです。要求の番号と名前、方法、レベル、成功基準、ステータス付きの検証テストケース、自身のステータス、集約後のステータスを含みます。自分の列のテンプレートとして使ってください。
計画
方法とレベルごとに一行ずつ選んだ行を、仕様書に書かれたとおりの成功基準とともに示します。
| # | 要求 | 手法 | レベル | 成功基準 |
|---|---|---|---|---|
| 1.2 | Ground Sample Distance:高度 500 km の軌道から 4.5 m | テスト | システム | 4 m のバーターゲットでナイキスト周波数における MTF が 0.12 以上 |
| 1.6.1 | Ground Track Repeat:3 日ごと | 解析 | システム | 軌道の伝播で 3 日 ± 1 時間の回帰を示す |
| 2.1 | Pointing Accuracy:0.1 度以内 | テスト | サブシステム | 指令した 20 のターゲットそれぞれで誤差が 0.1 度以下 |
| 3.1 | Orbit Average Power:寿命末期に 30 W 以上(以前は 28 W) | テスト | サブシステム | 測定したピーク電力から予測した寿命末期の軌道平均電力 |
| 3.2 | Battery Capacity:寿命初期に 77 Wh 以上 | テスト | コンポーネント | C/2、20 °C で測定した容量が 77 Wh 以上 |
| 3.4 | Bus Regulation:12 V、2% 以内 | 検査 | コンポーネント | すべての負荷ステップでバス電圧が 11.76~12.24 V |
| 6.1 | Contact Scheduling:48 時間前 | 実証 | システム | リハーサルで 14 日間連続して 48 h 前にコンタクトを予約 |
| 6.5 | Planning Cycle Time:100 分以内 | 解析 | システム | モンテカルロシミュレーションで 90% 以上の確率で 100 分を満たす |
| 2.5 | Safe Mode Recovery:「quickly … as appropriate」 | (なし) | (なし) | (なし) |
四つの方法すべてが三つのレベルで現れています。バッテリー容量はパック単体でテストします。特性がそこに完全に現れるからです。指向精度にはエアベアリングテーブル上の姿勢サブシステムが必要です。地上軌跡の回帰は軌道の特性なので解析に回します。6.5 は運用タイムラインの確率的解析で検証します。モンテカルロのガイドで順を追って説明している種類の確認です。3.1 の基準は測定からの予測です。テストでアレイのピーク電力を測定し、電力バジェットの式がそれを軌道平均の値に変換します。2.5 に方法がないのは、書かれたとおりでは検証できないからです。
結果とテストキャンペーン
19 の検証テストケースは二つのスイートに入っています。TS-1 Spacecraft Qualification Tests(光学ベンチテストから解析まで 15 のテストケース)と TS-2 Communications and Ground Tests(4)です。三つ目のスイート TS-3 Mission Validation には VAL-01~VAL-03 があり、要求ではなくステークホルダーニーズを確認するため、RVTM には含まれません(検証と妥当性確認を参照)。記録された各結果には、テスト担当者、日付、ビルド(フライトソフトウェアのバージョン)、供試体(ハードウェアのシリアル番号)、そしてあればエビデンスファイルが付いています。
TC-04 Pointing Accuracy Test は不合格でした。フライトソフトウェア 2.3.1 での 2 回目の実行で、20 のターゲットのうち三つが 0.1 度の範囲外になり、最大は 0.14 度でした。ホイールの摩擦が疑われています。この不合格には、テストケースに、そしてそれを通じて要求 2.1 と 2.2 にリンクされた課題があります。TC-09 Safe Mode Entry Test も同様に不合格(10 秒に対して 14 秒)で、独自の課題があります。二つのテストケース、TC-11 UHF Command Test と TC-17 Slew Time Analysis は進行中です。マトリックスでは、判定が出るまで未実行として数えます。
フラットサットのキャンペーンは 2 回実施され、各キャンペーンの結果はテストサイクルとして保存されました。二つを比較すると、2 回目のキャンペーンで何が変わったかがわかります。
- Flatsat Cycle 1:9 件中 5 件が合格。TC-03 と TC-06 は未実行。TC-04(5 つのターゲットで 0.16 度)と TC-09(15 秒)は不合格。
- Flatsat Cycle 2:11 件中 8 件が合格。TC-03 と TC-06 は合格、解析 TC-13 が追加されて合格、TC-14 は追加されたものの未実行。TC-04 と TC-09 は改善した(3 つのターゲットで 0.14 度、14 秒)ものの、まだ不合格。
「改善したがまだ不合格」は、ステータス列が隠し、サイクルの比較が残すまさにその情報です。キャンペーン間の修正は数値を正しい方向に動かしましたが、どちらもクローズしていません。
マトリックスを読む
マトリックスは上の要求とテストケースから生成されています。表に手入力したものは何もありません。カードは集約後のステータスごとに行を数え、五つの数を合計すると 32 件の要求になります。合格 11、不合格 3、未実行 12、計画のみ 3、未検証 3 です。審査委員会のように読むと、次のようになります。
- 32 件中 11 件が検証済み(34%)。テストによる合格(1.2、3.2)、解析による合格(1.6.1、1.7)、検査による合格(3.4)です。実証はまだ一つも合格していません。三つ(5.4、6.1、6.2)はすべて TS-2 の地上セグメントのリハーサルを待っています。
- 2.1 と 2.2 は一つのテストで不合格。TC-04 が両方を検証しているため、一つの不合格で二つの行が不合格になります。よく見ると、2.2 Pointing Stability には二つ目の問題があります。その基準は 40 s の各撮像中のドリフトですが、TC-04 は各ターゲットでの指向誤差しか測定していません。TC-04 が合格しても、2.2 が満たされていることは示せません。これは方法の妥当性に関する指摘事項です。2.2 には独自の測定が必要か、TC-04 の手順でドリフトを記録しなければなりません。
- 4.3 は不合格です(TC-09 による)。課題と、ウォッチドッグのポーリングレートを上げて TC-09 を再実行するタスクが記録されています。新しいソフトウェアで TC-09 が合格するまで、この行は不合格のままです。
- 1.6 Revisit Time は集約される。単独では計画のみ(解析、イベントなし)ですが、二つの子がこれを決めます。1.6.1 は合格、1.6.2 Off-Nadir Imaging は未実行なので、1.6 は未実行と表示されます。両方の子が合格すれば、親の個別のテストは不要です。
- 計画のみ:1.5、4.4、6.5。それぞれ方法はあり、イベントはありません。4.4 Downlink Encryption にはレベルも基準もないため、計画が完成していません。
- 未検証:2.5、3.5、6.4。方法もイベントもありません。これらは仕様書の中で最も弱い三つの要求でもあります(「quickly … as appropriate」、「warm enough (TBD)」、「user friendly and/or easy to use」)。マトリックスのギャップは、欠けているテストよりも、書き直しが必要な要求を指していることが多いのです。
- 3.1 は要確認。次のセクションを参照してください。
変更された要求:PDR 後の 3.1
TC-06 Solar Array Power Test は合格しました。期待結果はピーク 72 W 以上で、アレイは 75.1 W を出しました。その後、3.1 が 28 W から 30 W に引き上げられました。TC-06 は実際に合格したので、ステータス列は合格のままです。要求と TC-06 の後ろにある ⚠ は、その合格が要求より古いことを示しています。クリックすると、この変更で要確認になった 3.1 からのすべてのリンクが一覧表示されます。
検証リンクについての問いは具体的です。測定されたピーク電力 75.1 W は、まだ軌道平均 30 W を示すか?電力バジェットがこれに答えます。その式 EQ-1.3 は、軌道の日照率(0.62)と電力経路の効率(0.6)を使って、ピーク電力を軌道平均電力に変換します。
| ピーク電力 | 軌道平均(× 0.62 × 0.6) | 内容 |
|---|---|---|
| 72.0 W | 26.8 W | TC-06 の期待結果 |
| 75.1 W | 27.9 W | TC-06 の測定結果 |
| 75.3 W | 28.0 W | 旧 3.1 に必要な値 |
| 80.6 W | 30.0 W | 新 3.1 に必要な値 |
したがって合格は引き継げません。30 W を示すには、アレイのピークは約 80.6 W が必要ですが、TC-06 が測定したのは寿命初期の認定パネルでの 75.1 W であり、寿命末期の劣化を含みません。レビューでは、変更があらわにした以前からの問題も見つかります。TC-06 のしきい値 72 W は軌道平均でわずか 26.8 W にしかならず、28 W に対してでさえ、テストの期待結果は電力バジェットを通じて要求から導かれていませんでした。正しい対応は、リンクを要確認のままにし、課題を起票し、TC-06 の期待結果を式から改訂し(アレイとマージンのどちらを変えるかは電力エンジニアと決め)、それから再実行することです。その判断が記録されるまで要確認マークは残るので、古い「合格」を 30 W のエビデンスとして読む人はいません。
エクスポートしたマトリックスには検証結果だけが含まれ、要確認フラグは含まれません。ダウンロードしたブックでは 3.1 は Passed と表示されます。マイルストーン用にコピーをエクスポートする前に、モデルで要確認の行をレビューしてください。
レビュー前に残りの行を計画する
カバレッジのリストには、まだ検証されていない 21 行(32 から 11 を引いた数)が、計画を仕上げるためのコントロールとともに表示されます。詳細設計審査の前に、このリストが示す作業は次のとおりです。
- 2.5、3.5、6.4 を検証可能になるように書き直し、それぞれに方法、レベル、基準を与えます。
- 4.4 にレベルと基準を与えて検査を作成し、1.5 と 6.5 の解析を作成します。
- 不合格をクローズします。TC-04 はホイールの調査の後、TC-09 はウォッチドッグの変更の後に行い、2.2 のドリフトは独自に測定します。
- 3.1 について判断します。TC-06 を改訂し、30 W に対して再実行します。
- 未実行のイベントの日程を組みます。まず TC-19 Array Deployment Test と、合わせて八つの要求を検証する TS-2 の四つのイベントから始めます。
各レビューで数(ここでは合格 11、不合格 3、未実行 12、計画のみ 3、未検証 3)を記録すれば、次のレビューで比較する傾向が得られます。
プロダクトラインでは製品ごとに一つのマトリックス
このガイドで「ビルド」とは、テストを実行した対象、つまりソフトウェアのバージョンと供試体のシリアル番号を指します。プロダクトラインは別の考え方です。EO-1 Flight と低コストの EO-1 Lite のような複数の製品を一つのモデルに保持し、それぞれを製品構成とします。両者の要求は重なりますが同じではなく、一方の製品での合格はもう一方を検証しません。EO-1 Lite は S バンドの無線機を搭載しているので、EO-1 Flight で合格した X バンドのリンクテストはそれについて何も示しません。
そのためマトリックスは製品ごとに読む必要があります。Holarch では、表示方法 ▾で製品構成を選びます。RVTM にはその構成の要求と、それについて記録された結果だけが表示されるので、「検証済み」はその製品について検証済みという意味になり、エクスポートには構成の名前が入ります。すべての構成では、構成ごとに集約後のステータス列が一つずつ追加され、要求がその構成に含まれない場所には「—」が表示されます。構成のビューでスイートを実行すると、結果はその構成の結果として記録され、コンフィギュレーション / ビルドフィールドに製品名が入ります。ビルドと供試体もやはり記録しておく価値があります。プロダクトラインには Individual または Team プランが必要です。プロダクトライン:RVTMとプロダクトラインエンジニアリングのガイドを参照してください。
よくある間違い
- 要求を言い換えただけの成功基準。「The ADCS points within 0.1 degrees」では、ターゲットの数も、条件も、何を基準にするかもわかりません。
- 要求から導かれていないテストのしきい値。テストの期待結果は、要求からそれらをつなぐ解析を通じて導くべきです。TC-06 の 72 W はそうなっていませんでした。計算は要求が変わったときではなく、テストを書くときに確認してください。
- それぞれを測定せずに一つのテストで複数の要求を検証する。テストの共有は効率的ですが、リンクされた要求が述べるすべての量を手順が記録する場合に限ります。
- 親を直接検証する。子のテストを繰り返すだけの親要求のテストを書くと、作業も書類も倍になります。末端を検証し、親は集約させてください。
- エビデンスのない解析。解析は検証イベントであり、どのテストとも同じく報告書、バージョン、判定が必要です。
- 汎用の「related」リンクでテストを要求にリンクする。マトリックスは検証リンクしか数えません。ほかの方法でリンクされたテストでは、要求は未検証のように見えます。
- マトリックスを整えるために不合格を「未実行」にリセットする。不合格とその課題を残してください。監査員が求めるのはその履歴です。
- 受け入れで要確認の行を無視する。検証すると称する要求より古い合格は、現在の要求のエビデンスではありません。
Holarch で試す
- EO-1 プロジェクトを作成します:プロジェクトを管理 → プロジェクトファイル ▾ → 新しいデモプロジェクト → CubeSat(ガイド付きシステムズエンジニアリング)。または要求ドキュメントの自分の要求から始めます。要求を参照してください。
- 検証 → テストセンターを開きます。検証カバレッジで、A、D、I、T で各要求の方法を設定し、レベル…でレベルを選び、+ 基準で成功基準を追加します。
- + 新規 ▾と+ テストケースでテストスイートとテストケースを作成し、検証対象列の+で各テストケースを要求にリンクします。解析、検査、実証もテストケースです。
- ステータスボタンで結果を記録するか、スイートを実行でキャンペーンを順に進めます。実行ごとに、テスト担当者、ビルド(コンフィギュレーション / ビルドフィールド)、供試体、エビデンスファイルが記録されます。不合格の後は+ Issue を作成をクリックします。
- 新しいサイクルを開始…でキャンペーンを保存し、スイートの⋯ → テストサイクル…でキャンペーンを比較します。
- 検証 → RVTMを開きます。ステータスのカードをクリックすると行が絞り込まれます。要確認マークを見るには、要求 3.1 の文を変更し、その横の ⚠ をクリックします。
- エクスポート ▾をクリックして、Excel (.xlsx)、CSV、Word (.docx) を選びます。上のダウンロード可能な例はこのエクスポートです。
完全なリファレンスは検証にあります。
次に読むもの
- Holarch の検証:テストケース、エビデンス付きの実行、テストサイクル、RVTM を一つのモデルで。
- 検証のドキュメント:計画の属性、ステータスの規則、実行モード、テストサイクル、RVTM のリファレンス。
- 要求のドキュメント:要求の作成と承認、確認が必要なリンクのページ。