Guida · Verifica
Matrice di verifica dei requisiti (RVTM): colonne, metodi e un esempio svolto
Ascolta questa guida 29 min
Una matrice di verifica dei requisiti, o RVTM, elenca ogni requisito con il modo in cui sarà verificato, l’evento che lo verifica, il risultato e le evidenze. Questa guida tratta le colonne, la scelta tra ispezione, analisi, dimostrazione o test, la pianificazione rispetto ai risultati, come compaiono i risultati falliti e modificati, e una revisione della copertura prima di una milestone, applicati alla RVTM di un CubeSat 6U per l’osservazione della Terra.
In questa pagina
- Che cos’è una matrice di verifica dei requisiti
- Chi la usa e quando
- Le colonne
- Scegliere un metodo di verifica
- Pianificazione e risultati
- Valori di stato e aggregazione
- Generarla sempre dal modello
- Come compaiono i risultati falliti e modificati
- Rivedere la copertura prima di una milestone
- Esempio svolto: la RVTM del CubeSat EO-1
- Una matrice per prodotto in una linea di prodotti
- Errori comuni
- Provarlo in Holarch
- Dove andare dopo
Che cos’è una matrice di verifica dei requisiti
La verifica chiede se il sistema è stato costruito bene: soddisfa ogni requisito così come è scritto? La matrice di verifica dei requisiti è il luogo in cui si risponde a questa domanda, requisito per requisito. Ogni riga è un requisito. Le colonne dicono come sarà verificato, a quale livello di assemblaggio, con quale evento e che cosa ne è risultato. Per la differenza tra verifica e validazione, che invece controlla il sistema rispetto alle esigenze degli stakeholder, si veda verifica e validazione.
La stessa tabella ha diversi nomi. RVTM (requirements verification traceability matrix) mette l’accento sul collegamento tra requisito e test. VCRM (verification cross-reference matrix) è comune nei programmi della difesa e aerospaziali e indica spesso la metà di pianificazione: requisito, metodo e livello. Una matrice di verifica o matrice di conformità può aggiungere per ogni riga una dichiarazione di conformità destinata al cliente. Il contenuto varia un po’ da un’organizzazione all’altra, ma l’idea è la stessa: una riga per requisito, nessuno senza un modo pianificato di dimostrare che è soddisfatto.
La ISO/IEC/IEEE 15288 descrive la verifica come un processo che pianifica le azioni di verifica, predispone ciò che serve, le esegue e ne registra i risultati, e richiede che ogni requisito sia coperto da almeno un’azione. La matrice è la registrazione abituale di questa copertura. L’INCOSE Systems Engineering Handbook la tratta allo stesso modo: uno strumento di lavoro durante lo sviluppo e un deliverable alle revisioni. La matrice è l’estremo di verifica della tracciabilità dei requisiti: dove la tracciabilità chiede da dove viene un requisito e che cosa lo soddisfa, la RVTM chiede che cosa lo dimostra.
L’esempio svolto in tutta la guida è EO-1, un CubeSat 6U fittizio che riprende terreni agricoli in quattro bande spettrali da un’orbita di 500 km. La sua specifica ha 32 requisiti e 19 eventi di verifica in due suite di test; una terza suite contiene gli eventi di validazione per le esigenze degli stakeholder. È lo stesso progetto che la guida al progetto di esempio MBSE segue dalle esigenze degli stakeholder fino ai documenti, quindi le righe qui si possono ricondurre alle funzioni, ai componenti e alle analisi che vi rispondono.
Chi la usa e quando
- Revisioni dei requisiti (per esempio una system requirements review). I revisori controllano che ogni requisito abbia un metodo e un livello. Un requisito di cui nessuno sa dire come verificarlo è di solito ambiguo o non misurabile, e la revisione è il momento più economico per riscriverlo.
- Revisioni di progetto. La matrice ora nomina casi di test, analisi e ispezioni. I revisori cercano requisiti ancora senza evento e test che richiedono strutture o articoli che nessuno ha pianificato.
- Revisioni di prontezza ai test. Prima dell’inizio di una campagna, la matrice mostra quali requisiti la campagna chiuderà e quali procedure sono pronte.
- Qualifica. La qualifica dimostra che il progetto soddisfa i suoi requisiti, spesso con margine, su un articolo di prova costruito allo scopo. La matrice elenca ogni risultato di qualifica e il relativo rapporto.
- Accettazione. L’accettazione dimostra che ogni unità consegnata è stata costruita e funziona come progettato. Il cliente approva rispetto alla matrice, riga per riga, con le evidenze allegate o citate.
- Audit e certificazione. Un auditor sceglie alcune righe e le segue fino alle evidenze. Una matrice la cui colonna delle evidenze punta a file reali e versionati supera la prova; una che dice «vedere il rapporto di test» senza una versione no.
Le colonne
Una matrice pratica ha queste colonne. Alcune organizzazioni le dividono o le rinominano; poche ne omettono qualcuna.
| Colonna | Contiene | Compilata |
|---|---|---|
| Requisito | Identificativo e nome breve; l’enunciato completo è a un clic di distanza, non incollato | Quando il requisito viene scritto |
| Metodo | Ispezione, analisi, dimostrazione o test; più di uno se necessario | Analisi dei requisiti |
| Livello | Dove viene verificato: componente, sottosistema o sistema (oppure unità, assieme, segmento) | Analisi dei requisiti |
| Criteri di successo | Il risultato misurabile che conta come soddisfatto, con le condizioni | Analisi dei requisiti |
| Evento di verifica | Il caso di test, l’analisi, l’ispezione o la dimostrazione che la esegue | Progetto |
| Stato | Non verificato, pianificato, non eseguito, superato o fallito | Integrazione e test |
| Evidenze | Il rapporto, il file di dati o la registrazione che mostra il risultato, con la sua versione e la build e l’articolo di prova su cui è stato eseguito | Integrazione e test |
Le prime quattro colonne sono il piano. Le ultime tre sono i risultati. Tenere separate le due metà è importante, perché cambiano in momenti diversi e per ragioni diverse (si veda pianificazione e risultati).
Scegliere un metodo di verifica
I metodi standard sono quattro. Sono elencati qui dal meno al più costoso, che è anche il consueto ordine di preferenza quando più di uno andrebbe bene. Il metodo va scelto preferibilmente quando si scrive il requisito; la guida alla scrittura dei requisiti mostra perché, su TC-06.
- Ispezione
- Esaminare l’elemento o la sua documentazione senza farlo funzionare: misurare una dimensione, leggere un’etichetta, controllare un certificato, un disegno o un’impostazione di configurazione. Adatta a caratteristiche fisiche, marcature, materiali e a tutto ciò che è espresso come «shall have» o «shall be made of». Comprende anche la revisione di registrazioni prodotte altrove: EO-1 verifica 3.4 Bus Regulation (12 V entro il 2%) ispezionando il rapporto di qualifica dell’unità di distribuzione dell’alimentazione e i suoi dati di gradino di carico, invece di ripetere il test.
- Analisi
- Dimostrare che il requisito è soddisfatto mediante calcolo, modellazione o simulazione, spesso usando dati di test dei livelli inferiori. Adatta quando testare l’oggetto reale è impossibile o pericoloso, o quando l’analisi copre molti più casi di quanti ne potrebbe coprire qualsiasi test. Il requisito 1.7 Mission Lifetime di EO-1 (730 giorni in orbita) si può dimostrare solo con un’analisi di affidabilità, e 1.6.1 Ground Track Repeat propagando l’orbita.
- Dimostrazione
- Far funzionare l’elemento per mostrare che fa qualcosa, con osservazione ma senza strumentazione per misure precise. Adatta ai requisiti funzionali e operativi con esito sì o no: il requisito 6.1 Contact Scheduling di EO-1 (contatti prenotati con 48 ore di anticipo) si dimostra facendo svolgere al team operativo 14 giorni di prova generale.
- Test
- Far funzionare l’elemento in condizioni controllate e misurare il risultato rispetto a un numero. Adatto ai requisiti di prestazione con un valore e una tolleranza, come 2.1 Pointing Accuracy (entro 0,1 gradi dall’obiettivo). Il test produce le evidenze più solide e di solito costa di più.
Alcune domande che orientano la scelta:
- Il requisito contiene un numero? Allora di solito richiede test o analisi; una dimostrazione non può mostrare «entro 0,1 gradi».
- La condizione si può riprodurre? Due anni in orbita, o un passaggio a 25 gradi off-nadir su un campo reale, non si possono allestire in laboratorio. Questi casi vanno all’analisi, supportata da un test in un punto raggiungibile in laboratorio.
- A quale livello è osservabile? La capacità della batteria si può testare sul pacco batteria (livello di componente); l’accuratezza di puntamento richiede il sottosistema di assetto; la rivisitazione entro 72 ore esiste solo per l’intera missione. Verificare ogni requisito al livello più basso in cui la proprietà è pienamente presente.
- Che cosa accetterà il cliente? I contratti fissano spesso il metodo per i requisiti principali. Va concordato presto, non al momento dell’accettazione.
Scrivere contestualmente i criteri di successo. «Soddisfa il requisito» non è un criterio. «Errore di al massimo 0,1 gradi su ciascuno di 20 obiettivi comandati» lo è: chiunque può eseguirlo e arrivare allo stesso giudizio.
Pianificazione e risultati
La metà di pianificazione della matrice si definisce durante l’analisi dei requisiti e la progettazione. Risponde alla domanda «come lo sapremo?» e dovrebbe essere completa molto prima che esista qualsiasi hardware. Un requisito senza metodo alla revisione dei requisiti è un difetto dell’insieme di requisiti, non una lacuna del programma di test.
La metà dei risultati si compila durante l’integrazione e il test. Cambia ogni volta che si esegue un evento, ed è significativa solo insieme a ciò che è stato testato: la build o la versione del software, il numero di serie dell’articolo di prova, la data e la persona. Un risultato senza build e articolo di prova non si può ripetere né sottoporre ad audit, e non può dire quale build ha corretto un fallimento.
Due abitudini mantengono oneste le due metà:
- Un evento per ogni riga di evidenza. Un rapporto di analisi, un verbale di ispezione e una dimostrazione sono eventi di verifica quanto un caso di test. Dare a ciascuno una propria voce con un risultato, così che la matrice mostri evidenze per ogni metodo e non solo per i test.
- Verificare le foglie, aggregare i padri. Un requisito padre scomposto in figli è verificato quando lo sono tutti i figli, o quando ha un proprio evento. L’aggregazione evita di pianificare test duplicati per il padre e mostra subito quale ramo lo sta frenando.
Valori di stato e aggregazione
Cinque valori di stato coprono la vita di una riga:
| Stato | Significato | Che cosa fare |
|---|---|---|
| Non verificato | Nessun metodo e nessun evento | Pianificarlo, o mettere in discussione il requisito |
| Solo pianificato | Un metodo è impostato, non esiste ancora un evento | Scrivere il caso di test, l’analisi o l’ispezione |
| Non eseguito | Gli eventi esistono, nessuno ha un risultato | Pianificarne l’esecuzione |
| Superato | Un evento è stato superato e nessuno è fallito | Conservare le evidenze con la build e l’articolo di prova |
| Fallito | Un evento è fallito | Aprire un problema, correggere, rieseguire |
Un evento di verifica ha stati propri, più fini: non eseguito, in corso, bloccato, fallito o superato. Per la matrice, un evento in corso o bloccato non ha ancora un giudizio, quindi il suo requisito conta come non eseguito.
Per un requisito padre, un fallimento in qualsiasi punto sottostante lo rende fallito, ed è superato solo quando lo sono tutti i figli (o il suo evento). Altrimenti mostra il punto a cui è arrivato il suo ramo meno coperto. Contare le righe per stato fornisce il numero che la maggior parte delle revisioni chiede per primo: quanti requisiti sono verificati, su quanti.
Generarla sempre dal modello
La maggior parte delle matrici nasce come foglio di calcolo, e la maggior parte dei fogli di calcolo diverge. Il testo del requisito viene incollato e diventa obsoleto quando il requisito cambia. Lo stato dei test viene digitato a mano dopo ogni esecuzione, da chi se ne ricorda. Prima di una revisione circolano due copie e nessuno è sicuro di quale abbia visto il cliente. Niente di tutto ciò è negligenza; un foglio di calcolo è una copia, e le copie divergono.
L’alternativa è tenere il contenuto della matrice dove già si trova e generare la tabella da lì:
- metodo, livello e criteri di successo sono attributi del requisito;
- ogni evento di verifica è un elemento collegato ai requisiti che verifica;
- ogni risultato, con la sua build, l’articolo di prova e le evidenze, viene registrato sull’evento quando questo viene eseguito;
- la matrice è una query su quei collegamenti, ricostruita ogni volta che la si apre o la si esporta.
La matrice allora non può contraddire i requisiti o le registrazioni dei test, perché non ha dati propri. Una copia esportata per una revisione resta un’istantanea, ma si ottiene in pochi secondi dal modello corrente invece di essere mantenuta a mano. È uno dei vantaggi più evidenti di tenere requisiti, progetto e verifica in un unico modello; la pagina delle funzionalità di verifica descrive come lo fa Holarch.
Come compaiono i risultati falliti e modificati
Due tipi di modifica rendono errata una riga che sembrava conclusa.
Un risultato fallito
Un fallimento è un’informazione, non un imbarazzo, e la matrice deve mostrarlo chiaramente. L’evento fallito resta fallito finché non viene rieseguito; non viene azzerato in silenzio. Ogni fallimento riceve un problema (un rapporto di problema o di non conformità) collegato all’evento e ai requisiti che questo verifica, così che la riga della matrice porti all’indagine. Quando arriva la correzione, l’evento viene rieseguito sulla nuova build e la registrazione conserva entrambe le esecuzioni: il fallimento sulla vecchia build e il superamento sulla nuova. Salvare i risultati di ogni campagna di test come istantanea (spesso chiamata ciclo di test) permette di confrontare le campagne e vedere esattamente quali righe sono cambiate.
Un requisito modificato
Il problema più subdolo è un requisito che cambia dopo che il suo test è stato superato. Se un requisito di potenza sale da 28 W a 30 W, il vecchio superamento non dimostra più nulla sul nuovo valore, ma una colonna di stato indicherà ancora «superato». Una buona matrice segnala come sospetto il collegamento tra il requisito modificato e il suo evento di verifica finché qualcuno non lo rivede: o l’evento copre già il nuovo valore, o la procedura deve cambiare e l’evento va rieseguito. Lo stesso vale quando cambia qualcosa a monte del requisito. I collegamenti sospetti in generale sono trattati nella sezione della guida alla tracciabilità sui collegamenti sospetti; per la verifica la regola è breve: un superamento registrato prima dell’ultima modifica del requisito va rivisto prima di contare a una milestone. La guida all’analisi d’impatto delle modifiche segue la stessa modifica dalla richiesta di modifica fino al nuovo test.
Rivedere la copertura prima di una milestone
Una settimana prima di una revisione, scorrere la matrice con queste domande:
- Righe non verificate. Ogni requisito dovrebbe avere almeno un metodo. Le righe senza metodo mancano di un piano o non sono verificabili così come sono scritte.
- Righe solo pianificate. Per una revisione di progetto, ognuna dovrebbe avere un evento o un motivo per cui non ce l’ha ancora. Per l’accettazione, non ne deve restare nessuna.
- Righe fallite. Ognuna richiede un problema collegato con un responsabile e un piano. Un fallimento senza problema è il rilievo più comune nelle revisioni dei test.
- Righe sospette. Ognuna richiede una decisione: ancora valida, o da rieseguire.
- Coerenza di livello e metodo. Cercare requisiti di livello di sistema verificati solo da un test di componente, requisiti numerici verificati solo per dimostrazione ed eventi la cui procedura non misura ciò che il requisito afferma.
- Evidenze. Controllare a campione alcune righe superate: le evidenze esistono, e la loro build e il loro articolo di prova corrispondono a ciò che si sta rivedendo?
- Eventi orfani. I casi di test che non verificano alcun requisito costano denaro e non dimostrano nulla agli atti. Collegarli o ritirarli.
Registrare i conteggi per stato a ogni milestone. L’andamento (non verificati in calo, superati in aumento, falliti in chiusura) dice sulla salute del programma più di qualsiasi singola istantanea.
Esempio svolto: la RVTM del CubeSat EO-1
L’esempio è il progetto demo CubeSat EO-1 in Holarch, dove i requisiti si trovano in SRS-001 EO-1 System Requirements Specification, gli eventi di verifica sono Test Case in due Test Suite e ogni caso di test verifica i propri requisiti (una terza suite, TS-3 Mission Validation, valida le esigenze degli stakeholder e resta fuori dalla RVTM). Per questa guida è stata aggiunta alla demo una modifica, la stessa che compie il passo di modifica dell’esempio MBSE: dopo la preliminary design review il carico medio orbitale è salito a 26 W, quindi il requisito 3.1 Orbit Average Power è stato portato da 28 W a 30 W.
Scaricare l’esempio: la matrice di verifica dei requisiti di EO-1 come cartella di lavoro Excel (.xlsx, 32 righe) o la stessa matrice in CSV. Entrambe sono l’esportazione RVTM di Holarch del progetto mostrato qui sotto: numero e nome del requisito, metodo, livello, criteri di successo, casi di test di verifica con il loro stato, stato proprio e stato aggregato. Si possono usare come modello per le proprie colonne.
Il piano
Una selezione di righe, una per ogni metodo e livello, con i criteri di successo come scritti nella specifica:
| # | Requisito | Metodo | Livello | Criteri di successo |
|---|---|---|---|---|
| 1.2 | Ground Sample Distance: 4,5 m dall’orbita di 500 km | Test | Sistema | MTF alla frequenza di Nyquist di almeno 0,12 sul bersaglio a barre da 4 m |
| 1.6.1 | Ground Track Repeat: ogni 3 giorni | Analisi | Sistema | La propagazione dell’orbita mostra una ripetizione di 3 giorni ± 1 ora |
| 2.1 | Pointing Accuracy: entro 0,1 gradi | Test | Sottosistema | Errore di al massimo 0,1 gradi su ciascuno di 20 obiettivi comandati |
| 3.1 | Orbit Average Power: almeno 30 W a fine vita (in precedenza 28 W) | Test | Sottosistema | Potenza media orbitale a fine vita prevista dalla potenza di picco misurata |
| 3.2 | Battery Capacity: almeno 77 Wh a inizio vita | Test | Componente | Capacità misurata di almeno 77 Wh a C/2 e 20 °C |
| 3.4 | Bus Regulation: 12 V entro il 2% | Ispezione | Componente | Bus entro 11,76–12,24 V con tutti i gradini di carico |
| 6.1 | Contact Scheduling: 48 ore di anticipo | Dimostrazione | Sistema | Contatti prenotati con 48 h di anticipo per 14 giorni consecutivi durante la prova generale |
| 6.5 | Planning Cycle Time: entro 100 minuti | Analisi | Sistema | La simulazione Monte Carlo rispetta i 100 minuti con una probabilità di almeno il 90% |
| 2.5 | Safe Mode Recovery: «quickly … as appropriate» | (nessuno) | (nessuno) | (nessuno) |
Compaiono tutti e quattro i metodi, su tre livelli. La capacità della batteria si testa sul solo pacco, perché lì la proprietà è pienamente presente; l’accuratezza di puntamento richiede il sottosistema di assetto su un tavolo a cuscinetto d’aria; la ripetizione della traccia al suolo è una proprietà dell’orbita e va all’analisi. 6.5 è verificato da un’analisi probabilistica della sequenza temporale delle operazioni, il tipo di controllo illustrato dalla guida Monte Carlo. Il criterio di 3.1 è una previsione basata su una misura: il test misura la potenza di picco dei pannelli, e un’equazione nel budget di potenza la trasforma in un valore medio orbitale. 2.5 non ha metodo perché, così come è scritto, non è verificabile.
I risultati e le campagne di test
I 19 casi di test di verifica si trovano in due suite: TS-1 Spacecraft Qualification Tests (15 casi di test, dai test al banco ottico alle analisi) e TS-2 Communications and Ground Tests (4). Una terza suite, TS-3 Mission Validation, contiene VAL-01–VAL-03, che verificano esigenze degli stakeholder anziché requisiti, quindi la RVTM li esclude (si veda verifica e validazione). Ogni risultato registrato riporta il tester, la data, la build (versione del software di volo) e l’articolo di prova (numeri di serie dell’hardware) e, se c’è, il file di evidenza.
TC-04 Pointing Accuracy Test è fallito: alla seconda esecuzione, con il software di volo 2.3.1, tre obiettivi su 20 erano fuori da 0,1 gradi, il maggiore a 0,14 gradi, e si sospetta l’attrito delle ruote. Il fallimento ha un problema collegato al caso di test e, tramite esso, ai requisiti 2.1 e 2.2. TC-09 Safe Mode Entry Test è fallito allo stesso modo (14 secondi contro 10) e ha un proprio problema. Due casi di test, TC-11 UHF Command Test e TC-17 Slew Time Analysis, sono in corso; nella matrice contano come non eseguiti finché non hanno un giudizio.
La campagna sul flatsat è stata eseguita due volte, e i risultati di ogni campagna sono stati salvati come ciclo di test. Il confronto tra i due mostra che cosa ha cambiato la seconda campagna:
- Flatsat Cycle 1: 5 superati su 9. TC-03 e TC-06 non sono stati eseguiti; TC-04 (0,16 gradi su 5 obiettivi) e TC-09 (15 secondi) sono falliti.
- Flatsat Cycle 2: 8 superati su 11. TC-03 e TC-06 superati, l’analisi TC-13 aggiunta e superata, TC-14 aggiunto ma non eseguito. TC-04 e TC-09 sono migliorati (0,14 gradi su 3 obiettivi, 14 secondi) ma restano falliti.
«Migliorato ma ancora fallito» è esattamente ciò che una colonna di stato nasconde e un confronto tra cicli conserva: le correzioni tra le campagne hanno spostato i numeri nella direzione giusta, e nessuno dei due è chiuso.
Leggere la matrice
La matrice è generata dai requisiti e dai casi di test qui sopra; nulla è stato digitato in una tabella. Le schede contano le righe per stato aggregato, e i cinque conteggi sommano i 32 requisiti: 11 superati, 3 falliti, 12 non eseguiti, 3 solo pianificati, 3 non verificati. Leggendola come farebbe un comitato di revisione:
- 11 verificati su 32 (34%). Superamenti tramite test (1.2, 3.2), tramite analisi (1.6.1, 1.7) e tramite ispezione (3.4). Nessuna dimostrazione è ancora stata superata: tutte e tre (5.4, 6.1, 6.2) attendono le prove generali del segmento di terra in TS-2.
- 2.1 e 2.2 falliti a causa di un solo test. TC-04 li verifica entrambi, quindi un fallimento fa fallire due righe. A uno sguardo più attento, 2.2 Pointing Stability ha un secondo problema: il suo criterio è la deriva durante ogni acquisizione di 40 s, ma TC-04 misura solo l’errore di puntamento su ogni obiettivo. Anche un TC-04 superato non dimostrerebbe che 2.2 è soddisfatto. È un rilievo di coerenza del metodo: 2.2 richiede una misura propria, oppure la procedura di TC-04 deve registrare la deriva.
- 4.3 fallito a causa di TC-09. Il problema e un’attività per aumentare la frequenza di polling del watchdog e rieseguire TC-09 sono registrati; la riga resta fallita finché TC-09 non viene superato con il nuovo software.
- 1.6 Revisit Time viene aggregato. Da solo è soltanto pianificato (analisi, nessun evento), ma lo decidono i suoi due figli: 1.6.1 è superato, 1.6.2 Off-Nadir Imaging non è eseguito, quindi 1.6 risulta non eseguito. Una volta superati entrambi i figli, non serve un test separato del padre.
- Solo pianificati: 1.5, 4.4 e 6.5. Ognuno ha un metodo e nessun evento. 4.4 Downlink Encryption non ha nemmeno livello né criteri, quindi il suo piano non è completo.
- Non verificati: 2.5, 3.5 e 6.4. Nessun metodo, nessun evento. Sono anche i tre requisiti più deboli della specifica («quickly … as appropriate», «warm enough (TBD)», «user friendly and/or easy to use»). Le lacune nella matrice tendono a indicare requisiti da riscrivere, non test mancanti.
- 3.1 è sospetto. Si veda la sezione successiva.
Un requisito modificato: 3.1 dopo la PDR
TC-06 Solar Array Power Test è stato superato: il risultato atteso era di almeno 72 W di picco, e i pannelli hanno erogato 75,1 W. Poi 3.1 è stato portato da 28 W a 30 W. Le colonne di stato indicano ancora superato, perché TC-06 è stato effettivamente superato. Il simbolo ⚠ dopo il requisito e dopo TC-06 indica che il superamento è precedente al requisito. Facendo clic su di esso si elencano tutti i collegamenti di 3.1 che la modifica ha reso sospetti:
Per il collegamento di verifica la domanda è concreta: 75,1 W di potenza di picco misurata dimostrano ancora 30 W di media orbitale? Risponde il budget di potenza. La sua equazione EQ-1.3 trasforma la potenza di picco in potenza media orbitale con la frazione illuminata dell’orbita (0,62) e il rendimento del percorso di alimentazione (0,6):
| Potenza di picco | Media orbitale (× 0,62 × 0,6) | Che cosa rappresenta |
|---|---|---|
| 72,0 W | 26,8 W | Risultato atteso di TC-06 |
| 75,1 W | 27,9 W | Risultato misurato di TC-06 |
| 75,3 W | 28,0 W | Necessario per il vecchio 3.1 |
| 80,6 W | 30,0 W | Necessario per il nuovo 3.1 |
Il superamento quindi non può essere riportato: per dimostrare 30 W, i pannelli dovrebbero avere circa 80,6 W di picco, e TC-06 ha misurato 75,1 W su pannelli di qualifica a inizio vita, prima di qualsiasi degrado di fine vita. La revisione fa emergere anche un problema più vecchio, messo in luce dalla modifica: la soglia di 72 W di TC-06 corrisponde a soli 26,8 W di media orbitale, quindi anche rispetto a 28 W il risultato atteso del test non era derivato dal requisito tramite il budget di potenza. L’esito corretto è mantenere sospetto il collegamento, aprire un problema, rivedere il risultato atteso di TC-06 a partire dall’equazione (e decidere con l’ingegnere della potenza se cambiano i pannelli o il margine), poi rieseguirlo. Il contrassegno di sospetto resta finché quella decisione non è registrata, così nessuno legge il vecchio «Superato» come evidenza per 30 W.
La matrice esportata contiene solo i risultati di verifica, non le segnalazioni di sospetto: nella cartella di lavoro scaricata 3.1 risulta Superato. Rivedere le righe sospette nel modello prima di esportarne una copia per una milestone.
Pianificare le righe rimanenti prima della revisione
L’elenco della copertura mostra le 21 righe non ancora verificate (32 meno 11), con i controlli per completarne il piano. Prima della critical design review, il lavoro che delinea è:
- Riscrivere 2.5, 3.5 e 6.4 in modo che siano verificabili, poi dare a ciascuno un metodo, un livello e dei criteri.
- Dare a 4.4 un livello e dei criteri e creare la relativa ispezione; creare le analisi per 1.5 e 6.5.
- Chiudere i fallimenti: TC-04 dopo l’indagine sulle ruote, TC-09 dopo la modifica del watchdog, con la deriva di 2.2 misurata separatamente.
- Decidere su 3.1: rivedere e rieseguire TC-06 rispetto a 30 W.
- Pianificare gli eventi non eseguiti, a partire da TC-19 Array Deployment Test e dai quattro eventi di TS-2, che insieme verificano otto requisiti.
Registrare i conteggi a ogni revisione (qui 11 superati, 3 falliti, 12 non eseguiti, 3 solo pianificati, 3 non verificati) fornisce l’andamento con cui si confronterà la revisione successiva.
Una matrice per prodotto in una linea di prodotti
In questa guida «build» indica ciò su cui è stato eseguito un test: una versione del software e i numeri di serie dell’articolo di prova. Una linea di prodotti è un concetto diverso: più prodotti, come EO-1 Flight e il più economico EO-1 Lite, tenuti in un unico modello, ciascuno come configurazione di prodotto. I loro requisiti si sovrappongono ma non coincidono, e un superamento su un prodotto non verifica l’altro. EO-1 Lite vola con la radio in banda S, quindi il test del collegamento in banda X superato per EO-1 Flight non dice nulla su di esso.
La matrice va quindi letta per prodotto. In Holarch, scegliere una configurazione di prodotto in Visualizza come ▾: la RVTM mostra solo i requisiti di quella configurazione e i risultati registrati per essa, quindi «verificato» significa verificato per quel prodotto, e le sue esportazioni nominano la configurazione. Tutte le configurazioni aggiunge una colonna di stato aggregato per configurazione, con «—» dove un requisito non ne fa parte. Esegui suite in una vista di configurazione registra i risultati come risultati di quella configurazione e compila il campo Configurazione / build con il nome del prodotto; vale comunque la pena registrare la build e l’articolo di prova. Le linee di prodotti richiedono il piano Individual o Team; si veda Linee di prodotti: RVTM e la guida all’ingegneria delle linee di prodotti.
Errori comuni
- Riformulare il requisito come criterio di successo. «L’ADCS punta entro 0,1 gradi» non dice nulla su quanti obiettivi, in quali condizioni o rispetto a quale riferimento.
- Soglie di test non derivate dal requisito. Il risultato atteso di un test dovrebbe discendere dal requisito tramite l’analisi che li collega, cosa che i 72 W di TC-06 non facevano. Controllare i calcoli quando si scrive il test, non quando cambia il requisito.
- Un test per più requisiti senza misurarli tutti. Condividere un test è efficiente, ma solo se la procedura registra ogni grandezza indicata dai requisiti collegati.
- Verificare direttamente i padri. Scrivere per un requisito padre un test che ripete soltanto quelli dei figli raddoppia il lavoro e la documentazione. Verificare le foglie e lasciare che il padre venga aggregato.
- Analisi senza evidenze. Un’analisi è un evento di verifica e richiede un rapporto, una versione e un giudizio come qualsiasi test.
- Collegare un test a un requisito con un collegamento generico «correlato». La matrice conta solo i collegamenti di verifica; un test collegato in qualsiasi altro modo fa sembrare il requisito non verificato.
- Riportare un fallimento a «non eseguito» per riordinare la matrice. Conservare il fallimento e il relativo problema; la cronologia è ciò che chiede un auditor.
- Ignorare le righe sospette all’accettazione. Un superamento precedente al requisito che dichiara di verificare non è un’evidenza per il requisito attuale.
Provarlo in Holarch
- Creare il progetto EO-1: Gestisci progetti → File di progetto ▾ → Nuovo progetto demo → CubeSat (ingegneria dei sistemi guidata). Oppure partire dai propri requisiti in un documento dei requisiti; si veda Requisiti.
- Aprire Verifica → Centro test. In Copertura della verifica, impostare il metodo di ogni requisito con A, R, C e T, scegliere un livello in Livello… e aggiungere i criteri di successo con + Criteri.
- Creare suite e casi di test con + Nuovo ▾ e + Caso di test, e collegare ogni caso di test ai suoi requisiti con + nella colonna Verifica. Anche analisi, ispezioni e dimostrazioni sono casi di test.
- Registrare i risultati con i pulsanti di stato, oppure percorrere una campagna con Esegui suite, che registra per ogni esecuzione il tester, la build (il campo Configurazione / build), l’articolo di prova e il file di evidenza. Dopo un fallimento, fare clic su + Crea Issue.
- Salvare una campagna con Avvia nuovo ciclo… e confrontare le campagne in ⋯ → Cicli di test… della suite.
- Aprire Verifica → RVTM. Fare clic su una scheda di stato per filtrare le righe. Per vedere un contrassegno di sospetto, modificare il testo del requisito 3.1, poi fare clic sul simbolo ⚠ accanto.
- Fare clic su Esporta ▾ per Excel (.xlsx), CSV o Word (.docx). L’esempio scaricabile qui sopra è quell’esportazione.
Il riferimento completo è in Verifica.
Dove andare dopo
- La verifica in Holarch: casi di test, esecuzioni con evidenze, cicli di test e la RVTM su un unico modello.
- Documentazione sulla verifica: attributi di pianificazione, regole di stato, modalità di esecuzione, cicli di test e riferimento della RVTM.
- Documentazione sui requisiti: scrivere e approvare i requisiti, e la pagina Collegamenti da rivedere.