Holarch

Verifica

Verifica

Pianificare come viene verificato ogni requisito, organizzare i casi di test in suite, eseguire i test con risultati dei passaggi ed evidenze, salvare i cicli di test e riportare la copertura nella RVTM.

Come usarlo →

In questa pagina
  1. Panoramica
  2. Concetti
    1. Attributi di pianificazione della verifica
    2. Verification Requirement (LML 2.0)
    3. Casi di test e suite di test
    4. Stato di verifica dei requisiti
    5. Cicli di test
  3. Come usarlo
    1. Quando e perché
    2. Pianificare la verifica di ogni requisito
    3. Creare suite di test e casi di test
    4. Scrivere una procedura passo per passo
    5. Altri modi per creare un caso di test
    6. Eseguire i test e registrare i risultati
    7. Importare i risultati da un altro sistema di test
    8. Salvare un ciclo di test
    9. Riportare la copertura
    10. Esempio pratico: la demo CubeSat EO-1
    11. Suggerimenti e buone pratiche
    12. Errori comuni
    13. Come si collega alle altre funzionalità
  4. Centro test
    1. Intestazione della pagina
    2. Schede di stato e filtri
    3. Scheda della suite
    4. Tabella dei casi di test
    5. Finestra Passi di test
    6. Finestra Esegui suite
    7. Casi di test (Word)
    8. Finestra Cicli di test
    9. Copertura della verifica
    10. File di evidenza
    11. Crea Issue
  5. RVTM
    1. Intestazione della pagina
    2. Schede
    3. Tabella
  6. Scorciatoie
  7. Messaggi
  8. Limiti
  9. Correlati

Panoramica

La verifica risponde a una domanda per ogni requisito: quale evidenza mostra che è soddisfatto?

Holarch conserva tutto ciò che riguarda la verifica nello stesso modello dei requisiti:

  • il piano: metodo, livello e criteri di successo della verifica
  • i casi di test che attuano il piano
  • i risultati di ogni esecuzione
  • la copertura risultante

Poiché tutto si trova in un unico modello, il rapporto di copertura è sempre aggiornato.

Il gruppo Verifica nella barra di navigazione contiene:

PaginaFinalità
RVTMLa matrice di tracciabilità della verifica dei requisiti: ogni requisito con il suo metodo, il livello, i casi di test di verifica, il risultato proprio e il risultato aggregato.
Centro testSuite di test e casi di test, procedure passo per passo, esecuzioni di test con evidenze, cicli di test e copertura della verifica dei requisiti.
Matrice di tracciabilitàQualsiasi relazione come griglia, ad es. requisiti × casi di test. Vedere Matrice di tracciabilità.
Controlli del modelloControlli a regole dell'intero modello, compresi i requisiti foglia non verificati e i test falliti senza una Issue. Vedere Controlli del modello.

Il badge su Verifica nella barra di navigazione conta i test falliti e gli errori dei controlli del modello.

Concetti

Attributi di pianificazione della verifica

Ogni Requirement ha tre attributi di pianificazione:

AttributoValoriSignificato
Verification MethodAnalysis, Demonstration, Inspection, Test (qualsiasi combinazione)Come viene verificato il requisito.
Verification LevelComponent, Subsystem, SystemIl livello di assemblaggio a cui viene verificato.
Success CriteriaTestoIl risultato misurabile che mostra che il requisito è soddisfatto.

Le etichette del requisito includono le etichette di Verification Method corrispondenti (Analysis, Demonstration, Inspection, Test). Impostare l'attributo o un'etichetta aggiorna l'altro come parte della stessa modifica, e un solo annullamento li revoca entrambi. I progetti importati che usano le etichette si comportano quindi come quelli che usano l'attributo.

Verification Requirement (LML 2.0)

Un Verification Requirement è uno Statement che dice che cosa va dimostrato, e come, prima che un requisito conti come soddisfatto. È il modo LML 2.0 di tenere il piano di verifica in un elemento proprio invece che sul requisito. Ha:

AttributoSignificato
Verification MethodAnalysis, Demonstration, Inspection, Test (qualsiasi combinazione; aggiungere altri metodi nello Schema).
Acceptance CriteriaI risultati che la verifica deve raggiungere.
EvidenzeIl tipo di documentazione da raccogliere e consegnare, come un rapporto di prova o un verbale di ispezione.
MotivazionePerché sono stati scelti questo metodo, questi criteri e questa evidenza.

Collegarlo con verifies al requisito (o all'asset) che copre, e con traced to ai casi di test che lo attuano. La RVTM conta allora quei casi di test come verifica del requisito, prende il metodo e i criteri di accettazione dal Verification Requirement quando il requisito non ne ha di propri, ed elenca il Verification Requirement sotto Verificato da.

Le due forme funzionano fianco a fianco: un caso di test che verifica direttamente un requisito (la forma LML 1.x) conta esattamente come prima, e l'etichetta Verification Requirement su un requisito resta disponibile.

Un caso di test può anche indicare l'asset sotto test con evaluates (visto dall'asset: evaluated by).

I progetti creati prima di queste aggiunte conservano il loro schema; Schema → Aggiungi nuovi elementi integrati… aggiunge loro la classe Verification Requirement e la relazione evaluates.

Casi di test e suite di test

Un Test Case verifica i requisiti tramite la relazione verifies (vista dal requisito: verified by). Un caso di test ha:

  • Descrizione: la procedura.
  • Set Up, Risultato atteso, Risultato effettivo.
  • Event Conditions (le condizioni in cui si svolge il test, come ambiente, modalità o carichi simulati) ed Event Constraints (limiti sull'evento di test, come testimoni indipendenti, punti di attesa o regole di campionamento). La finestra di esecuzione li mostra quando sono compilati, e l'esportazione CSV della suite ha una colonna per ciascuno.
  • evaluates: l'asset sotto test.
  • Stato: Non eseguito, In corso, Bloccato, Fallito o Superato.
  • Passi: una procedura numerata facoltativa, ogni passo con Azione, Risultato atteso, Risultato effettivo e Superato/Fallito.
  • Evidenze di esecuzione, scritte da ogni esecuzione registrata: Testato da, Data del test, Configurazione (build o versione sotto test), Test Article (unità o numero di serie) e Test Evidence (un file).
  • Un registro delle esecuzioni: ogni esecuzione registrata con data, stato, tester, configurazione, articolo, risultato effettivo, nome del file di evidenza e risultati dei passi.

Un caso di test può essere scomposto in casi di test figli. Lo stato di un padre viene aggregato dalle sue foglie. Vale la prima regola che corrisponde:

  1. Fallito se una foglia è fallita.
  2. Bloccato se una foglia è bloccata.
  3. Superato se tutte le foglie sono superate.
  4. Non eseguito se nessuna foglia è stata eseguita.
  5. In corso altrimenti.

Una Suite di test è un Artifact con l'etichetta Test Suite. Contiene i suoi casi di test tramite source of (o referenced by nei dati importati). I casi di test che non appartengono ad alcuna suite compaiono sotto Casi di test senza suite.

Stato di verifica dei requisiti

Ogni requisito riceve uno stato proprio dai suoi casi di test di verifica (quelli che lo verificano direttamente e quelli tracciati dai suoi Verification Requirement):

Stato proprioRegola
FallitoUn caso di test di verifica è fallito.
SuperatoUn caso di test di verifica è superato (e nessuno è fallito).
Non eseguitoEsistono casi di test di verifica, nessuno superato o fallito.
Solo pianificatoNessun caso di test, ma è impostato un Verification Method (sul requisito o su uno dei suoi Verification Requirement).
Non verificatoNessun caso di test e nessun Verification Method.

Lo stato aggregato segue la scomposizione (decomposed by). Per un requisito padre:

  • È Superato quando ha un proprio test superato, o quando tutti i suoi requisiti figli sono Superati.
  • È Fallito quando c'è un fallimento in un punto qualsiasi sotto di esso.
  • Altrimenti assume il proprio stato o lo stato del figlio meno coperto, quello più avanzato dei due. L'ordine è Non verificato → Solo pianificato → Non eseguito.

Verificato significa sempre Superato.

Cicli di test

Un ciclo di test è un'istantanea salvata dei risultati di una suite: lo stato e il risultato effettivo di ogni caso di test foglia. Salvarne uno alla fine di ogni campagna, poi reimpostare la suite su Non eseguito per la successiva. Si possono confrontare i cicli tra loro o con i risultati attuali, e ripristinare un ciclo.

Come usarlo

Quando e perché

Pianificare la verifica mentre si scrivono i requisiti, non dopo aver costruito il progetto. Se non si riesce a indicare il metodo e i criteri di successo di un requisito, di solito il requisito non è verificabile così com'è scritto.

Il flusso consueto:

  1. Analisi dei requisiti: impostare Verification Method, Level e Success Criteria su ogni requisito.
  2. Progettazione: scrivere i casi di test e collegarli ai requisiti che verificano. Anche i verbali di analisi, dimostrazione e ispezione sono casi di test.
  3. Integrazione e test: eseguire i casi di test e registrare risultati ed evidenze. Aprire Issue per i fallimenti. Salvare un ciclo di test per ogni campagna.
  4. Revisioni e accettazione: riportare la copertura con la RVTM.

Pianificare la verifica di ogni requisito

Assegnare a ogni requisito un metodo, un livello e criteri di successo. Farlo nella scheda della copertura del Centro test.

  1. Aprire Verifica → Centro test.
  2. Scorrere fino a Copertura della verifica.

Compare ogni requisito non ancora verificato.

  1. Su una riga, fare clic sui pulsanti del metodo per attivare o disattivare i metodi: A (Analisi), R (Dimostrazione), I (Ispezione), T (Test).

Il requisito passa da Non verificato a Solo pianificato.

  1. Scegliere il livello in Livello…: Component, Subsystem o System.
  2. Fare clic su + Criteri.
  3. Digitare il risultato misurabile e fare clic su Salva.

Il pulsante ora riporta Criteri ✓.

Questi attributi si possono modificare anche nell'ispettore di qualsiasi requisito.

Creare suite di test e casi di test

  1. Nell'intestazione della pagina, fare clic su + Nuovo ▾ → Suite di test….
  2. Inserire un Numero (ad es. TS-3), un Nome e una Descrizione.
  3. Fare clic su Crea.

Compare una nuova scheda della suite.

  1. Sulla scheda della suite, fare clic su + Caso di test.
  2. In Crea elemento, assegnare un nome al caso di test.

Il caso di test viene aggiunto alla suite con stato Non eseguito.

  1. Nella riga del caso di test, fare clic su + nella colonna Verifica.
  2. Scegliere i requisiti che il caso di test verifica.
  3. Digitare il Risultato atteso nella riga.
  4. Scrivere la procedura nella descrizione del caso di test, nell'ispettore o nella vista dell'elemento.

Scrivere una procedura passo per passo

I passi sono facoltativi. Un caso di test senza passi viene eseguito per intero.

  1. Nella riga del caso di test, fare clic su + Passi.
  2. Fare clic su + Aggiungi passo per ogni passo.
  3. Compilare Azione e Risultato atteso per ogni passo.
  4. Riordinare con ↑ e rimuovere un passo con ×.
  5. Fare clic su Applica.

Il pulsante ora riporta Passi (N).

Altri modi per creare un caso di test

  • Dalla scheda della copertura: in Copertura della verifica, fare clic su + Caso di test sulla riga di un requisito. Crea Verify <requirement name>, già collegato al requisito, sotto Casi di test senza suite.
  • Con l'IA: selezionare un requisito in un documento o nella sua vista dell'elemento. Scegliere ✦ IA ▾ → Genera caso di test…. L'IA prepara una bozza con nome, passi ordinati, preparazione, risultato atteso e metodo. Esaminare la bozza in Esamina caso di test — <requirement>, poi fare clic su Crea caso di test. Vedere IA.

Eseguire i test e registrare i risultati

La modalità di esecuzione guida attraverso i test uno alla volta e registra ogni risultato con la sua evidenza.

  1. Facoltativo: per eseguire solo alcuni test, fare clic su un filtro di stato come Non eseguito (12). Vengono eseguiti solo i casi di test foglia con quello stato.
  2. Nell'intestazione della pagina, fare clic su Esegui suite.

La finestra Esegui suite si apre sul primo test Non eseguito.

  1. Compilare una volta i campi della sessione: Tester (predefinito il proprio nome), Configurazione / build e Test Article. In una linea di prodotto vista come Tutte le configurazioni, scegliere prima Registra risultati per: la configurazione su cui è stato eseguito il test, oppure Nessuna configurazione. ✔ Superato, ✘ Fallito e Bloccato restano in attesa finché non si sceglie (Linee di prodotto).
  2. Leggere Procedura, Set Up, Passi e Risultato atteso del test.
  3. Eseguire il test. Per ogni passo, compilare il valore effettivo e scegliere Superato/Fallito.
  4. Descrivere il Risultato effettivo.
  5. Controllare Data e ora.
  6. Fare clic su Allega evidenza… per aggiungere un log, un file di dati o una foto.
  7. Fare clic su ✔ Superato, ✘ Fallito o Bloccato.

La finestra passa al test successivo. Per spostarsi senza registrare, fare clic su Salta. Per tornare indietro, fare clic su ‹ Precedente.

  1. Dopo ✘ Fallito, fare clic su + Crea Issue, poi su Successivo ›.

La finestra riporta Registrato. Creare una Issue per tracciare il fallimento; viene collegata a questo caso di test e ai requisiti che verifica.

  1. Ripetere i passi da 4 a 10 per ogni test.

Alla fine, Esecuzione completata mostra una barra di stato con i conteggi. Revisione dall'inizio torna al primo test.

Ogni risultato registrato si può annullare con un solo annullamento. Fa tutto quanto segue:

  • aggiorna Status, Actual Result, Tested By, Test Date, Configuration, Test Article e Test Evidence del caso di test
  • salva i risultati dei passi
  • aggiunge una voce al registro delle esecuzioni del test

Per registrare un risultato senza la modalità di esecuzione, fare clic sullo stato nella riga di un caso di test (per esempio Non eseguito) e scegliere quello nuovo, poi fare clic sul testo di Risultato effettivo e digitare il risultato. Anche Enter o F2 su un valore con lo stato attivo lo apre; Escape lo lascia invariato.

Per eseguire di nuovo un test, fare clic su ↻ Riesegui nella sua riga (mostrato una volta che il test ha un risultato). La finestra di esecuzione si apre solo su quel test, senza reimpostarlo su Non eseguito; il nuovo risultato viene aggiunto al suo registro delle esecuzioni accanto a quelle precedenti.

Importare i risultati da un altro sistema di test

Quando i test vengono eseguiti altrove, come su un banco di prova automatico o in una pipeline CI, importarne i risultati invece di digitarli. Holarch legge report JUnit XML (scritti dalla maggior parte dei test runner e dei sistemi CI), file CSV e cartelle di lavoro Excel (.xlsx).

  1. Nell'intestazione della pagina, fare clic su Importa risultati….
  2. Fare clic su Scegli file… e selezionare il file dei risultati.
  3. Scegliere quali casi di test abbinare: Abbina casi di test in (tutti, o una suite) e Abbina per (Numero, poi nome, Numero, Nome o ID globale).
  4. Per un file CSV o Excel, controllare le colonne che Holarch ha dedotto dall'intestazione: Colonna Caso di test e Colonna Stato sono obbligatorie; le colonne Risultato effettivo, Data, Tester, Configurazione e Test Article sono facoltative.
  5. Facoltativo: compilare Testato da, Data del test, Configurazione / build e Test Article per ciò che il file non riporta.
  6. Controllare l'anteprima: ogni caso di test abbinato con il suo cambio di stato, e le righe che non corrispondono ad alcun caso di test, che corrispondono a più casi di test o che sono state saltate.
  7. Fare clic su Registra N risultati.

Tutti i risultati vengono registrati, e un solo annullamento revoca tutto. Ciascuno aggiorna Status, Tested By, Test Date, Configuration e Test Article del caso di test, e aggiunge al suo registro delle esecuzioni una voce che indica il file. Non viene creato nulla.

  • Parole di stato: pass, passed, ok e success registrano Superato; fail, failed, failure ed error registrano Fallito; blocked, in progress e not run registrano gli stati corrispondenti. I test saltati (JUnit <skipped>, o skipped nella colonna dello stato) restano invariati.
  • Risultato effettivo: un messaggio di fallimento JUnit, o la colonna Actual Result, diventa il Risultato effettivo. Senza di essi, il Risultato effettivo resta com'era.
  • Casi di test ripetuti: quando un file nomina due volte un caso di test, prevale la riga successiva; quella precedente viene elencata come saltata.
  • Casi di test padre: un caso di test con casi di test figli non viene registrato; il suo stato si aggrega dai figli.

Per registrare risultati da una pipeline CI senza aprire Holarch, inviarli alla REST API (POST …/test-results), oppure lasciare che un client IA li proponga con lo strumento MCP record_test_results. Entrambi registrano un risultato allo stesso modo di Importa risultati…, voce del registro delle esecuzioni compresa (Risultati dei test).

Salvare un ciclo di test

Salvare un ciclo al termine di una campagna di test.

  1. Sulla scheda della suite, fare clic su Avvia nuovo ciclo… (o ⋯ → Avvia nuovo ciclo…).
  2. In Avvia un nuovo ciclo di test, assegnare un nome al ciclo (predefinito Test Cycle N).
  3. Controllare Configurazione / build e Test Article. Entrambi partono dal valore registrato più spesso nell'esecuzione; vengono stampati nel rapporto di test del ciclo.
  4. Fare clic su uno dei seguenti:
    • Registra e avvia nuovo: salva i risultati, poi imposta ogni Status della suite su Non eseguito e cancella i risultati effettivi.
    • Solo registra: salva i risultati e li mantiene sui casi di test.

Un ciclo conserva per ogni caso di test stato, risultato effettivo, tester, data del test, configurazione, test article, nome del file di evidenza e risultati dei passi.

Per visualizzare, confrontare, ripristinare o eliminare i cicli in seguito, fare clic su ⋯ → Cicli di test… (N) sulla scheda della suite. Per un deliverable, fare clic su ⋯ → Rapporto di test…: scrive il rapporto di test del ciclo come Word, Excel, CSV o pagina web (vedere Generazione di documenti).

Riportare la copertura

  1. Aprire Verifica → RVTM.

La prima scheda mostra verificati / totale con una barra di avanzamento. Le altre schede contano Fallito, Non eseguito, Solo pianificato e Non verificato.

Le colonne del numero e del requisito restano visibili mentre una tabella larga scorre lateralmente. Dove un chip di stato è abbreviato per entrare (in alcune lingue), puntarlo per il testo completo.

  1. Facoltativo: fare clic su una scheda per elencare solo quei requisiti.
  2. Fare clic su Esporta ▾.
  3. Scegliere Excel (.xlsx), CSV o Word (.docx).

Esempio pratico: la demo CubeSat EO-1

Creare la demo con Gestisci progetti → File di progetto ▾ → Nuovo progetto demo, poi:

  1. Aprire Verifica → RVTM.

La prima scheda riporta 11 / 32 Verificato (superato). Le altre riportano 3 Fallito, 12 Non eseguito, 3 Solo pianificato e 3 Non verificato.

  1. Trovare 1.6 Revisit Time.

Propria è Solo pianificato: il metodo è Analysis, ma non ha un test proprio. Stato è Non eseguito. Lo stato si aggrega dai suoi figli:

  • 1.6.1 Ground Track Repeat è Superato tramite TC-13.
  • 1.6.2 Off-Nadir Imaging è verificato da TC-14, che è Non eseguito.

Il figlio meno coperto è Non eseguito, che è più avanzato di Solo pianificato.

  1. Fare clic sulla scheda Fallito.

2.1 Pointing Accuracy e 2.2 Pointing Stability falliscono tramite TC-04 Pointing Accuracy Test. 4.3 fallisce tramite TC-09 Safe Mode Entry Test.

  1. Aprire Verifica → Centro test.

Le schede riportano 22 casi di test in 3 suite. In TS-1 Spacecraft Qualification Tests, la riga di TC-04 mostra J. Alvarez · 2026-10-02 10:15 · 📎 tc04-pointing-errors.csv e Issue: Test failure: Pointing Accuracy Test.

  1. Nella riga di TC-04, fare clic su Passi (3).

Il passo 3 è fallito con 0.14 degrees on targets 7, 12 and 18.

  1. Su TS-1, fare clic su ⋯ → Cicli di test… (2).
  2. Confrontare Flatsat Cycle 1 → Flatsat Cycle 2.

TC-03 e TC-06 sono passati da Non eseguito a Superato. Le righe modificate sono evidenziate.

Ora rieseguire TC-09 dopo la correzione del watchdog:

  1. Fare clic sul filtro Fallito (2), poi su Esegui suite.

L'esecuzione si apre su TC-04.

  1. Fare clic su Salta per raggiungere TC-09.
  2. Inserire Flight software 2.3.2 come Configurazione / build.
  3. Digitare Safe mode in 8 seconds come Risultato effettivo.
  4. Fare clic su ✔ Superato.
  5. Aprire di nuovo la RVTM.

4.3 è ora Superato, e la prima scheda riporta 12 / 32.

Infine, pianificare un requisito non verificato:

  1. In Copertura della verifica, trovare 2.5 Safe Mode Recovery (Non verificato).
  2. Fare clic su T, scegliere System in Livello… e aggiungere i criteri.
  3. Fare clic su + Caso di test per avviarne il test.

Suggerimenti e buone pratiche

  • Scrivere i criteri di successo come numeri misurabili con condizioni, ad esempio Range ≥ 25 km in 3 of 3 flights at 20 °C. Non riformulare il requisito.
  • Verificare i requisiti foglia e lasciare che i padri si aggreghino. Il controllo del modello Requirement.10 segnala i requisiti foglia senza un caso di test di verifica. I padri sono coperti tramite i loro figli.
  • Usare un caso di test per ogni evento di verifica, anche per Analysis, Inspection e Demonstration. La RVTM mostra allora le evidenze per ogni metodo.
  • Registrare la configurazione a ogni esecuzione. Quando un risultato cambia tra un ciclo e l'altro, il registro delle esecuzioni mostra quale build lo ha causato.
  • Aprire una Issue per ogni fallimento. Il controllo del modello TestCase.1 segnala i casi di test falliti senza una Issue collegata.

Errori comuni

  • Tentare di impostare Superato su un caso di test padre. I padri mostrano lo stato aggregato dei loro figli e non si possono impostare. Registrare i risultati sulle foglie.
  • Collegare un requisito al suo test con traced to invece di verifies. Il requisito resta Solo pianificato o Non verificato. Usare + nella riga del caso di test, che crea verifies.
  • Un caso di test che non verifica nulla. Conta nel Centro test ma mai nella RVTM.

Come si collega alle altre funzionalità

  • Alimentato da:
    • i requisiti e la loro scomposizione (Requisiti)
    • i requisiti di interfaccia sui Conduit (Interfacce)
    • i risultati di simulazione, che possono verificare un requisito tramite una Measure (Simulazione)
  • Alimenta:
    • la RVTM e le sue esportazioni
    • le Issue per i fallimenti, che si possono pianificare come attività su una bacheca Kanban (Gestione del progetto)
    • Controlli del modello (Requirement.10, TestCase.1)
    • Le schede di stato della Home e il badge Verifica
    • baseline e pacchetti di revisione
  • Matrice di tracciabilità: Apri nella matrice sulla scheda della copertura apre requisiti × casi di test per verified by; ⋯ → Apri in ▸ Matrice di tracciabilità di una suite ne apre la gerarchia.

Centro test

Indirizzo: test-center; test-center?root=<id> espande, scorre fino a e seleziona un caso di test o una suite (usato da Apri in ▾ → Centro test su un caso di test).

ControlloAzione
Esporta ▾RVTM (CSV), RVTM (Excel), RVTM (Word).
+ Nuovo ▾Suite di test…, Caso di test… (un caso di test non assegnato).
Importa risultati…Registra i risultati da un file JUnit XML, CSV o Excel sui casi di test corrispondenti, dopo un'anteprima. Vedere Importare i risultati da un altro sistema di test.
Esegui suiteApre la modalità di esecuzione per ogni caso di test foglia (o solo per quelli che corrispondono al filtro di stato). Disattivato quando non ci sono casi di test.

Schede di stato e filtri

  • Casi di test: numero di casi di test foglia e numero di suite.
  • Eseguiti: percentuale e conteggio delle foglie che non sono Non eseguito.
  • Superati: percentuale e conteggio delle foglie superate.
  • Falliti: numero di foglie fallite, con il numero di quelle bloccate.

Sotto le schede:

  • Una barra di stato.
  • I filtri Tutti (N), Non eseguito, In corso, Bloccato, Fallito e Superato, ciascuno con il suo conteggio. Fare di nuovo clic su un filtro per cancellarlo.
  • A destra, l'ordinamento delle suite: Per numero, Per nome o Per data di modifica.
  • Cerca casi di test: cerca in numero, nome o descrizione. Una suite il cui nome corrisponde mostra tutti i suoi casi di test.

Scheda della suite

L'intestazione mostra ▾/▸ (comprimi), il collegamento alla suite, il chip Suite di test, lo stato aggregato, il numero di test, il numero di cicli, una mini barra di stato e:

  • + Caso di test — crea un caso di test in questa suite.
  • Avvia nuovo ciclo… — registra i risultati come ciclo e reimposta la suite (vedere sopra).
  • ⋯ (opzioni della suite). Le voci seguono il flusso di lavoro dei test: eseguire e registrare, riportare, aprire, poi duplicare ed eliminare.
ElementoAzione
Esegui ciclo…Apre la modalità di esecuzione solo per i casi di test di questa suite, a partire dal primo Non eseguito. Disattivato quando la suite non ha casi di test.
Avvia nuovo ciclo…Come il pulsante della scheda: registra i risultati come ciclo, poi reimposta la suite.
Cicli di test… (N)Apre l'elenco dei cicli di test.
Rapporto di test…Apre Rapporto di test sull'ultimo ciclo: scegliere il ciclo (o i risultati attuali) e il formato (Word per impostazione predefinita), poi Esporta.
Casi di test (Word)…Scrive un documento Word con i casi di test della suite.
Esporta CSV<suite>.csv: Number, Name (rientrato secondo la profondità), Description, Set Up, Expected Result, Actual Result, Status, Status Roll-Up, Verifies.
Esporta JSON<suite>.json: la suite, i suoi cicli di test e l'albero dei casi di test con i requisiti verificati.
Apri come documentoApre la suite come documento.
Apri in ▸Vista elemento (la vista dell'elemento della suite) o Matrice di tracciabilità (la matrice con la suite come radice).
DuplicaCopia la suite e i suoi casi di test (<suite> (Copy)) con i loro collegamenti verifies, gli stati reimpostati su Non eseguito e i risultati effettivi cancellati. Notifica: Duplicato come <name>.
Elimina…Elimina suite di test: elimina la suite; spuntare Also delete its N test case(s) per eliminare anche quelli.

Tabella dei casi di test

ColonnaContenuto
NumeroNumero del caso di test.
Caso di test e proceduraNome (collegamento alla vista dell'elemento) e descrizione; ▾/▸ per i casi di test figli.
Risultato attesoIl testo (fino a tre righe; fare clic per modificarlo in un riquadro), e + Passi / Passi (N). I padri mostrano —.
Risultato effettivoIl testo (fare clic per modificarlo); sotto, il tester e la data dell'ultima esecuzione, con configurazione e articolo al passaggio del puntatore e un collegamento 📎 al file di evidenza. Un test fallito mostra Issue: <issue> o + Crea Issue.
StatoUna pillola di stato (Non eseguito, In corso, Bloccato, Fallito, Superato); farvi clic per sceglierne un altro. ↻ Riesegui accanto, una volta che il test ha un risultato. I padri mostrano lo stato aggregato.
VerificaI requisiti verificati, ciascuno con × (Rimuovi verifies, mostrato quando si punta il requisito), e + (Collega un requisito verificato da questo test).

Fare clic su una riga al di fuori dei suoi campi per mostrare il caso di test nell'ispettore. Suite vuota: Questa suite non ha casi di test. Aggiungerne uno con + Caso di test. Nessuna corrispondenza: Nessun caso di test corrisponde al filtro. Cancellare il filtro per vederli tutti.

Finestra Passi di test

Titolo: Passi di test — <test case>. Le colonne della tabella:

  • #
  • Azione (segnaposto Fare questo)
  • Risultato atteso (Attendersi questo)
  • Risultato effettivo (Osservato)
  • Superato/Fallito (—, Superato, Fallito)
  • ↑ (Sposta su) e × (Rimuovi passo)

Sotto la tabella: + Aggiungi passo, Annulla e Applica. I passi vuoti vengono scartati con Applica. Senza passi la finestra mostra Ancora nessun passo. Un caso di test senza passi viene eseguito per intero.

Finestra Esegui suite

ParteContenuto
SessioneTester (Il proprio nome), Configurazione / build (Build, versione o configurazione), Test Article (Unità o numero di serie), Fase (Development, Qualification, Acceptance, Integration, Operational) ed Evento (per esempio Vuoto termico 1). Precompilati dall'ultima esecuzione del primo test; Fase ed Evento vengono salvati su ogni test registrato.
AvanzamentoTest N of M, il nome della suite e una barra di avanzamento.
HeadingCaso di test, stato attuale e run N times, last <date>.
CorpoProcedura, Set Up, Passi (Azione, Atteso, Effettivo, Superato/Fallito), Risultato atteso, Risultato effettivo, Data e ora, Evidenza (Allega evidenza… e i nomi dei file, oppure Attuale: <file> / Nessun file). Si possono scegliere più file: il primo diventa l'evidenza del test, gli altri vengono aggiunti al suo elenco di evidenze.
Pulsanti‹ Precedente, Salta, Bloccato, ✘ Fallito, ✔ Superato; Chiudi in basso.

Casi di test (Word)

  • Nome del file: predefinito <suite> Test Cases.
  • Seleziona attributi: Numero, Descrizione, Set Up, Risultato atteso, Risultato effettivo, Stato, Aggregazione dello stato, Verifica, più ogni altro attributo di Test Case (Tested By, Test Date, Configuration, Test Article, Test Evidence e quelli personalizzati). Numero, Descrizione, Risultato atteso, Risultato effettivo e Stato sono spuntati per impostazione predefinita.
  • Scarica: scrive una sezione del titolo (numero di casi di test e data di generazione) e una sezione per ogni caso di test.

Finestra Cicli di test

Titolo: Cicli di test — <suite>.

  • Tabella dei cicli: Ciclo di test, Salvato e Risultati (mini barra di stato e N/M passed), con Visualizza, Report… (il rapporto di test del ciclo), Ripristina ed Elimina su ogni riga.
  • Ripristina chiede Riscrivere nei casi di test gli stati e i risultati effettivi salvati in “<name>”?
  • Confronta: due selettori (qualsiasi ciclo o Risultati attuali) e una tabella di Caso di test, Prima e Dopo. Le righe modificate sono evidenziate.
  • In basso: Avvia nuovo ciclo… e Chiudi.

Senza cicli la finestra mostra Ancora nessun ciclo di test. “Avvia nuovo ciclo…” registra i risultati attuali e reimposta la suite.

Copertura della verifica

L'ultima scheda della pagina. Usarla per pianificare la verifica e trovare i requisiti che necessitano ancora di test.

  • Intestazione: N di M requisiti verificati da un test superato (P%), con Apri nella matrice.
  • Barra di stato e filtri: Non verificato (N) (il predefinito), Tutti (N) e un filtro per ogni stato.
  • Nota: Verificato = un caso di test di verifica è Superato. Un requisito padre è verificato quando ha un proprio test superato o quando tutti i suoi requisiti figli sono verificati. Pulsanti del metodo: Analisi, Dimostrazione, Ispezione, Test.

Ogni riga mostra, da sinistra a destra:

  • la pillola di stato (puntarla per vedere lo stato proprio quando è diverso)
  • il collegamento al requisito e il numero di test
  • i pulsanti del metodo A R I T
  • Livello…
  • + Criteri, o Criteri ✓ una volta impostati i criteri
  • + Caso di test

Vengono mostrate fino a 300 righe, poi …e altri N. Quando tutti sono verificati, la scheda mostra Ogni requisito è verificato da un test superato.

File di evidenza

Evidenza (n) sotto un caso di test apre il suo elenco di evidenze. Conservare con il test ogni log, foto e scheda dati di un'esecuzione.

  • Aggiungi file… allega uno o più file, e un solo annullamento revoca tutto.
  • Ogni file è un Artifact con l'etichetta Verification Evidence, che contiene il file e a cui il caso di test fa references.
  • Scarica salva un file; Rimuovi ne elimina l'Artifact.

Sotto lo stato, un caso di test mostra la sua Verification Stage e il suo Verification Event quando sono impostati.

Crea Issue

+ Crea Issue compare su un test fallito, nella riga e nella modalità di esecuzione. Crea una Issue:

  • denominata Test non superato: <test case>, con stato Open
  • con una descrizione che contiene i risultati atteso ed effettivo
  • collegata al caso di test (causes, o related to) e a ogni requisito che il test verifica

La notifica riporta Creata la Issue <name>.

Con il programma formale attivo, un test fallito mostra invece Disposizione…. Registra una non conformità e, se necessario, una concessione. Vedere Programma formale.

RVTM

Indirizzo: rvtm, con rvtm?status=<status> e ?q=<text>.

Intestazione della pagina

ControlloAzione
Esporta ▾Excel (.xlsx) (RVTM.xlsx), CSV (RVTM.csv) o Word (.docx) (Requirements Verification Traceability Matrix, una sezione per ogni requisito con il suo enunciato).
Centro testApre il Centro test.

Tutte e tre le esportazioni contengono Requirement Number, Requirement, Verification Method, Verification Level, Success Criteria, Verified By (ogni caso di test con il suo stato aggregato), Own Status, Status (aggregato), Verification Stage e Verification Event. Con il programma formale attivo aggiungono Deviations and Waivers e Closure.

Schede

Verificato (superato) mostra verificati / totale con una barra di avanzamento. Fallito, Non eseguito, Solo pianificato e Non verificato mostrano dei conteggi.

La RVTM elenca i requisiti propri del progetto. I requisiti in un documento con l'etichetta Customer Specification sono esclusi dalle sue righe e dai totali; la Matrice di conformità li valuta, con la verifica dei propri requisiti che rispondono a essi.

Fare clic su una scheda per filtrare la tabella (Sono mostrati solo questi. Fare clic per mostrare tutto.). Fare clic sul chip Stato: <status> × per cancellare il filtro.

Tabella

ColonnaContenuto
#Numero del requisito.
RequisitoNome, con collegamento alla vista dell'elemento. Un ⚠ dopo il nome indica che uno dei collegamenti del requisito va rivisto: il requisito è cambiato, oppure è cambiato l'elemento a monte.
MetodoMetodi di verifica, oppure —.
LivelloVerification Level, oppure —.
Verificato daCasi di test di verifica, oppure No test. Un ⚠ dopo un caso di test indica che il suo collegamento di verifica va rivisto; il tooltip mostra che cosa è cambiato e quando.
FaseFasi di verifica dei casi di test di verifica, oppure —.
EvidenzeNumero di file di evidenza dei casi di test più i rapporti che verificano direttamente il requisito. Farvi clic per aggiungere un rapporto, come un'analisi.
PropriaStato proprio.
StatoStato aggregato.
Deroga/ConcessioneSolo programma formale. Deroghe e concessioni relative al requisito con il loro stato, oppure Disposizione… per un risultato fallito.
ChiusuraSolo programma formale. Approva…, Closed con nome e data e Riapri, oppure Open. Vedere Programma formale.

RVTM | VCRM cambia la tabella. La VCRM (matrice di riferimento incrociato della verifica) è la vista di pianificazione: le colonne I, A, D e T indicano i metodi (ispezione, analisi, dimostrazione, test), poi Livello, Fase, Evento, Verificato da e Stato.

Filtra per numero o nome restringe le righe. Fare clic su una riga (o premere Enter) per mostrare il requisito nell'ispettore.

Puntare il ⚠ di un requisito per vedere quali elementi sono cambiati dall'ultima revisione dei suoi collegamenti. Farvi clic per aprire la finestra Collegamenti da rivedere — <requirement>: ogni collegamento da rivedere a entrambe le estremità del requisito, con Differenze e Segna come rivisto…, e Apri Collegamenti da rivedere per l'elenco completo (Collegamenti da rivedere). Le esportazioni escludono i contrassegni di sospetto: le loro colonne di stato contengono solo i risultati della verifica.

Scorciatoie

TastoDoveAzione
Enter / SpaceRiga della RVTMMostra il requisito nell'ispettore
↑ / ↓RVTMSpostarsi tra le righe
EscRVTMCancella la selezione
⌘K / Ctrl+KOvunqueCercare azioni come Esporta RVTM (Excel)

Messaggi

MessaggioSignificato
Nome o numero obbligatorioCreazione di una suite senza nessuno dei due.
Niente da eseguire: nessun caso di test corrisponde. Aggiungere casi di test o cancellare il filtro di stato.Esegui suite non ha trovato alcun caso di test foglia corrispondente al filtro.
Ciclo di test salvato / Ciclo di test salvato; stati reimpostati su Non eseguitoSolo registra / Registra e avvia nuovo.
Creato il caso di test <name>+ Caso di test nella scheda della copertura.
<file> (name only: over 10 MB)Il file di evidenza supera il limite per file (10 MB nel piano Free, calcolati come 10 × 1.048.576 byte); viene registrato solo il suo nome.
Questo progetto non ha requisiti. Scrivere o importare requisiti, quindi collegare casi di test con “verified by”.La RVTM è vuota.
Nessun requisito corrisponde a questo filtro. Cancellare il filtro per mostrare tutti i requisiti.Il filtro della RVTM nasconde tutte le righe.
Spuntare la casella per creare questo caso di test.Genera caso di test ha trovato un indirizzo web nella bozza dell'IA; confermarlo prima di creare.

Limiti

  • File di evidenza dei test: 10 MB (10.485.760 byte) per file con il piano Free; 25 MB (26.214.400 byte) con i piani a pagamento. I file più grandi vengono registrati solo per nome. Le evidenze contano ai fini dello spazio di archiviazione del progetto (vedere Archiviazione e limiti).
  • La scheda della copertura mostra i primi 300 requisiti del filtro corrente.
  • Sul caso di test si conserva un solo file di evidenza per caso di test (il più recente); il registro delle esecuzioni conserva il nome del file di evidenza di ogni esecuzione.