Holarch

Guia · Verificação

Verificação versus validação na engenharia de sistemas

Ouvir este guia 29 min

A verificação mostra que um sistema atende aos seus requisitos; a validação mostra que ele atende às necessidades dos stakeholders no uso pretendido. Este guia cobre as definições da ISO/IEC/IEEE 15288, aquilo contra o que cada uma checa, onde as duas acontecem no ciclo de vida, os quatro métodos de verificação, as atividades de validação, a verificação e a validação de modelos, a rastreabilidade por trás das duas e os erros que as confundem, com um exemplo prático em um CubeSat 6U.

Nesta página
  1. A resposta curta
  2. Definições na ISO/IEC/IEEE 15288
  3. Contra o que cada uma checa
  4. Quando cada uma acontece no ciclo de vida
    1. O V
    2. V&V incremental e contínua
  5. Os quatro métodos de verificação
  6. Atividades de validação
    1. Validação para o EO-1
  7. Verificação e validação de modelos
  8. A rastreabilidade por trás das duas
  9. Evidência de verificação na prática: TC-06
  10. Verificação vs validação comparadas
  11. Confusões comuns
  12. Como o Holarch registra cada uma
    1. Experimente no Holarch
  13. Perguntas frequentes
    1. O que vem primeiro, a verificação ou a validação?
    2. Uma atividade pode fazer as duas coisas?
    3. Quem executa a validação?
    4. O que acontece quando a validação falha, mas a verificação foi aprovada?
  14. Para onde ir a seguir

A resposta curta

A verificação pergunta: construímos o sistema do jeito certo? Ela compara o sistema com seus requisitos, declaração por declaração, e produz evidência de que cada um é atendido. A validação pergunta: construímos o sistema certo? Ela compara o sistema com o que seus stakeholders precisam e com o modo como vão usá-lo, e produz evidência de que o sistema faz o trabalho para o qual foi comprado.

As duas perguntas soam parecidas e muitas vezes são feitas pela mesma equipe com o mesmo equipamento, mas podem dar respostas diferentes. Um sistema pode ser aprovado em todos os requisitos e ainda assim falhar com seus usuários, porque um requisito faltava, estava errado ou foi escrito para um uso diferente do real. Um sistema também pode servir bem aos usuários e falhar em um requisito que acaba não importando. A engenharia de sistemas mantém as duas separadas porque cada uma pega erros que a outra não consegue ver.

A formulação “construir o produto do jeito certo” versus “construir o produto certo” costuma ser atribuída aos primeiros trabalhos de Barry Boehm sobre engenharia de software, e continua sendo o jeito mais curto de lembrar a diferença.

Definições na ISO/IEC/IEEE 15288

A ISO/IEC/IEEE 15288, a norma internacional para processos do ciclo de vida de sistemas, trata a verificação e a validação como dois processos técnicos separados: o processo de verificação (cláusula 6.4.9) e o processo de validação (cláusula 6.4.11). A integração fica antes da verificação, e a transição fica entre as duas: o sistema é verificado como construído, entregue ao seu ambiente de operação e então validado lá.

  • Verificação é a confirmação, por meio de evidência objetiva, de que os requisitos especificados foram cumpridos. Seu propósito na norma é mostrar que o sistema ou elemento atende aos seus requisitos e características, e relatar qualquer anomalia encontrada no caminho.
  • Validação é a confirmação, por meio de evidência objetiva, de que os requisitos para um uso ou aplicação pretendidos específicos foram cumpridos. Seu propósito é mostrar que o sistema, quando usado no ambiente pretendido, cumpre as necessidades dos stakeholders e alcança seus objetivos de negócio ou de missão.

As duas definições se apoiam em evidência objetiva: um resultado medido, um relatório de análise, um registro de inspeção ou uma demonstração observada que outra pessoa poderia checar. Opinião, “parecia bom” e um teste que ninguém anotou não são evidência. A diferença entre as duas está na referência com que cada uma compara.

O INCOSE Systems Engineering Handbook (5ª edição, seções 2.3.5.9 e 2.3.5.11) segue a mesma divisão, e o NASA Systems Engineering Handbook (NASA/SP-2016-6105 Rev 2) lhes dá processos de realização do produto separados: verificação do produto (seção 5.3) e validação do produto (seção 5.4). O manual da NASA diz com clareza algo útil: a verificação mostra que o produto foi construído conforme a especificação; a validação mostra que a especificação, e portanto o produto, era a certa.

Contra o que cada uma checa

O jeito mais claro de distinguir as duas é perguntar com o que a evidência é comparada.

  • A verificação checa contra os requisitos. A referência são as declarações “shall” das especificações do sistema, dos subsistemas e dos componentes. Elas são escritas pela equipe de engenharia, combinadas com os stakeholders e formuladas para que um teste, uma análise, uma inspeção ou uma demonstração possa dar aprovado ou reprovado. A ISO/IEC/IEEE 29148 lista verificável entre as características que todo requisito deve ter (cláusula 5.2.5) exatamente por esse motivo: um requisito que não pode ser verificado não pode fazer parte da verificação de forma alguma.
  • A validação checa contra as necessidades dos stakeholders e o uso pretendido. A referência é o que usuários, operadores, clientes e outros stakeholders esperam, nos próprios termos deles, junto com as condições de uso real: os cenários operacionais, o ambiente, as pessoas que vão operar o sistema e as medidas de efetividade que dizem o que “bom” significa para eles. As necessidades muitas vezes são qualitativas, então a validação se apoia em cenários, simulação, ensaios e no julgamento dos stakeholders, além de medições.

A comparação entre necessidades e requisitos do guia de rastreabilidade resume isso em uma linha: necessidades são validadas, requisitos são verificados. Todo o resto deste guia decorre disso.

Quando cada uma acontece no ciclo de vida

O V

O modelo em V desenha o ciclo de vida como um V. O lado esquerdo desce pela decomposição e pela definição: conceito de operações, requisitos do sistema, projeto de alto nível, projeto detalhado. A implementação fica embaixo. O lado direito sobe pela integração e pela checagem, e cada etapa à direita responde à etapa em frente a ela:

Lado direitoCheca contra (lado esquerdo)Tipo
Verificação de unidadeProjeto detalhadoVerificação
Verificação de subsistemaProjeto de alto nívelVerificação
Verificação do sistemaRequisitos do sistemaVerificação
Validação do sistemaConceito de operações e necessidades dos stakeholdersValidação

O par do topo é o único par de validação, e é por isso que a validação muitas vezes é imaginada como a última etapa. O V mostra onde a evidência final é produzida, não quando o trabalho começa. Cada atividade de verificação e de validação é planejada no lado esquerdo, ao mesmo tempo que o item que ela checa: a abordagem de validação junto com o conceito de operações, o método de verificação junto com cada requisito.

V&V incremental e contínua

Esperar por um sistema integrado antes de perguntar se ele é o certo é o jeito mais caro de descobrir que não é. Na prática, as duas atividades se distribuem pelo ciclo de vida:

  • Validação antecipada. Conceitos, maquetes, produtos de amostra e simulações são levados aos stakeholders muito antes de existir hardware. Cada revisão reduz o risco de que os requisitos codifiquem a necessidade errada.
  • Verificação em todos os níveis. Os componentes são verificados antes da integração, os subsistemas antes do sistema. Um defeito encontrado na bancada custa muito menos que um encontrado no teste do sistema.
  • V&V contínua no desenvolvimento iterativo. Equipes que entregam em incrementos, como equipes de software que trabalham com integração contínua, executam a verificação automatizada a cada build e validam cada incremento com os usuários. As duas perguntas continuam as mesmas; elas só são feitas com muito mais frequência.

Os quatro métodos de verificação

A maioria das normas e dos manuais usa os mesmos quatro métodos. O guia da RVTM explica como escolher entre eles; aqui cada um é mostrado com uma linha do CubeSat EO-1 usado ao longo deste guia, uma espaçonave 6U fictícia que imageia lavouras em quatro bandas espectrais a partir de uma órbita de 500 km, com 32 requisitos em sua especificação.

Inspeção
Examinar o item ou seus registros sem operá-lo. O 3.4 Bus Regulation do EO-1 (12 V com tolerância de 2%) é verificado pelo TC-18 Bus Regulation Inspection, uma revisão do projeto da unidade de distribuição de energia e de seus dados de degrau de carga da qualificação. Foi aprovado: o pior caso foi 11,81 V, dentro de 11,76–12,24 V.
Análise
Cálculo, modelagem ou simulação, muitas vezes alimentados por dados de teste de nível mais baixo. O 1.7 Mission Lifetime (730 dias em órbita) não pode ser testado em solo, então o TC-16 Lifetime Reliability Analysis combina taxas de falha das peças, dose de radiação e degradação da bateria. Foi aprovado com uma probabilidade de 0,86 de operar por 730 dias, contra pelo menos 0,8.
Demonstração
Operar o item para mostrar que ele faz algo, com observação, mas sem medição precisa. O 6.1 Contact Scheduling (contatos agendados com 48 horas de antecedência) deve ser mostrado pelo TC-20 Operations Rehearsal: 14 dias de agendamento de contatos com a rede de estações terrenas parceiras. Ele ainda não foi executado.
Test
Operar o item sob condições controladas e medir o resultado contra um valor. O 3.2 Battery Capacity (pelo menos 77 Wh no início de vida) é verificado pelo TC-07 Battery Capacity Test, uma descarga a C/2 a 20 °C. Foi aprovado com 78,3 Wh.

Os quatro são verificação. Uma demonstração não é “um teste mais brando”, e uma análise não é uma atividade de validação só porque usa um modelo: o que torna qualquer um deles verificação é que o critério de aprovação vem de um requisito.

Atividades de validação

A validação usa muitas das mesmas técnicas, apontadas para uma referência diferente. As formas comuns são:

  • Cenários operacionais. Percorrer com o sistema, ou com um modelo dele, o conceito de operações: um dia nominal, um modo degradado, uma passagem de turno entre operadores. A pergunta é se o cenário alcança o que o stakeholder queria, não se cada etapa atinge seu número.
  • Simulação da missão. Executar o conceito operacional em uma simulação com ambientes e variações realistas, e depois ler os resultados contra as medidas de efetividade (MOEs), as medidas voltadas para os stakeholders de quão bem a missão faz seu trabalho.
  • Revisões com stakeholders. Mostrar aos usuários conceitos, protótipos, produtos de amostra ou interfaces e registrar seu julgamento. Antecipadas, baratas e muitas vezes a primeira vez em que uma necessidade que faltava aparece.
  • Ensaios operacionais e pilotos. Usuários reais, procedimentos reais, um ambiente representativo. Muitas vezes a evidência de validação decisiva e, em muitos programas, um teste e avaliação operacional formal feito por uma organização independente.

Validação para o EO-1

O modelo EO-1 contém três necessidades dos stakeholders, cada uma rastreada até os requisitos que a formalizam, e uma terceira suíte de testes, TS-3 Mission Validation, com um evento de validação por necessidade. Os dois fazem parte do modelo de referência EO-1 (v1.0) e dos projetos de demonstração criados no Holarch 2.2.1 ou posterior.

NecessidadeRequisitos (verificados)Evento de validaçãoStatus
N1 Same-Day Crop Stress Alerts6.2 Image Delivery (em até 6 horas após o downlink), 6.5 Planning Cycle Time (em até 100 minutos)VAL-01 Customer Alert Pilot: passagens gravadas sobre três fazendas piloto, processadas pelo planejamento, pelo processamento e pelo portal do cliente, com os agrônomos das fazendas usando os alertas em sua rotina diáriaNão executado
N2 Twice-Weekly Revisit1.6 Revisit Time (em até 72 horas), por meio de 1.6.1 Ground Track Repeat e 1.6.2 Off-Nadir ImagingVAL-02 Growing Season Revisit Simulation: uma safra de imageamento sobre a lista de alvos do cliente com o traço de solo planejado, o limite off-nadir e a cobertura de nuvens históricaNão executado
N3 Field-Level Vegetation Maps1.2 Ground Sample Distance (4,5 m), 1.4 Spectral Bands (quatro bandas, 450–900 nm)VAL-03 Agronomist Map Review: agrônomos revisam mapas de vegetação feitos a partir de imagens aéreas reamostradas para 4,5 m nas quatro bandas do EO-1Passed: todos os 12 mapas de amostra aceitos

Cada linha mostra por que a validação não é uma repetição da verificação. O 1.6 pede uma revisita em até 72 horas, uma propriedade da órbita e dos limites de apontamento, e o TC-13 Ground Track Repeat Analysis já mostrou uma repetição de 3 dias e 0,4 hora. Mas os agricultores precisam de imagens utilizáveis duas vezes por semana, e as nuvens não aparecem no 1.6. Só uma simulação com estatísticas de nuvens (VAL-02) pode dizer se o requisito, atendido como está escrito, entrega a necessidade. Se não entregar, a correção é um requisito novo ou alterado, não um teste melhor.

O N1 é parecido. O 6.2 e o 6.5 põem números na cadeia de entrega, e a análise de Monte Carlo do 6.5 (veja o guia de Monte Carlo) coloca a probabilidade de cumprir os 100 minutos em cerca de 97,6%. Se um agrônomo de fato fica sabendo do estresse da lavoura no dia da passagem, de uma forma com a qual possa agir, é outra pergunta, e o VAL-01 a faz com usuários reais.

O VAL-03 foi executado primeiro, antes de qualquer hardware de voo, porque só precisa de imagens de amostra e de pessoas. Isso é validação antecipada: ele confirmou que 4,5 m em quatro bandas é detalhe suficiente para mapas no nível do talhão antes de o projeto da câmera ser congelado. Dois revisores pediram sobreposições com os limites dos talhões, uma possível necessidade nova registrada com o resultado.

Verificação e validação de modelos

Na engenharia de sistemas baseada em modelos, o próprio modelo é um produto de engenharia, e as mesmas duas perguntas valem para ele. A prática de defesa e aeroespacial as define para modelos e simulações há décadas (DoD Instruction 5000.61 sobre verificação, validação e acreditação; NASA-STD-7009 sobre a credibilidade de modelos e simulações):

  • Verificação do modelo: o modelo está construído corretamente? A implementação corresponde à sua própria especificação e às regras de modelagem: nenhuma duração faltando em um fluxo simulado, nenhuma função executada por ninguém, nenhum requisito sem um evento de verificação, equações dimensionalmente consistentes, código que calcula o que seu autor pretendia.
  • Validação do modelo: é o modelo certo para seu propósito? Ele representa o sistema real com proximidade suficiente para as decisões que vai apoiar? Isso se responde comparando o modelo com a realidade: dados de teste, dados de voo, um modelo confiável de maior fidelidade.
  • Acreditação, no uso do DoD, é a decisão formal de que um modelo é aceitável para um uso específico, com base em sua evidência de verificação e de validação.

O EO-1 tem um caso claro. Seu orçamento de energia converte a potência de pico medida dos painéis em potência média por órbita com a equação EQ-1.3: média por órbita = pico × 0,62 (fração iluminada) × 0,6 (eficiência do caminho de energia). Verificar essa equação significa checar a aritmética, as unidades e seus vínculos. Validá-la significa perguntar se 0,62 e 0,6 correspondem à órbita real e à cadeia de energia real, por exemplo comparando a previsão com a potência média por órbita medida no flatsat ao longo de uma órbita simulada. O veredito sobre o requisito 3.1 abaixo depende inteiramente dessa equação, então uma EQ-1.3 não validada tornaria inconclusivo até um teste perfeito.

A regra prática: quando uma análise ou simulação é usada como evidência de verificação, seu modelo precisa de evidência de validação própria, na proporção de quanto a decisão depende dele.

A rastreabilidade por trás das duas

A verificação e a validação precisam, cada uma, de sua própria cadeia de vínculos:

  • Necessidades → validação. Cada necessidade dos stakeholders é vinculada à atividade de validação que vai mostrar que ela é atendida no uso pretendido, e aos requisitos que a formalizam.
  • Requisitos → verificação. Cada requisito é vinculado ao teste, à análise, à inspeção ou à demonstração que o verifica, com um método, um nível e critérios de sucesso. A matriz de verificação de requisitos é o relatório dessa cadeia.

Juntas, elas respondem às duas perguntas de cobertura que um comitê de revisão faz: todo requisito está verificado, e toda necessidade está validada? Os vínculos entre necessidades e requisitos ligam as duas cadeias, então uma lacuna em um lado pode ser rastreada até o outro: uma necessidade cujos requisitos são todos aprovados, mas cuja validação falha, aponta para um requisito que falta ou está errado.

Na matriz, as duas cadeias ficam lado a lado: os requisitos são verificados por casos de teste TC, as necessidades são validadas por eventos VAL. A matriz também mostra uma lacuna de verificação: 6.5 Planning Cycle Time tem um método (análise), mas ainda nenhum evento de verificação no modelo. O guia de Monte Carlo executa essa análise; registrar seu resultado como caso de teste fecharia a linha.

Evidência de verificação na prática: TC-06

O TC-06 Solar Array Power Test do EO-1 mostra o que torna uma evidência de verificação boa, e como ela deixa de contar. O registro está completo: M. Chen o executou nos painéis de qualificação QM-1 e QM-2 com o chicote na revisão C, sob o simulador solar de grande área em AM0 (1361 W/m², uniformidade de 1,4%), e anexou a curva I-V como tc06-array-iv-curve.csv. A potência de pico foi de 75,1 W contra um resultado esperado de pelo menos 72 W. Passed.

Depois o requisito 3.1 Orbit Average Power foi elevado de 28 W para 30 W após a revisão preliminar de projeto. O resultado do teste não mudou, mas o que ele prova, sim. Pela EQ-1.3, 75,1 W de pico são 27,9 W de média por órbita (75,1 × 0,62 × 0,6), abaixo de 30 W; mostrar 30 W exigiria cerca de 80,6 W de pico. O vínculo do 3.1 com o TC-06 é por isso sinalizado como suspeito e continua suspeito até o resultado esperado do TC-06 ser derivado de novo a partir do novo requisito e o teste ser executado de novo, ou o projeto mudar. O guia da RVTM percorre a revisão, e o guia de análise de impacto de mudanças acompanha a mesma mudança pelo projeto.

Três lições sobre evidência de verificação saem disso:

  1. A evidência está ligada a uma configuração e a uma versão do requisito. Uma aprovação registrada contra 28 W não é evidência para 30 W.
  2. O critério de aprovação precisa vir do requisito. O limite de 72 W do TC-06 corresponde a só 26,8 W de média por órbita, então ele não mostrava nem os antigos 28 W. Um teste pode ser aprovado no seu próprio critério e ainda assim não verificar seu requisito.
  3. Uma análise no circuito precisa de validação. O veredito depende dos dois fatores da EQ-1.3, que é a questão de validação de modelo da seção anterior.

E nada disso é validação. Mesmo um resultado limpo de 30 W mostraria apenas que os painéis atendem ao 3.1. Se 30 W são energia suficiente para imagear 120 cenas por dia para clientes agrícolas é o tipo de pergunta que os eventos de validação no nível da missão respondem.

Verificação vs validação comparadas

VerificaçãoValidação
PerguntaConstruímos o sistema do jeito certo?Construímos o sistema certo?
Checa contraRequisitos e especificações de projetoNecessidades dos stakeholders, uso pretendido, medidas de efetividade
ISO/IEC/IEEE 15288Processo de verificação (6.4.9)Processo de validação (6.4.11)
Métodos típicosInspeção, análise, demonstração, testeCenários operacionais, simulação da missão, revisões com stakeholders, ensaios operacionais, dados de campo
NíveisComponente, subsistema, sistemaPrincipalmente o sistema em seu ambiente operacional; validação antecipada em conceitos e protótipos
AmbienteControlado: laboratório, bancada, simuladorRepresentativo do uso real, com usuários reais sempre que possível
Quem julgaA equipe de engenharia contra critérios escritos; o cliente na aceitaçãoStakeholders e usuários, muitas vezes com um avaliador independente
ResultadoAprovado ou reprovado por requisitoNecessidade atendida, parcialmente atendida ou não atendida, muitas vezes com necessidades novas ou alteradas
RastreabilidadeRequisito → evento de verificaçãoNecessidade → evento de validação
Registro usualMatriz de verificação de requisitos, relatórios de testePlano e relatório de validação, relatório de avaliação operacional
Uma falha significaO sistema não atende a um requisito: corrija o projeto ou a construçãoOs requisitos não captaram a necessidade: corrija os requisitos, depois o projeto
Exemplo do EO-1TC-07: bateria com 78,3 Wh contra 77 WhVAL-03: agrônomos aceitam mapas de 4,5 m em quatro bandas

Confusões comuns

  • “A validação é o último teste.” Os testes no nível do sistema perto do fim normalmente ainda são verificação. A validação é definida pela sua referência (necessidades e uso pretendido), não pelo momento em que ocorre, e deve começar muito antes do fim.
  • “Todos os requisitos foram aprovados, então o sistema está validado.” A aprovação dos requisitos mostra que os requisitos foram atendidos. Ela não diz nada sobre se eram os requisitos certos. O EO-1 poderia atender exatamente ao 1.6 e ainda assim não cumprir a N2 sob a cobertura de nuvens real.
  • Validar um requisito versus verificar o sistema. As palavras também se aplicam aos próprios requisitos. O INCOSE Guide to Needs and Requirements separa a verificação de requisitos (a declaração está bem formada: necessária, sem ambiguidade, verificável?) e a validação de requisitos (ela expressa a necessidade de onde veio?) da verificação e da validação do sistema. Diga a qual você se refere. O guia de redação de requisitos cobre como tornar as declarações verificáveis.
  • “Demonstração é validação.” A demonstração de um requisito é verificação. A demonstração de um cenário operacional com usuários, julgada contra as necessidades deles, é validação. Quem decide não é o método, é a referência.
  • “Uma simulação é uma validação.” Uma simulação é uma técnica. Simular o ciclo de planejamento do 6.5 contra 100 minutos verifica o 6.5. Simular uma safra contra “imagens utilizáveis duas vezes por semana” valida a N2. E o próprio modelo de simulação precisa de sua própria validação.
  • IV&V significa “mais V&V”. Verificação e validação independentes são V&V feitas por uma organização separada do desenvolvedor em gestão, orçamento e julgamento técnico. Trata-se de quem as faz, não de uma terceira atividade.
  • Contar vínculos como resultados. Uma necessidade vinculada a um evento de validação está planejada para validação, não validada. Uma contagem de cobertura diz o que está planejado; só os resultados dizem o que está demonstrado.

Como o Holarch registra cada uma

Em um projeto LML, a verificação e a validação ficam no mesmo modelo que as necessidades e os requisitos, com os mesmos tipos de itens e vínculos:

  • As necessidades são Statements (não Requirements), vinculadas com traced to aos requisitos que as formalizam.
  • O planejamento da verificação fica em cada Requirement: Verification Method (Analysis, Demonstration, Inspection, Test, em qualquer combinação), nível e critérios de sucesso.
  • Os eventos de verificação são Test Cases em Test Suites, vinculados aos requisitos com verifies. Análises, inspeções e demonstrações também são casos de teste. Cada execução registra o testador, a configuração, o artigo de teste e o arquivo de evidência; os testes reprovados viram Issues, e os ciclos de testes salvam cada campanha.
  • Os eventos de validação também podem ser Test Cases, em uma suíte própria (como a TS-3 acima), vinculados à necessidade com verifies. O esquema LML padrão só permite verifies em direção a requisitos, então o esquema do modelo EO-1 acrescenta um alvo, Test Case verifies Statement; no seu próprio projeto, acrescente-o em Esquema (abra Test Case, + Relação) antes de vincular na Matriz de rastreabilidade. A RVTM e a Cobertura de verificação contam só requisitos, então os eventos de validação não mudam o número “11 de 32 requisitos verificados”; a matriz os mostra ao lado dos requisitos.
  • As medidas de efetividade são Measures com o rótulo MOE e valores de limiar e de objetivo. Um estudo de Monte Carlo no Simulador pode checar uma saída contra um requisito ou uma Measure e registrar o resultado como Test Case, que é como uma análise se torna evidência de verificação.
  • As mudanças marcam vínculos como suspeitos, inclusive o vínculo com um caso de teste que verifica, como no TC-06.
  • A verificação do modelo é o que Verificação → Checagens do modelo faz: regras sobre o modelo inteiro, como requisitos folha sem caso de teste que os verifique e testes reprovados sem uma Issue. Os diagramas de Action têm suas próprias checagens antes de uma simulação rodar. O Holarch não tem um registro separado para a validação de modelos; guarde a comparação com dados de teste ou de voo como evidência do caso de teste de análise que depende do modelo.

O guia de Processo de SE mostra os dois lados do V. Com o processo Modelo em V, o cartão Vínculos de verificação associa cada fase do lado direito à fase do lado esquerdo que ela checa: a validação do sistema com o conceito de operações (“necessidades validadas”), a verificação do sistema com os requisitos do sistema (“requisitos verificados”), e os níveis de subsistema e de unidade abaixo.

Leia o cartão como cobertura, no espírito da confusão acima. Uma necessidade conta como validada assim que um caso de teste é vinculado a ela com verifies, ou assim que um requisito rastreado a partir dela é aprovado, então N1 e N2 contam embora VAL-01 e VAL-02 não tenham sido executados. O cartão conta como necessidade todo Statement rastreado que não é requisito; na demonstração, isso acrescenta uma premissa (1.1 Reference Orbit) e três regras operacionais (OR-1 a OR-3) a N1–N3, e é por isso que ele mostra 7. Os resultados da validação em si estão na Central de testes.

Os documentos podem levar os planos: os modelos de documento incluem um Conceito de Operações, um Plano de Verificação e Validação, um Plano de Testes, um Relatório de Testes e um Plano de IV&V, com blocos VCRM e RVTM ao vivo que se atualizam a partir do modelo.

Experimente no Holarch

  1. Crie o projeto EO-1: Gerenciar projetos → Arquivos de projeto ▾ → Novo projeto de demonstração → CubeSat (engenharia de sistemas guiada), ou importe o modelo de referência EO-1.
  2. Pressione ⌘K / Ctrl+K, digite crop stress e abra N1 Same-Day Crop Stress Alerts: seus relacionamentos mostram os requisitos a que ela está traced to e o evento VAL que a verifica. Acrescente uma necessidade sua como Statement, por exemplo com Adicionar item ▸ em um documento de requisitos.
  3. Em Verificação → Central de testes, abra TS-3 Mission Validation. Para uma suíte própria, clique em + Novo ▾ → Suíte de testes…, depois em + Caso de teste para cada evento de validação, com sua preparação e seu resultado esperado nos termos dos stakeholders.
  4. Abra Verificação → Matriz de rastreabilidade com as necessidades nas linhas e os casos de teste de validação nas colunas, e escolha verified by: cada necessidade tem seu evento VAL. Clique em uma célula vazia para acrescentar um vínculo.
  5. Abra Verificação → RVTM para ver a verificação dos requisitos, e Planejar → Processo de SE com o Modelo em V para ver os dois lados do V.

As referências completas são Verificação, Rastreabilidade, Processo de SE e Checagens do modelo.

Perguntas frequentes

O que vem primeiro, a verificação ou a validação?

A validação formal do sistema normalmente vem depois da verificação do sistema, porque precisa de um sistema que funcione conforme especificado, em seu ambiente pretendido. Mas as atividades de validação começam antes: as revisões do conceito e dos requisitos com os stakeholders acontecem antes de qualquer verificação ser possível. Planeje as duas desde o início.

Uma atividade pode fazer as duas coisas?

Sim, se for planejado assim e julgado em relação às duas referências. Um ensaio de operações de ponta a ponta pode verificar o 6.1 Contact Scheduling em relação ao seu critério de 48 horas e, com operadores e clientes reais participando, reunir evidência de validação para a N1. Registre os dois veredictos separadamente, porque eles podem diferir.

Quem executa a validação?

Normalmente o desenvolvedor a planeja e apoia, mas o julgamento cabe às partes interessadas: usuários, operadores, o cliente e, às vezes, uma organização de testes independente. Validação sem as partes interessadas é um palpite sobre as necessidades delas.

O que acontece quando a validação falha, mas a verificação foi aprovada?

Os requisitos não capturaram a necessidade. Rastreie a necessidade que falhou até seus requisitos, encontre o que falta ou está errado, altere-o pelo controle de mudanças e siga os vínculos suspeitos até o projeto e a verificação. Esta é a falha mais cara da engenharia de sistemas, e é por isso que a validação antecipada compensa.

Para onde ir a seguir