Holarch

Doğrulama

Doğrulama

Her gereksinimin nasıl doğrulanacağını planlayın, test senaryolarını paketlerde düzenleyin, testleri adım sonuçları ve kanıtlarla çalıştırın, test döngülerini kaydedin ve kapsamayı RVTM'de raporlayın.

Nasıl kullanılır →

Bu sayfada
  1. Genel bakış
  2. Kavramlar
    1. Doğrulama planlama öznitelikleri
    2. Verification Requirement'lar (LML 2.0)
    3. Test senaryoları ve test paketleri
    4. Gereksinim doğrulama durumu
    5. Test döngüleri
  3. Nasıl kullanılır
    1. Ne zaman ve neden
    2. Her gereksinim için doğrulamayı planlayın
    3. Test paketleri ve test senaryoları oluşturun
    4. Adım adım bir yordam yazın
    5. Test senaryosu oluşturmanın diğer yolları
    6. Testleri çalıştırın ve sonuçları kaydedin
    7. Sonuçları başka bir test sisteminden içe aktarın
    8. Bir test döngüsü kaydedin
    9. Kapsamı raporlayın
    10. Uygulamalı örnek: CubeSat EO-1 demosu
    11. İpuçları ve iyi uygulamalar
    12. Yaygın hatalar
    13. Diğer özelliklerle nasıl bağlantılıdır
  4. Test Merkezi
    1. Sayfa başlığı
    2. Sağlık kartları ve filtreler
    3. Paket kartı
    4. Test senaryosu tablosu
    5. Test adımları iletişim kutusu
    6. Paketi çalıştır iletişim kutusu
    7. Test senaryoları (Word)
    8. Test döngüleri iletişim kutusu
    9. Doğrulama kapsamı
    10. Kanıt dosyaları
    11. Issue oluştur
  5. RVTM
    1. Sayfa başlığı
    2. Kartlar
    3. Tablo
  6. Kısayollar
  7. İletiler
  8. Sınırlar
  9. İlgili

Genel bakış

Doğrulama her gereksinim için tek bir soruyu yanıtlar: karşılandığını hangi kanıt gösteriyor?

Holarch doğrulamayla ilgili her şeyi gereksinimlerle aynı modelde tutar:

  • plan: doğrulama yöntemi, düzeyi ve başarı ölçütleri
  • planı yürüten test senaryoları
  • her çalıştırmanın sonuçları
  • ortaya çıkan kapsam

Hepsi tek bir modelde bulunduğu için kapsam raporu her zaman günceldir.

Gezinme çubuğundaki Doğrulama grubu şunları içerir:

SayfaAmaç
RVTMGereksinim Doğrulama İzlenebilirlik Matrisi: yöntemi, düzeyi, doğrulayan test senaryoları, kendi sonucu ve toplanmış sonucuyla her gereksinim.
Test MerkeziTest paketleri ve test senaryoları, adım adım yordamlar, kanıtlı test çalıştırmaları, test döngüleri ve gereksinim doğrulama kapsamı.
İzlenebilirlik MatrisiHerhangi bir ilişki bir ızgara olarak, örn. gereksinimler × test senaryoları. Bkz. İzlenebilirlik Matrisi.
Model denetimleriDoğrulanmamış yaprak gereksinimler ve Issue'su olmayan başarısız testler dahil tüm modelin kural denetimleri. Bkz. Model denetimleri.

Doğrulama üzerindeki gezinme çubuğu rozeti başarısız testleri ve model denetimi hatalarını sayar.

Kavramlar

Doğrulama planlama öznitelikleri

Her Requirement'ın üç planlama özniteliği vardır:

ÖznitelikDeğerlerAnlamı
Verification MethodAnaliz, Gösterim, Muayene, Test (herhangi bir birleşim)Gereksinimin nasıl doğrulandığı.
Verification LevelBileşen, Alt sistem, SistemDoğrulandığı montaj düzeyi.
Success CriteriaMetinGereksinimin karşılandığını gösteren ölçülebilir sonuç.

Gereksinimin etiketleri eşleşen Verification Method etiketlerini (Analysis, Demonstration, Inspection, Test) içerir. Özniteliği veya bir etiketi ayarlamak diğerini aynı değişikliğin parçası olarak günceller ve tek bir Geri al ikisini birden geri alır. Bu nedenle etiket kullanan içe aktarılmış projeler, özniteliği kullanan projelerle aynı şekilde davranır.

Verification Requirement'lar (LML 2.0)

Bir Verification Requirement, bir gereksinimin karşılanmış sayılmasından önce neyin ve nasıl gösterilmesi gerektiğini söyleyen bir Statement'tır. Doğrulama planını gereksinimin üzerinde değil kendi öğesinde tutmanın LML 2.0 yoludur. Şunlara sahiptir:

ÖznitelikAnlamı
Verification MethodAnaliz, Gösterim, Muayene, Test (herhangi bir birleşim; Şema'da daha fazla yöntem ekleyin).
Acceptance CriteriaDoğrulamanın ulaşması gereken sonuçlar.
KanıtToplanacak ve teslim edilecek kayıt türü, örneğin bir test raporu veya bir muayene kaydı.
GerekçeBu yöntemin, bu ölçütlerin ve bu kanıtın neden seçildiği.

Onu kapsadığı gereksinime (veya varlığa) verifies ile, onu yürüten test senaryolarına traced to ile bağlayın. RVTM ardından bu test senaryolarını gereksinimi doğrulayan olarak sayar, gereksinimin kendi yöntemi ve kabul ölçütleri yoksa bunları Verification Requirement'tan alır ve Verification Requirement'ı Doğrulayan altında listeler.

İki biçim yan yana çalışır: bir gereksinimi doğrudan doğrulayan bir test senaryosu (LML 1.x biçimi) tam olarak eskisi gibi sayılır ve bir gereksinim üzerindeki Verification Requirement etiketi kullanılabilir kalır.

Bir test senaryosu test edilen varlığı evaluates ile de belirtebilir (varlıktan bakıldığında: evaluated by).

Bu eklemelerden önce oluşturulan projeler şemalarını korur; Şema → Yeni yerleşikleri ekle… onlara Verification Requirement sınıfını ve evaluates ilişkisini ekler.

Test senaryoları ve test paketleri

Bir Test Case gereksinimleri verifies ilişkisiyle doğrular (gereksinimden bakıldığında: verified by). Bir test senaryosu şunlara sahiptir:

  • Açıklama: yordam.
  • Ayarla, Beklenen sonuç, Gerçek sonuç.
  • Event Conditions (testin çalıştığı koşullar, örneğin ortam, mod veya benzetilmiş yükler) ve Event Constraints (test olayına ilişkin sınırlar, örneğin bağımsız tanıklar, bekleme noktaları veya örnekleme kuralları). Çalıştırma iletişim kutusu bunları doldurulduklarında gösterir ve paket CSV dışa aktarımında her biri için bir sütun vardır.
  • evaluates: test edilen varlık.
  • Durum: Çalıştırılmadı, Devam ediyor, Engellendi, Başarısız veya Başarılı.
  • Adımlar: isteğe bağlı numaralı bir yordam; her adımda Action, Expected Result, Actual Result ve Pass/Fail bulunur.
  • Her kaydedilen çalıştırmanın yazdığı çalıştırma kanıtı: Test eden, Test tarihi, Konfigürasyon (test edilen derleme veya sürüm), Test ürünü (birim veya seri numarası) ve Test Evidence (bir dosya).
  • Bir çalıştırma günlüğü: tarih, durum, test eden, konfigürasyon, ürün, gerçek sonuç, kanıt dosyası adı ve adım sonuçlarıyla kaydedilen her çalıştırma.

Bir test senaryosu alt test senaryolarına ayrıştırılabilir. Bir üst öğenin durumu yapraklarından toplanır. Eşleşen ilk kural geçerli olur:

  1. Herhangi bir yaprak başarısız olduysa Başarısız.
  2. Herhangi bir yaprak engellendiyse Engellendi.
  3. Tüm yapraklar başarılı olduysa Başarılı.
  4. Hiçbir yaprak çalıştırılmadıysa Çalıştırılmadı.
  5. Diğer durumlarda Devam ediyor.

Bir Test Suite, Test Suite etiketli bir Artifact'tir. Test senaryolarını source of (içe aktarılan verilerde referenced by) ile tutar. Hiçbir pakette olmayan test senaryoları Paketi olmayan test senaryoları altında görünür.

Gereksinim doğrulama durumu

Her gereksinim, doğrulayan test senaryolarından (onu doğrudan doğrulayanlar ve Verification Requirement'larından izlenenler) bir kendi durumu alır:

Kendi durumuKural
BaşarısızDoğrulayan bir test senaryosu başarısız oldu.
BaşarılıDoğrulayan bir test senaryosu başarılı oldu (ve hiçbiri başarısız olmadı).
ÇalıştırılmadıDoğrulayan test senaryoları var, hiçbiri başarılı veya başarısız olmadı.
Yalnızca planlandıTest senaryosu yok, ancak bir Verification Method ayarlı (gereksinimde veya Verification Requirement'larından birinde).
DoğrulanmadıTest senaryosu ve Verification Method yok.

Toplanmış durum ayrıştırmayı (decomposed by) izler. Bir üst gereksinim için:

  • Kendi başarılı testi olduğunda veya tüm alt gereksinimleri Başarılı olduğunda Başarılı'dır.
  • Altında herhangi bir yerde başarısızlık olduğunda Başarısız'dır.
  • Aksi halde kendi durumunu veya en az kapsanan alt öğesinin durumunu, hangisi daha ilerideyse onu alır. Sıra Doğrulanmadı → Yalnızca planlandı → Çalıştırılmadı şeklindedir.

Doğrulandı her zaman Başarılı anlamına gelir.

Test döngüleri

Bir test döngüsü, bir paketin sonuçlarının kaydedilmiş anlık görüntüsüdür: her yaprak test senaryosunun durumu ve gerçek sonucu. Her kampanyanın sonunda bir tane kaydedin, ardından bir sonraki için paketi Çalıştırılmadı'ya sıfırlayın. Döngüleri birbirleriyle veya geçerli sonuçlarla karşılaştırabilir ve bir döngüye geri dönebilirsiniz.

Nasıl kullanılır

Ne zaman ve neden

Doğrulamayı tasarım oluşturulduktan sonra değil, gereksinimleri yazarken planlayın. Bir gereksinimin yöntemini ve başarı ölçütlerini belirtemiyorsanız gereksinim genellikle yazıldığı haliyle doğrulanabilir değildir.

Olağan akış:

  1. Gereksinim analizi: her gereksinimde Verification Method, Level ve Success Criteria değerlerini ayarlayın.
  2. Tasarım: test senaryoları yazın ve doğruladıkları gereksinimlere bağlayın. Analiz, gösterim ve muayene kayıtları da test senaryolarıdır.
  3. Entegrasyon ve test: test senaryolarını çalıştırın ve sonuçları ve kanıtları kaydedin. Başarısızlıklar için Issue açın. Her kampanya için bir test döngüsü kaydedin.
  4. İncelemeler ve kabul: kapsamı RVTM ile raporlayın.

Her gereksinim için doğrulamayı planlayın

Her gereksinime bir yöntem, bir düzey ve başarı ölçütleri verin. Bunu Test Merkezi'nin kapsam kartında yapın.

  1. Doğrulama → Test Merkezi'ni açın.
  2. Doğrulama kapsamı'na kaydırın.

Henüz doğrulanmamış her gereksinimi görürsünüz.

  1. Bir satırda yöntemleri açıp kapatmak için yöntem düğmelerine tıklayın: A (Analiz), R (Gösterim), İ (Muayene), T (Test).

Gereksinim Doğrulanmadı'dan Yalnızca planlandı'ya geçer.

  1. Düzey… içinde düzeyi seçin: Bileşen, Alt sistem veya Sistem.
  2. + Ölçütler'e tıklayın.
  3. Ölçülebilir sonucu yazın ve Kaydet'e tıklayın.

Düğme artık Ölçütler ✓ gösterir.

Bu öznitelikleri herhangi bir gereksinimin özellik panelinde de düzenleyebilirsiniz.

Test paketleri ve test senaryoları oluşturun

  1. Sayfa başlığında + Yeni ▾ → Test paketi…'ne tıklayın.
  2. Bir Numara (örn. TS-3), bir Ad ve bir Açıklama girin.
  3. Oluştur'a tıklayın.

Yeni bir paket kartı görürsünüz.

  1. Paket kartında + Test senaryosu'na tıklayın.
  2. Öğe oluştur içinde test senaryosunu adlandırın.

Test senaryosu Çalıştırılmadı durumuyla pakete eklenir.

  1. Test senaryosu satırında Doğruladıkları sütunundaki +'ya tıklayın.
  2. Test senaryosunun doğruladığı gereksinimleri seçin.
  3. Satıra Beklenen sonuç'u yazın.
  4. Yordamı test senaryosunun açıklamasına, özellik panelinde veya Öğe görünümünde yazın.

Adım adım bir yordam yazın

Adımlar isteğe bağlıdır. Adımları olmayan bir test senaryosu bir bütün olarak çalıştırılır.

  1. Test senaryosu satırında + Adımlar'a tıklayın.
  2. Her adım için + Adım ekle'ye tıklayın.
  3. Her adım için Action ve Beklenen sonuç'u doldurun.
  4. ↑ ile yeniden sıralayın ve × ile bir adımı kaldırın.
  5. Uygula düğmesine tıklayın.

Düğme artık Adımlar (N) gösterir.

Test senaryosu oluşturmanın diğer yolları

  • Kapsam kartından: Doğrulama kapsamı'nda bir gereksinim satırındaki + Test senaryosu'na tıklayın. Paketi olmayan test senaryoları altında, gereksinime zaten bağlı Verify <requirement name> oluşturur.
  • YZ ile: bir belgede veya Öğe görünümünde bir gereksinim seçin. ✦ YZ ▾ → Test senaryosu oluştur…'u seçin. YZ adı, sıralı adımları, kurulumu, beklenen sonucu ve yöntemi taslak olarak hazırlar. Taslağı Test senaryosunu gözden geçir — <requirement> içinde inceleyin, ardından Test senaryosu oluştur'a tıklayın. Bkz. YZ.

Testleri çalıştırın ve sonuçları kaydedin

Çalıştırma modu testlerde size birer birer rehberlik eder ve her sonucu kanıtıyla birlikte kaydeder.

  1. İsteğe bağlı: yalnızca bazı testleri çalıştırmak için Çalıştırılmadı (12) gibi bir durum filtresine tıklayın. Yalnızca o durumdaki yaprak test senaryoları çalıştırılır.
  2. Sayfa başlığında Paketi çalıştır'a tıklayın.

Paketi çalıştır iletişim kutusu Çalıştırılmadı durumundaki ilk testte açılır.

  1. Oturum alanlarını bir kez doldurun: Test eden (varsayılan olarak adınız), Konfigürasyon / Derleme ve Test ürünü. Tüm konfigürasyonlar olarak görüntülenen bir ürün hattında önce Şunun için sonuçları kaydet'i seçin: testin çalıştığı konfigürasyon veya Konfigürasyon yok. ✔ Başarılı, ✘ Başarısız ve Engellendi siz seçene kadar bekler (Ürün hatları).
  2. Testin Yordam, Ayarla, Adımlar ve Beklenen sonuç bölümlerini okuyun.
  3. Testi gerçekleştirin. Her adım için gerçek değeri doldurun ve Başarılı/Başarısız'ı seçin.
  4. Gerçek sonuç'u açıklayın.
  5. Tarih ve saat'i denetleyin.
  6. Bir günlük, veri dosyası veya fotoğraf eklemek için Kanıt ekle…'ye tıklayın.
  7. ✔ Başarılı, ✘ Başarısız veya Engellendi'ye tıklayın.

İletişim kutusu bir sonraki teste geçer. Kaydetmeden geçmek için Atla'ya tıklayın. Geri dönmek için ‹ Önceki'ye tıklayın.

  1. ✘ Başarısız'dan sonra + Issue oluştur'a, ardından Sonraki ›'ye tıklayın.

İletişim kutusu Kaydedildi. Başarısızlığı izlemek için bir Issue oluşturun; bu test senaryosuna ve doğruladığı gereksinimlere bağlanır. der.

  1. Her test için 4 ile 10 arasındaki adımları tekrarlayın.

Sonunda Çalıştırma tamamlandı, sayılarla bir durum çubuğu gösterir. Baştan incele ilk teste geri döner.

Kaydedilen her sonuç tek bir Geri al ile geri alınabilir. Şunların hepsini yapar:

  • test senaryosunun Status, Actual Result, Tested By, Test Date, Configuration, Test Article ve Test Evidence değerlerini günceller
  • adım sonuçlarını kaydeder
  • testin çalıştırma günlüğüne bir girdi ekler

Çalıştırma modu olmadan bir sonuç kaydetmek için bir test senaryosu satırındaki duruma (örneğin Çalıştırılmadı) tıklayıp yenisini seçin, ardından Gerçek sonuç metnine tıklayıp sonucu yazın. Odaktaki bir değerde Enter veya F2 de onu açar; Escape değiştirmeden bırakır.

Bir testi yeniden çalıştırmak için satırındaki ↻ Yeniden çalıştır'a tıklayın (test bir sonuca sahip olduğunda gösterilir). Çalıştırma iletişim kutusu yalnızca o testte, onu Çalıştırılmadı'ya geri döndürmeden açılır; yeni sonuç çalıştırma günlüğüne önceki çalıştırmaların yanına eklenir.

Sonuçları başka bir test sisteminden içe aktarın

Testler başka bir yerde, örneğin otomatik bir test düzeneğinde veya bir CI hattında çalıştığında, sonuçlarını yazmak yerine içe aktarın. Holarch JUnit XML raporlarını (çoğu test çalıştırıcısı ve CI sisteminin yazdığı), CSV dosyalarını ve Excel çalışma kitaplarını (.xlsx) okur.

  1. Sayfa başlığında Sonuçları içe aktar…'a tıklayın.
  2. Dosya seç…'e tıklayın ve sonuç dosyasını seçin.
  3. Hangi test senaryolarının eşleştirileceğini seçin: Test senaryolarının eşleştirileceği yer (tümü veya tek bir paket) ve Eşleştirme ölçütü (Numara, sonra ad, Numara, Ad veya Genel kimlik).
  4. Bir CSV veya Excel dosyası için Holarch'ın başlıktan tahmin ettiği sütunları denetleyin: Test senaryosu sütunu ve Durum sütunu zorunludur; Gerçek sonuç, Tarih, Test eden, Konfigürasyon ve Test ürünü sütunları isteğe bağlıdır.
  5. İsteğe bağlı: dosyanın içermediği bilgiler için Test eden, Test tarihi, Konfigürasyon / Derleme ve Test ürünü alanlarını doldurun.
  6. Önizlemeyi denetleyin: durum değişikliğiyle eşleşen her test senaryosu ve hiçbir test senaryosuyla eşleşmeyen, birkaç test senaryosuyla eşleşen veya atlanan satırlar.
  7. N sonucu kaydet'e tıklayın.

Tüm sonuçlar kaydedilir ve tek bir Geri al ile hepsi geri alınır. Her biri test senaryosunun Status, Tested By, Test Date, Configuration ve Test Article değerlerini günceller ve çalıştırma günlüğüne dosyayı adlandıran bir girdi ekler. Hiçbir şey oluşturulmaz.

  • Durum sözcükleri: pass, passed, ok ve success Başarılı kaydeder; fail, failed, failure ve error Başarısız kaydeder; blocked, in progress ve not run bu durumları kaydeder. Atlanan testler (JUnit <skipped> veya durum sütununda skipped) değişmeden kalır.
  • Gerçek sonuç: bir JUnit başarısızlık iletisi veya Actual Result sütunu Gerçek sonuç olur. Bunlar yoksa Gerçek sonuç olduğu gibi kalır.
  • Tekrarlanan test senaryoları: bir dosya bir test senaryosunu iki kez adlandırdığında sonraki satır geçerli olur; önceki atlandı olarak listelenir.
  • Üst test senaryoları: alt test senaryoları olan bir test senaryosu kaydedilmez; durumu alt öğelerinden toplanır.

Holarch'ı açmadan bir CI hattından sonuç kaydetmek için bunları REST API'ye gönderin (POST …/test-results) veya bir YZ istemcisinin MCP aracı record_test_results ile önermesine izin verin. İkisi de bir sonucu Sonuçları içe aktar… ile aynı şekilde, çalıştırma günlüğü girdisi dahil kaydeder (Test sonuçları).

Bir test döngüsü kaydedin

Bir test kampanyası bittiğinde bir döngü kaydedin.

  1. Paket kartında Yeni döngü başlat…'a (veya ⋯ → Yeni döngü başlat…'a) tıklayın.
  2. Yeni test döngüsü başlat içinde döngüyü adlandırın (varsayılan Test döngüsü N).
  3. Konfigürasyon / Derleme ve Test ürünü alanlarını denetleyin. İkisi de çalıştırmada en sık kaydedilen değerle başlar; döngünün Test raporunda yazdırılırlar.
  4. Şunlardan birine tıklayın:
    • Kaydet ve yenisini başlat: sonuçları kaydeder, ardından paketteki her Status değerini Çalıştırılmadı olarak ayarlar ve gerçek sonuçları temizler.
    • Yalnızca kaydet: sonuçları kaydeder ve test senaryolarında tutar.

Bir döngü her test senaryosunun durumunu, gerçek sonucunu, test edeni, test tarihini, konfigürasyonunu, test ürününü, kanıt dosyası adını ve adım sonuçlarını tutar.

Döngüleri daha sonra görüntülemek, karşılaştırmak, geri döndürmek veya silmek için paket kartında ⋯ → Test döngüleri… (N)'ye tıklayın. Bir teslimat için ⋯ → Test raporu…'na tıklayın: döngünün Test raporunu Word, Excel, CSV veya web sayfası olarak yazar (bkz. Belge oluşturma).

Kapsamı raporlayın

  1. Doğrulama → RVTM'yi açın.

İlk kart bir ilerleme çubuğuyla doğrulanan / toplam gösterir. Diğer kartlar Başarısız, Çalıştırılmadı, Yalnızca planlandı ve Doğrulanmadı sayılarını gösterir.

Geniş bir tablo yana kaydırılırken numara ve gereksinim sütunları görünür kalır. Bir durum çipi sığması için kısaltıldığında (bazı dillerde), tam metin için üzerine gelin.

  1. İsteğe bağlı: yalnızca o gereksinimleri listelemek için bir karta tıklayın.
  2. Dışa aktar ▾'ya tıklayın.
  3. Excel (.xlsx), CSV veya Word (.docx)'u seçin.

Uygulamalı örnek: CubeSat EO-1 demosu

Demoyu Projeleri yönet → Proje dosyaları ▾ → Yeni demo proje ile oluşturun, ardından:

  1. Doğrulama → RVTM'yi açın.

İlk kart 11 / 32 Doğrulandı (Başarılı) gösterir. Diğerleri 3 Başarısız, 12 Çalıştırılmadı, 3 Yalnızca planlandı ve 3 Doğrulanmadı gösterir.

  1. 1.6 Revisit Time'ı bulun.

Kendi Yalnızca planlandı'dır: yöntem Analysis'tir, ancak kendine ait bir testi yoktur. Durum Çalıştırılmadı'dır. Durum alt öğelerinden toplanır:

  • 1.6.1 Ground Track Repeat, TC-13 ile Başarılı'dır.
  • 1.6.2 Off-Nadir Imaging, Çalıştırılmadı durumundaki TC-14 ile doğrulanır.

En az kapsanan alt öğe Çalıştırılmadı'dır ve bu Yalnızca planlandı'dan daha ileridedir.

  1. Başarısız kartına tıklayın.

2.1 Pointing Accuracy ve 2.2 Pointing Stability, TC-04 Pointing Accuracy Test nedeniyle başarısızdır. 4.3, TC-09 Safe Mode Entry Test nedeniyle başarısızdır.

  1. Doğrulama → Test Merkezi'ni açın.

Kartlar 3 pakette 22 test senaryosu gösterir. TS-1 Spacecraft Qualification Tests içinde TC-04 satırı J. Alvarez · 2026-10-02 10:15 · 📎 tc04-pointing-errors.csv ve Issue: Test failure: Pointing Accuracy Test gösterir.

  1. TC-04 satırında Adımlar (3)'e tıklayın.

3. adım 7, 12 ve 18 numaralı hedeflerde 0,14 derece. ile başarısız oldu.

  1. TS-1'de ⋯ → Test döngüleri… (2)'ye tıklayın.
  2. Flatsat Cycle 1 → Flatsat Cycle 2'yi karşılaştırın.

TC-03 ve TC-06, Çalıştırılmadı'dan Başarılı'ya değişti. Değişen satırlar vurgulanır.

Şimdi watchdog düzeltmesinden sonra TC-09'u yeniden çalıştırın:

  1. Başarısız (2) filtresine, ardından Paketi çalıştır'a tıklayın.

Çalıştırma TC-04'te açılır.

  1. TC-09'a ulaşmak için Atla'ya tıklayın.
  2. Konfigürasyon / Derleme olarak Flight software 2.3.2 girin.
  3. Gerçek sonuç olarak 8 saniyede güvenli mod yazın.
  4. ✔ Başarılı'ya tıklayın.
  5. RVTM'yi yeniden açın.

4.3 artık Başarılı'dır ve ilk kart 12 / 32 gösterir.

Son olarak doğrulanmamış bir gereksinimi planlayın:

  1. Doğrulama kapsamı'nda 2.5 Safe Mode Recovery'yi (Doğrulanmadı) bulun.
  2. T'ye tıklayın, Düzey… içinde Sistem'i seçin ve ölçütler ekleyin.
  3. Testini başlatmak için + Test senaryosu'na tıklayın.

İpuçları ve iyi uygulamalar

  • Başarı ölçütlerini koşullarıyla birlikte ölçülebilir sayılar olarak yazın, örneğin 20 °C'de 3 uçuşun 3'ünde Menzil ≥ 25 km. Gereksinimi yeniden ifade etmeyin.
  • Yaprak gereksinimleri doğrulayın ve üst öğelerin toplanmasına izin verin. Requirement.10 model denetimi doğrulayan test senaryosu olmayan yaprak gereksinimleri işaretler. Üst öğeler alt öğeleri aracılığıyla kapsanır.
  • Analysis, Inspection ve Demonstration için bile her doğrulama olayı için bir test senaryosu kullanın. RVTM böylece her yöntem için kanıt gösterir.
  • Her çalıştırmada konfigürasyonu kaydedin. Bir sonuç döngüler arasında değiştiğinde, çalıştırma günlüğü buna hangi derlemenin neden olduğunu gösterir.
  • Her başarısızlık için bir Issue açın. TestCase.1 model denetimi bağlı Issue'su olmayan başarısız test senaryolarını işaretler.

Yaygın hatalar

  • Bir üst test senaryosunu Başarılı olarak ayarlamaya çalışmak. Üst öğeler alt öğelerinin toplanmış durumunu gösterir ve ayarlanamaz. Sonuçları yapraklarda kaydedin.
  • Bir gereksinimi testine verifies yerine traced to ile bağlamak. Gereksinim Yalnızca planlandı veya Doğrulanmadı olarak kalır. verifies oluşturan test senaryosu satırındaki +'yı kullanın.
  • Hiçbir şeyi doğrulamayan bir test senaryosu. Test Merkezi'nde sayılır ancak RVTM'de asla sayılmaz.

Diğer özelliklerle nasıl bağlantılıdır

  • Besleyenler:
    • gereksinimler ve ayrıştırmaları (Gereksinimler)
    • Conduit'lerdeki arayüz gereksinimleri (Arayüzler)
    • bir Measure aracılığıyla bir gereksinimi doğrulayabilen benzetim sonuçları (Benzetim)
  • Beslediği yerler:
    • RVTM ve dışa aktarımları
    • bir Kanban panosunda görev olarak planlayabileceğiniz, başarısızlıklar için Issue'lar (Proje yönetimi)
    • Model denetimleri (Requirement.10, TestCase.1)
    • Ana sayfa sağlık kartları ve Doğrulama rozeti
    • temel çizgiler ve inceleme paketleri
  • İzlenebilirlik Matrisi: kapsam kartındaki Matriste aç, verified by ile gereksinimler × test senaryolarını açar; bir paketin ⋯ → Şurada aç ▸ İzlenebilirlik Matrisi seçeneği hiyerarşisini açar.

Test Merkezi

Adres: test-center; test-center?root=<id> bir test senaryosunu veya paketi genişletir, ona kaydırır ve seçer (bir test senaryosundaki Şurada aç ▾ → Test Merkezi tarafından kullanılır).

DenetimEylem
Dışa aktar ▾RVTM (CSV), RVTM (Excel), RVTM (Word).
+ Yeni ▾Test paketi…, Test senaryosu… (atanmamış bir test senaryosu).
Sonuçları içe aktar…Bir önizlemeden sonra bir JUnit XML, CSV veya Excel dosyasındaki sonuçları eşleşen test senaryolarına kaydeder. Bkz. Sonuçları başka bir test sisteminden içe aktarın.
Paketi çalıştırHer yaprak test senaryosu (veya yalnızca durum filtresiyle eşleşenler) için çalıştırma modunu açar. Test senaryosu yoksa devre dışıdır.

Sağlık kartları ve filtreler

  • Test senaryoları: yaprak test senaryolarının sayısı ve paket sayısı.
  • Yürütülen: Çalıştırılmadı olmayan yaprakların yüzdesi ve sayısı.
  • Başarılı: başarılı yaprakların yüzdesi ve sayısı.
  • Başarısız: başarısız yaprakların sayısı, engellenenlerin sayısıyla birlikte.

Kartların altında:

  • Bir durum çubuğu.
  • Her biri sayısıyla Tümü (N), Çalıştırılmadı, Devam ediyor, Engellendi, Başarısız ve Başarılı filtreleri. Temizlemek için bir filtreye yeniden tıklayın.
  • Sağda paket sıralaması: Numaraya göre, Ada göre veya Değiştirilme tarihine göre.
  • Test senaryolarında ara: numara, ad veya açıklamayla eşleşir. Adı eşleşen bir paket tüm test senaryolarını gösterir.

Paket kartı

Başlık ▾/▸ (daralt), paket bağlantısını, Test Suite çipini, toplanmış durumu, test sayısını, döngü sayısını, küçük bir durum çubuğunu ve şunları gösterir:

  • + Test senaryosu — bu pakette bir test senaryosu oluşturur.
  • Yeni döngü başlat… — sonuçları bir döngü olarak kaydeder ve paketi sıfırlar (yukarıya bakın).
  • ⋯ (paket seçenekleri). Öğeler test iş akışını izler: çalıştır ve kaydet, raporla, aç, ardından çoğalt ve sil.
ÖğeEylem
Döngüyü çalıştır…Yalnızca bu paketin test senaryoları için çalıştırma modunu açar ve Çalıştırılmadı durumundaki ilkinden başlar. Pakette test senaryosu yoksa kapalıdır.
Yeni döngü başlat…Karttaki düğmeyle aynıdır: sonuçları bir döngü olarak kaydeder, ardından paketi sıfırlar.
Test döngüleri… (N)Test döngüsü listesini açar.
Test raporu…En son döngüde Test raporu'nu açar: döngüyü (veya geçerli sonuçları) ve biçimi (varsayılan Word) seçin, ardından Dışa aktar.
Test senaryoları (Word)…Paketin test senaryolarından bir Word belgesi yazar.
CSV dışa aktar<suite>.csv: Number, Name (derinliğe göre girintili), Description, Set Up, Expected Result, Actual Result, Status, Status Roll-Up, Verifies.
JSON dışa aktar<suite>.json: paket, test döngüleri ve doğrulanan gereksinimleriyle test senaryosu ağacı.
Belge olarak açPaketi bir belge olarak açar.
Şurada aç ▸Öğe görünümü (paketin Öğe görünümü) veya İzlenebilirlik Matrisi (kökü paket olan matris).
ÇoğaltPaketi ve test senaryolarını (<suite> (Kopya)) verifies bağlantılarıyla kopyalar; durumlar Çalıştırılmadı'ya sıfırlanır ve gerçek sonuçlar temizlenir. Bildirim: <name> olarak çoğaltıldı.
Sil…Test paketini sil: paketi siler; test senaryolarını da silmek için N test senaryosunu da sil'i işaretleyin.

Test senaryosu tablosu

Sütunİçerik
NumaraTest senaryosu numarası.
Test senaryosu ve yordamAd (Öğe görünümüne bağlantı) ve açıklama; alt test senaryoları için ▾/▸.
Beklenen sonuçMetin (en fazla üç satır; bir kutuda düzenlemek için tıklayın) ve + Adımlar / Adımlar (N). Üst öğeler — gösterir.
Gerçek sonuçMetin (düzenlemek için tıklayın); altında son çalıştırmanın test edeni ve tarihi, üzerine gelindiğinde konfigürasyon ve ürün ve kanıt dosyasına bir 📎 bağlantısı. Başarısız bir test Issue: <issue> veya + Issue oluştur gösterir.
DurumBir durum hapı (Çalıştırılmadı, Devam ediyor, Engellendi, Başarısız, Başarılı); başka birini seçmek için tıklayın. Test bir sonuca sahip olduğunda yanında ↻ Yeniden çalıştır. Üst öğeler toplanmış durumu gösterir.
DoğruladıklarıHer biri × (verifies ilişkisini kaldır, gereksinimin üzerine geldiğinizde gösterilir) ile doğrulanan gereksinimler ve + (Bu testin doğruladığı bir gereksinimi bağla).

Test senaryosunu özellik panelinde göstermek için bir satıra alanlarının dışında tıklayın. Boş paket: Bu pakette test senaryosu yok. + Test senaryosu ile bir tane ekleyin. Eşleşme yok: Filtreyle eşleşen test senaryosu yok. Tümünü görmek için filtreyi temizleyin.

Test adımları iletişim kutusu

Başlık: Test adımları — <test case>. Tablo sütunları:

  • #
  • Action (yer tutucu Bunu yap)
  • Beklenen sonuç (Bunu bekle)
  • Gerçek sonuç (Gözlenen)
  • Başarılı/Başarısız (—, Başarılı, Başarısız)
  • ↑ (Yukarı taşı) ve × (Adımı kaldır)

Tablonun altında: + Adım ekle, İptal ve Uygula. Boş adımlar Uygula'da atılır. Adım yoksa iletişim kutusu Henüz adım yok. Adımı olmayan bir test senaryosu bir bütün olarak çalıştırılır. gösterir.

Paketi çalıştır iletişim kutusu

Parçaİçerik
OturumTest eden (Adınız), Konfigürasyon / Derleme (Derleme, sürüm veya konfigürasyon), Test ürünü (Birim veya seri numarası), Aşama (Development, Qualification, Acceptance, Integration, Operational) ve Olay (örneğin Termal vakum 1). İlk testin son çalıştırmasından önceden doldurulur; Aşama ve Olay kaydettiğiniz her testte saklanır.
İlerlemeTest N / M, paket adı ve bir ilerleme çubuğu.
HeadingTest senaryosu, geçerli durum ve N kez çalıştırıldı, son <date>.
GövdeYordam, Ayarla, Adımlar (Action, Expected, Actual, Pass/Fail), Beklenen sonuç, Gerçek sonuç, Tarih ve saat, Kanıt (Kanıt ekle… ve dosya adları veya Geçerli: <file> / Dosya yok). Birkaç dosya seçebilirsiniz: ilki testin kanıtı olur, diğerleri kanıt listesine eklenir.
Düğmeler‹ Önceki, Atla, Engellendi, ✘ Başarısız, ✔ Başarılı; altta Kapat.

Test senaryoları (Word)

  • Dosya adı: varsayılan <suite> Test Cases.
  • Öznitelikleri seç: Number, Description, Set Up, Expected Result, Actual Result, Status, Status Roll-Up, Verifies, artı diğer her Test Case özniteliği (Tested By, Test Date, Configuration, Test Article, Test Evidence ve özel olanlar). Number, Description, Expected Result, Actual Result ve Status varsayılan olarak işaretlidir.
  • İndir: bir başlık bölümü (test senaryosu sayısı ve oluşturma tarihi) ve her test senaryosu için bir bölüm yazar.

Test döngüleri iletişim kutusu

Başlık: Test döngüleri — <suite>.

  • Döngü tablosu: Test döngüsü, Kaydedildi ve Sonuçlar (küçük durum çubuğu ve N/M başarılı); her satırda Görünüm, Rapor… (döngünün Test raporu), Geri döndür ve Sil.
  • Geri döndür şunu sorar: “<name>” içinde kaydedilen durumlar ve gerçek sonuçlar test senaryolarına geri yazılsın mı?
  • Karşılaştır: iki seçici (herhangi bir döngü veya Geçerli sonuçlar) ve Test senaryosu, Önce ve Sonra sütunlu bir tablo. Değişen satırlar vurgulanır.
  • Altta: Yeni döngü başlat… ve Kapat.

Döngü yoksa iletişim kutusu Henüz test döngüsü yok. “Yeni döngü başlat…” geçerli sonuçları kaydeder ve paketi sıfırlar. gösterir.

Doğrulama kapsamı

Sayfadaki son kart. Doğrulamayı planlamak ve hâlâ teste ihtiyaç duyan gereksinimleri bulmak için kullanın.

  • Başlık: Matriste aç ile birlikte M gereksinimden N'i başarılı bir testle doğrulandı (%P).
  • Durum çubuğu ve filtreler: Doğrulanmadı (N) (varsayılan), Tümü (N) ve her durum için bir filtre.
  • Not: Doğrulandı = doğrulayan bir test senaryosu Başarılı. Bir üst gereksinim, kendi başarılı testi olduğunda veya tüm alt gereksinimleri doğrulandığında doğrulanır. Yöntem düğmeleri: Analiz, Gösterim, Muayene, Test.

Her satır soldan sağa şunları gösterir:

  • durum hapı (farklı olduğunda kendi durumunu görmek için üzerine gelin)
  • gereksinim bağlantısı ve test sayısı
  • yöntem düğmeleri A R İ T
  • Düzey…
  • + Ölçütler veya ölçütler ayarlandıktan sonra Ölçütler ✓
  • + Test senaryosu

En fazla 300 satır gösterilir, ardından …ve N daha. Tümü doğrulandığında kart Her gereksinim başarılı bir testle doğrulanmıştır. gösterir.

Kanıt dosyaları

Bir test senaryosunun altındaki Kanıt (n) kanıt listesini açar. Bir çalıştırmadaki her günlüğü, fotoğrafı ve veri sayfasını testle birlikte saklayın.

  • Dosya ekle… bir veya daha fazla dosya ekler ve tek bir Geri al ile hepsi geri alınır.
  • Her dosya, dosyayı tutan ve test senaryosunun references ettiği, Verification Evidence etiketli bir Artifact'tir.
  • İndir bir dosyayı kaydeder; Kaldır Artifact'ini siler.

Durumun altında bir test senaryosu, ayarlandıklarında Verification Stage ve Verification Event değerlerini gösterir.

Issue oluştur

+ Issue oluştur başarısız bir testte, satırda ve çalıştırma modunda görünür. Şöyle bir Issue oluşturur:

  • Test failure: <test case> adında, Open durumunda
  • beklenen ve gerçek sonuçları içeren bir açıklamayla
  • test senaryosuna (causes veya related to) ve testin doğruladığı her gereksinime bağlı

Bildirim <name> Issue'su oluşturuldu der.

Resmi program açıkken başarısız bir test bunun yerine Karar… gösterir. Bir uygunsuzluk ve gerekirse bir muafiyet kaydeder. Bkz. Resmi program.

RVTM

Adres: rvtm, rvtm?status=<status> ve ?q=<text> ile.

Sayfa başlığı

DenetimEylem
Dışa aktar ▾Excel (.xlsx) (RVTM.xlsx), CSV (RVTM.csv) veya Word (.docx) (Gereksinim Doğrulama İzlenebilirlik Matrisi, her gereksinim için ifadesiyle bir bölüm).
Test MerkeziTest Merkezi'ni açar.

Üç dışa aktarımın hepsi Requirement Number, Requirement, Verification Method, Verification Level, Success Criteria, Verified By (her test senaryosu toplanmış durumuyla), Own Status, Status (toplanmış), Verification Stage ve Verification Event içerir. Resmi program açıkken Deviations and Waivers ve Closure eklerler.

Kartlar

Doğrulandı (Başarılı) bir ilerleme çubuğuyla doğrulanan / toplam gösterir. Başarısız, Çalıştırılmadı, Yalnızca planlandı ve Doğrulanmadı sayıları gösterir.

RVTM projenin kendi gereksinimlerini listeler. Customer Specification etiketli bir belgedeki gereksinimler satırların ve toplamların dışında bırakılır; Uyumluluk matrisi onları, onlara yanıt veren gereksinimlerinizin doğrulamasıyla birlikte değerlendirir.

Tabloyu filtrelemek için bir karta tıklayın (Yalnızca bunlar gösteriliyor. Tümünü göstermek için tıklayın.). Filtreyi temizlemek için Status: <status> × çipine tıklayın.

Tablo

Sütunİçerik
#Gereksinim numarası.
GereksinimÖğe görünümüne bağlantı veren ad. Addan sonraki bir ⚠, gereksinimin bağlantılarından birinin incelenmesi gerektiği anlamına gelir: gereksinim veya ondan yukarı akıştaki öğe değişti.
YöntemDoğrulama yöntemleri veya —.
DüzeyVerification Level veya —.
DoğrulayanDoğrulayan test senaryoları veya Test yok. Bir test senaryosundan sonraki bir ⚠, doğrulama bağlantısının incelenmesi gerektiği anlamına gelir; araç ipucu neyin ne zaman değiştiğini gösterir.
AşamaDoğrulayan test senaryolarının doğrulama aşamaları veya —.
KanıtTest senaryolarının kanıt dosyalarının sayısı artı gereksinimi doğrudan doğrulayan raporlar. Analiz gibi bir rapor eklemek için tıklayın.
KendiKendi durumu.
DurumToplanmış durum.
Sapma/MuafiyetYalnızca resmi program. Durumlarıyla gereksinime karşı sapmalar ve muafiyetler veya başarısız bir sonuç için Karar….
KapanışYalnızca resmi program. İmzala…, ad ve tarihle Kapalı ve Yeniden aç veya Açık. Bkz. Resmi program.

RVTM | VCRM tabloyu değiştirir. VCRM (doğrulama çapraz başvuru matrisi) planlama görünümüdür: İ, A, R ve T sütunları yöntemleri (muayene, analiz, gösterim, test) işaretler, ardından Düzey, Aşama, Olay, Doğrulayan ve Durum.

Numaraya veya ada göre filtrele satırları daraltır. Gereksinimi özellik panelinde göstermek için bir satıra tıklayın (veya Enter tuşuna basın).

Bağlantıları en son incelendiğinden beri hangi öğelerin değiştiğini görmek için bir gereksinimin ⚠ işaretinin üzerine gelin. İncelenecek bağlantılar — <requirement> iletişim kutusunu açmak için tıklayın: gereksinimin her iki ucundaki incelenecek her bağlantı, Fark ve İncelendi olarak işaretle… ile, ve tüm liste için İncelenecek açık bağlantılar (İncelenecek bağlantılar). Dışa aktarımlar şüpheli işaretlerini dışarıda bırakır: durum sütunları yalnızca doğrulama sonuçlarını içerir.

Kısayollar

TuşYerEylem
Enter / SpaceRVTM satırıGereksinimi özellik panelinde gösterir
↑ / ↓RVTMSatırlar arasında gezinir
EscRVTMSeçimi temizler
⌘K / Ctrl+KHer yerdeRVTM'yi dışa aktar (Excel) gibi eylemleri arayın

İletiler

İletiAnlamı
Ad veya numara gereklidirİkisi de olmadan bir paket oluşturmak.
Çalıştırılacak bir şey yok: eşleşen test senaryosu yok. Test senaryoları ekleyin veya durum filtresini temizleyin.Paketi çalıştır, filtreyle eşleşen yaprak test senaryosu bulamadı.
Test döngüsü kaydedildi / Test döngüsü kaydedildi; durumlar Not Run olarak sıfırlandıYalnızca kaydet / Kaydet ve yenisini başlat.
<name> test senaryosu oluşturulduKapsam kartındaki + Test senaryosu.
<file> (yalnızca ad: 10 MB'ın üzerinde)Kanıt dosyası dosya başına sınırdan büyük (Free planda 10 MB, 10 × 1.048.576 bayt olarak sayılır); yalnızca adı kaydedilir.
Bu projede gereksinim yok. Gereksinimleri yazın veya içe aktarın, ardından test senaryolarını “verified by” ile bağlayın.RVTM boş.
Bu filtreyle eşleşen gereksinim yok. Her gereksinimi göstermek için filtreyi temizleyin.RVTM filtresi her satırı gizliyor.
Bu test senaryosunu oluşturmak için kutuyu işaretleyin.Test senaryosu oluştur, YZ taslağında bir web adresi buldu; oluşturmadan önce onaylayın.

Sınırlar

  • Test kanıt dosyaları: Free planında dosya başına 10 MB (10.485.760 bayt); ücretli planlarda 25 MB (26.214.400 bayt). Daha büyük dosyalar yalnızca adıyla kaydedilir. Kanıtlar projenin depolama alanından düşülür (bkz. Depolama ve sınırlar).
  • Kapsam kartı geçerli filtrenin ilk 300 gereksinimini gösterir.
  • Test senaryosu başına bir kanıt dosyası (en sonuncusu) test senaryosunda tutulur; çalıştırma günlüğü her çalıştırmanın kanıt dosyası adını tutar.