Посібник · Верифікація
Матриця верифікації вимог (RVTM): стовпці, методи й практичний приклад
Прослухати цей посібник 29 хв
Матриця верифікації вимог, або RVTM, перелічує кожну вимогу з тим, як її буде верифіковано, подією, що її верифікує, результатом і доказами. Цей посібник охоплює стовпці, вибір огляду, аналізу, демонстрації чи випробування, планування й результати, відображення непройдених і змінених результатів, а також рецензування покриття перед віхою на прикладі RVTM 6U CubeSat для спостереження Землі.
На цій сторінці
- Що таке матриця верифікації вимог
- Хто її використовує і коли
- Стовпці
- Вибір методу верифікації
- Планування й результати
- Значення статусів і підсумовування
- Генеруйте її з моделі
- Як відображаються непройдені й змінені результати
- Рецензування покриття перед віхою
- Практичний приклад: RVTM CubeSat EO-1
- Одна матриця на продукт у лінійці продуктів
- Типові помилки
- Спробуйте в Holarch
- Куди далі
Що таке матриця верифікації вимог
Верифікація з’ясовує, чи правильно побудовано систему: чи відповідає вона кожній вимозі в її формулюванні? Матриця верифікації вимог — місце, де на це запитання відповідають вимога за вимогою. Кожен рядок — одна вимога. Стовпці кажуть, як її буде верифіковано, на якому рівні збирання, якою подією і що з цієї події вийшло. Чим верифікація відрізняється від валідації, яка натомість перевіряє систему щодо потреб зацікавлених сторін, див. у посібнику «Верифікація та валідація».
Ту саму таблицю називають по-різному. RVTM (requirements verification traceability matrix) наголошує на зв’язку від вимоги до тесту. VCRM (verification cross-reference matrix) поширена в оборонних і аерокосмічних програмах і часто означає половину планування: вимога, метод і рівень. Матриця верифікації або матриця відповідності може додавати для замовника твердження про відповідність у кожному рядку. Вміст трохи відрізняється від організації до організації, але ідея та сама: один рядок на вимогу, і жодна не лишається без запланованого способу показати її виконання.
ISO/IEC/IEEE 15288 описує верифікацію як процес, що планує дії з верифікації, готує все потрібне для них, виконує їх і записує результати, і він очікує, що кожну вимогу покриває щонайменше одна дія. Матриця — звичайний запис цього покриття. INCOSE Systems Engineering Handbook розглядає її так само: робочий інструмент під час розроблення й результат, що подається на рецензування. Матриця — верифікаційний кінець простежуваності вимог: там, де простежуваність питає, звідки походить вимога і що її задовольняє, RVTM питає, що її доводить.
Наскрізний практичний приклад — EO-1, вигаданий 6U CubeSat, що знімає сільськогосподарські угіддя в чотирьох спектральних діапазонах з орбіти 500 km. Його специфікація має 32 вимоги та 19 подій верифікації у двох наборах тестів; третій набір містить події валідації для потреб зацікавлених сторін. Це той самий проєкт, який огляд прикладу проєкту MBSE простежує від потреб зацікавлених сторін до документів, тож рядки тут можна простежити назад до функцій, компонентів і аналізів, що на них відповідають.
Хто її використовує і коли
- Рецензування вимог (наприклад, рецензування системних вимог). Рецензенти перевіряють, що кожна вимога має метод і рівень. Вимога, про яку ніхто не може сказати, як її верифікувати, зазвичай неоднозначна чи невимірювана, і рецензування — найдешевший момент її переписати.
- Рецензування проєкту. Тепер матриця називає тестові випадки, аналізи й огляди. Рецензенти шукають вимоги, що досі не мають події, і тести, які потребують обладнання чи виробів, яких ніхто не запланував.
- Рецензування готовності до випробувань. Перед початком кампанії матриця показує, які вимоги кампанія закриє і які процедури готові.
- Кваліфікація. Кваліфікація показує, що проєкт відповідає своїм вимогам, часто із запасом, на дослідному зразку, виготовленому для цього. Матриця перелічує кожен результат кваліфікації та його звіт.
- Приймання. Приймання показує, що кожну поставлену одиницю виготовлено й вона працює за проєктом. Замовник підписує приймання за матрицею, рядок за рядком, із доданими доказами або посиланнями на них.
- Аудити та сертифікація. Аудитор вибирає рядки й іде за ними до доказів. Матриця, стовпець доказів якої вказує на реальні файли з версіями, це витримує; та, що каже «див. звіт про випробування» без версії, — ні.
Стовпці
Практична матриця має такі стовпці. Деякі організації розділяють їх або перейменовують; мало хто якийсь пропускає.
| Стовпець | Містить | Заповнюється |
|---|---|---|
| Вимога | Ідентифікатор і коротка назва; повне твердження доступне одним клацанням, а не вставлене | Коли написано вимогу |
| Метод | Огляд, аналіз, демонстрація або випробування; за потреби кілька | Аналіз вимог |
| Рівень | Де її верифікують: компонент, підсистема або система (або блок, збірка, сегмент) | Аналіз вимог |
| Критерії успіху | Вимірюваний результат, що вважається виконанням, з умовами | Аналіз вимог |
| Подія верифікації | Тестовий випадок, аналіз, огляд або демонстрація, що її виконує | Проєкт |
| Статус | Неверифіковано, заплановано, не виконано, пройдено або не пройдено | Інтеграція та випробування |
| Докази | Звіт, файл даних або запис, що показує результат, з його версією, збіркою та дослідним зразком, на якому його отримано | Інтеграція та випробування |
Перші чотири стовпці — план. Останні три — результати. Важливо тримати ці половини окремо, бо вони змінюються в різний час і з різних причин (див. планування й результати).
Вибір методу верифікації
Є чотири стандартні методи. Тут їх наведено від найдешевшого до найдорожчого, що також є звичайним порядком переваги, коли підійде більше одного. Метод найкраще вибирати під час написання вимоги; посібник із написання вимог показує чому на прикладі TC-06.
- Огляд
- Вивчення елемента чи його документації без його роботи: вимірювання розміру, читання етикетки, перевірка сертифіката, креслення чи параметра конфігурації. Підходить для фізичних ознак, маркування, матеріалів і всього, що сформульовано як «shall have» або «shall be made of». Він також охоплює перегляд записів, створених деінде: EO-1 верифікує 3.4 Bus Regulation (12 V у межах 2%) оглядом кваліфікаційного звіту блока розподілу живлення та його даних зі стрибків навантаження замість повторення випробування.
- Аналіз
- Показ виконання вимоги розрахунком, моделюванням або симуляцією, часто з використанням даних випробувань нижчих рівнів. Підходить, коли випробувати реальний об’єкт неможливо чи небезпечно або коли аналіз охоплює значно більше випадків, ніж будь-яке випробування. 1.7 Mission Lifetime для EO-1 (730 діб на орбіті) можна показати лише аналізом надійності, а 1.6.1 Ground Track Repeat — прогнозуванням орбіти.
- Демонстрація
- Робота елемента, щоб показати, що він щось робить, зі спостереженням, але без приладів для точного вимірювання. Підходить для функціональних і експлуатаційних вимог із результатом «так чи ні»: 6.1 Contact Scheduling для EO-1 (сеанси зв’язку бронюються за 48 годин) показують, провівши команду операторів через 14 днів репетицій.
- Випробування
- Робота елемента в контрольованих умовах і вимірювання результату відносно числа. Підходить для вимог до характеристик зі значенням і допуском, як-от 2.1 Pointing Accuracy (у межах 0.1 градуса від цілі). Випробування дає найвагоміші докази й зазвичай коштує найдорожче.
Кілька запитань, що визначають вибір:
- Чи містить вимога число? Тоді їй зазвичай потрібне випробування або аналіз; демонстрація не може показати «у межах 0.1 градуса».
- Чи можна відтворити умову? Два роки на орбіті чи проліт із відхиленням 25 градусів від надиру над реальним полем неможливо влаштувати в лабораторії. Такі вимоги відходять до аналізу, підкріпленого випробуванням у точці, яку лабораторія може досягти.
- На якому рівні це видно? Ємність акумулятора можна випробувати на акумуляторному блоці (рівень компонента); точність наведення потребує підсистеми орієнтації; повторне знімання за 72 години існує лише для всієї місії. Верифікуйте кожну вимогу на найнижчому рівні, де властивість присутня повністю.
- Що прийме замовник? Контракти часто фіксують метод для ключових вимог. Погоджуйте його рано, а не під час приймання.
Одночасно пишіть критерії успіху. «Відповідає вимозі» — не критерій. «Похибка не більше 0.1 градуса на кожній із 20 заданих цілей» — критерій: будь-хто може це виконати й дійти того самого висновку.
Планування й результати
Половину планування в матриці визначають під час аналізу вимог і проєктування. Вона відповідає на запитання «як ми дізнаємося?» і має бути повною задовго до появи будь-якого обладнання. Вимога без методу на рецензуванні вимог — це дефект набору вимог, а не прогалина в програмі випробувань.
Половину результатів заповнюють під час інтеграції та випробувань. Вона змінюється щоразу, коли виконується подія, і має сенс лише разом із тим, що саме випробовували: версією збірки чи програмного забезпечення, серійним номером дослідного зразка, датою та особою. Результат без збірки й дослідного зразка неможливо повторити чи перевірити аудитом, і він не скаже, яка збірка виправила відмову.
Дві звички тримають обидві половини чесними:
- Одна подія на рядок доказів. Звіт про аналіз, запис огляду й демонстрація — такі самі події верифікації, як і тестовий випадок. Дайте кожній власний запис із результатом, щоб матриця показувала докази для кожного методу, а не лише для випробувань.
- Верифікуйте кінцеві, підсумовуйте батьківські. Батьківська вимога, декомпонована на дочірні, верифікована, коли верифіковано всі дочірні або коли вона має власну подію. Підсумовування дає змогу не планувати дублікати тестів для батьківської вимоги й одразу показує, яка гілка її стримує.
Значення статусів і підсумовування
П’ять значень статусу охоплюють життя рядка:
| Статус | Значення | Що робити |
|---|---|---|
| Неверифіковано | Немає ні методу, ні події | Сплануйте або поставте під сумнів вимогу |
| Лише заплановано | Метод задано, події ще немає | Напишіть тестовий випадок, аналіз або огляд |
| Не виконано | Події існують, жодна не має результату | Заплануйте їх |
| Пройдено | Подію пройдено, і жодна не провалена | Зберігайте докази разом зі збіркою та дослідним зразком |
| Не пройдено | Подію не пройдено | Створіть проблему, виправте, повторіть |
Подія верифікації має власні, детальніші стани: не виконано, виконується, заблоковано, не пройдено або пройдено. Для матриці подія, що виконується чи заблокована, ще не має висновку, тож її вимога вважається невиконаною.
Для батьківської вимоги відмова будь-де нижче робить її непройденою, а пройденою вона стає, лише коли пройдено кожну дочірню (або її власну подію). Інакше вона показує, наскільки просунулася її найменш покрита гілка. Підрахунок рядків за статусом дає одне число, яке більшість рецензувань запитує першим: скільки вимог верифіковано з-поміж скількох.
Генеруйте її з моделі
Більшість матриць починають життя як електронна таблиця, і більшість електронних таблиць розходяться з дійсністю. Текст вимоги вставляють, і він застаріває, коли вимога змінюється. Статус тесту вводять вручну після кожного запуску — той, хто згадає. Перед рецензуванням ходять дві копії, і ніхто не певен, яку бачив замовник. Ніщо з цього не є недбалістю; електронна таблиця — це копія, а копії розходяться.
Альтернатива — зберігати вміст матриці там, де він уже є, і генерувати таблицю з нього:
- метод, рівень і критерії успіху — це атрибути вимоги;
- кожна подія верифікації — це елемент, пов’язаний із вимогами, які вона верифікує;
- кожен результат із його збіркою, дослідним зразком і доказами записується в подію під час її виконання;
- матриця — це запит до цих зв’язків, що перебудовується щоразу, коли її відкривають або експортують.
Тоді матриця не може розходитися з вимогами чи записами випробувань, бо не має власних даних. Експортована копія для рецензування все одно є знімком, але її створюють за секунди з поточної моделі, а не ведуть вручну. Це одна з найочевидніших переваг зберігання вимог, проєкту та верифікації в одній моделі; сторінка можливостей верифікації описує, як це робить Holarch.
Як відображаються непройдені й змінені результати
Два види змін роблять рядок хибним після того, як він здавався завершеним.
Непройдений результат
Відмова — це інформація, а не привід для сорому, і матриця має показувати її прямо. Непройдена подія лишається непройденою, доки її не повторять; її не скидають тихо. Кожна відмова отримує проблему (звіт про проблему або звіт про невідповідність), пов’язану з подією та вимогами, які вона верифікує, тож рядок матриці веде до розслідування. Коли надходить виправлення, подію повторюють на новій збірці, і запис зберігає обидва запуски: відмову на старій збірці й успіх на новій. Збереження результатів кожної кампанії випробувань як знімка (часто його називають тестовим циклом) дає змогу порівнювати кампанії й бачити, які саме рядки змінилися.
Змінена вимога
Тихіша проблема — вимога, що змінюється після того, як її тест пройдено. Якщо вимога до потужності зростає з 28 W до 30 W, старий успіх уже нічого не доводить щодо нового значення, але стовпець статусу й далі показуватиме «пройдено». Добра матриця позначає зв’язок між зміненою вимогою та подією, що її верифікує, як підозрілий, доки хтось його не перевірить: або подія вже покриває нове значення, або процедуру треба змінити й подію повторити. Те саме стосується змін вище за вимогою. Підозрілі зв’язки загалом розглянуто в розділі посібника з простежуваності про підозрілі зв’язки; для верифікації правило коротке: успіх, записаний до останньої зміни вимоги, потребує перевірки, перш ніж його зарахують на віхі. Посібник з аналізу впливу змін простежує ту саму зміну від запиту на зміну до повторного випробування.
Рецензування покриття перед віхою
За тиждень до рецензування пройдіться матрицею з такими запитаннями:
- Неверифіковані рядки. Кожна вимога повинна мати щонайменше метод. Рядкам без нього або бракує плану, або вони неверифіковані в поточному формулюванні.
- Рядки «лише заплановано». Для рецензування проєкту кожен має мати подію або причину, чому її ще немає. Для приймання жодного не повинно лишитися.
- Непройдені рядки. Кожен потребує пов’язаної проблеми з відповідальним і планом. Відмова без проблеми — найчастіше зауваження на рецензуваннях випробувань.
- Підозрілі рядки. Кожен потребує рішення: досі чинний чи повторити.
- Перевірка рівня й методу на здоровий глузд. Шукайте вимоги системного рівня, верифіковані лише випробуванням компонента, числові вимоги, верифіковані лише демонстрацією, і події, процедура яких не вимірює того, що зазначає вимога.
- Докази. Вибірково перевірте кілька пройдених рядків: чи існують докази і чи відповідають їхня збірка та дослідний зразок тому, що рецензується?
- Події-сироти. Тестові випадки, що не верифікують жодної вимоги, коштують грошей і нічого не доводять у записі. Пов’яжіть їх або виведіть з ужитку.
Записуйте кількості за статусом на кожній віхі. Тенденція (неверифікованих меншає, пройдених більшає, непройдені закриваються) каже про стан програми більше, ніж будь-який окремий знімок.
Практичний приклад: RVTM CubeSat EO-1
Приклад — демопроєкт CubeSat EO-1 у Holarch, де вимоги зберігаються в SRS-001 EO-1 System Requirements Specification, події верифікації — це Test Case у двох Test Suite, і кожен тестовий випадок verifies свої вимоги (третій набір, TS-3 Mission Validation, валідує потреби зацікавлених сторін і не входить до RVTM). Для цього посібника до демо додано одну зміну — ту саму, яку робить крок зміни в прикладі MBSE: після попереднього рецензування проєкту середнє за орбіту навантаження зросло до 26 W, тож вимогу 3.1 Orbit Average Power підвищено з 28 W до 30 W.
Завантажте приклад: матриця верифікації вимог EO-1 як книга Excel (.xlsx, 32 рядки) або та сама матриця у CSV. Обидва — власний експорт RVTM з Holarch для проєкту, показаного нижче: номер і назва вимоги, метод, рівень, критерії успіху, тестові випадки верифікації з їхнім статусом, власний статус і підсумковий статус. Використовуйте їх як шаблон для власних стовпців.
План
Вибірка рядків, по одному для кожного методу й рівня, з критеріями успіху в тому формулюванні, що й у специфікації:
| # | Вимога | Метод | Рівень | Критерії успіху |
|---|---|---|---|---|
| 1.2 | Ground Sample Distance: 4.5 m з орбіти 500 km | Випробування | Система | MTF на частоті Найквіста щонайменше 0.12 на штриховій мірі 4 m |
| 1.6.1 | Ground Track Repeat: кожні 3 доби | Аналіз | Система | Прогнозування орбіти показує повторення за 3 доби ± 1 година |
| 2.1 | Pointing Accuracy: у межах 0.1 градуса | Випробування | Підсистема | Похибка не більше 0.1 градуса на кожній із 20 заданих цілей |
| 3.1 | Orbit Average Power: щонайменше 30 W наприкінці строку служби (було 28 W) | Випробування | Підсистема | Середня за орбіту потужність наприкінці строку служби, спрогнозована з виміряної пікової потужності |
| 3.2 | Battery Capacity: щонайменше 77 Wh на початку строку служби | Випробування | Компонент | Виміряна ємність щонайменше 77 Wh при C/2 і 20 °C |
| 3.4 | Bus Regulation: 12 V у межах 2% | Огляд | Компонент | Напруга шини в межах 11.76–12.24 V за всіх стрибків навантаження |
| 6.1 | Contact Scheduling: за 48 годин | Демонстрація | Система | Сеанси зв’язку бронюються за 48 h протягом 14 днів поспіль під час репетиції |
| 6.5 | Planning Cycle Time: протягом 100 хвилин | Аналіз | Система | Симуляція Monte Carlo вкладається в 100 хвилин з імовірністю щонайменше 90% |
| 2.5 | Safe Mode Recovery: «quickly … as appropriate» | (немає) | (немає) | (немає) |
Наявні всі чотири методи на трьох рівнях. Ємність акумулятора випробовують на самому блоці, бо властивість повністю присутня там; точність наведення потребує підсистеми орієнтації на аеростатичному стенді; повторення траси — властивість орбіти, тож воно відходить до аналізу. 6.5 верифікують імовірнісним аналізом експлуатаційного графіка — перевіркою такого роду, як у посібнику з Monte Carlo. Критерій 3.1 — прогноз на основі вимірювання: випробування вимірює пікову потужність сонячних батарей, а рівняння в бюджеті потужності перетворює її на середнє за орбіту значення. 2.5 не має методу, бо в поточному формулюванні її неможливо верифікувати.
Результати та кампанії випробувань
19 тестових випадків верифікації розміщено у двох наборах: TS-1 Spacecraft Qualification Tests (15 тестових випадків, від випробувань на оптичному стенді до аналізів) і TS-2 Communications and Ground Tests (4). Третій набір, TS-3 Mission Validation, містить VAL-01–VAL-03, які верифікують потреби зацікавлених сторін, а не вимоги, тож RVTM їх не включає (див. «Верифікація та валідація»). Кожен записаний результат містить випробувача, дату, збірку (версію бортового програмного забезпечення), дослідний зразок (серійні номери обладнання) і, якщо є, файл доказів.
TC-04 Pointing Accuracy Test не пройдено: під час другого запуску з бортовим програмним забезпеченням 2.3.1 три з 20 цілей опинилися поза межами 0.1 градуса, найбільше відхилення — 0.14 градуса, і підозрюють тертя маховика. До відмови прив’язано проблему, пов’язану з тестовим випадком і через нього з вимогами 2.1 і 2.2. TC-09 Safe Mode Entry Test не пройдено так само (14 секунд проти 10), і він має власну проблему. Два тестові випадки, TC-11 UHF Command Test і TC-17 Slew Time Analysis, виконуються; у матриці вони вважаються невиконаними, доки не матимуть висновку.
Кампанію на flatsat проведено двічі, і результати кожної кампанії збережено як тестовий цикл. Порівняння двох показує, що змінила друга кампанія:
- Flatsat Cycle 1: пройдено 5 з 9. TC-03 і TC-06 не виконано; TC-04 (0.16 градуса на 5 цілях) і TC-09 (15 секунд) не пройдено.
- Flatsat Cycle 2: пройдено 8 з 11. TC-03 і TC-06 пройдено, аналіз TC-13 додано й пройдено, TC-14 додано, але не виконано. TC-04 і TC-09 покращилися (0.14 градуса на 3 цілях, 14 секунд), але досі не пройдені.
«Покращилося, але досі не пройдено» — саме те, що приховує стовпець статусу і що зберігає порівняння циклів: виправлення між кампаніями зсунули числа в правильному напрямку, але жодну з відмов не закрито.
Читання матриці
Матрицю згенеровано з наведених вище вимог і тестових випадків; нічого в ній не введено в таблицю вручну. Картки рахують рядки за підсумковим статусом, і п’ять кількостей дають у сумі 32 вимоги: 11 пройдено, 3 не пройдено, 12 не виконано, 3 лише заплановано, 3 неверифіковано. Як її прочитала б рада з рецензування:
- 11 з 32 верифіковано (34%). Пройдено випробуванням (1.2, 3.2), аналізом (1.6.1, 1.7) і оглядом (3.4). Жодної демонстрації ще не пройдено: усі три (5.4, 6.1, 6.2) чекають на репетиції наземного сегмента в TS-2.
- 2.1 і 2.2 не пройдено через один тест. TC-04 верифікує обидві, тож одна відмова провалює два рядки. Якщо придивитися, 2.2 Pointing Stability має й другу проблему: її критерій — дрейф протягом кожного 40-секундного знімання, але TC-04 вимірює лише похибку наведення на кожну ціль. Навіть пройдений TC-04 не показав би, що 2.2 виконано. Це зауваження щодо відповідності методу: 2.2 потребує власного вимірювання, або процедура TC-04 має записувати дрейф.
- 4.3 не пройдено через TC-09. Проблему та завдання підвищити частоту опитування сторожового таймера й повторити TC-09 задокументовано; рядок лишається непройденим, доки TC-09 не пройде на новому програмному забезпеченні.
- 1.6 Revisit Time підсумовується. Сама по собі вона лише запланована (аналіз, без події), але її визначають дві дочірні: 1.6.1 пройдено, 1.6.2 Off-Nadir Imaging не виконано, тож 1.6 показує «не виконано». Окремий тест батьківської вимоги не потрібен, щойно обидві дочірні пройдено.
- Лише заплановано: 1.5, 4.4 і 6.5. Кожна має метод і не має події. 4.4 Downlink Encryption також не має ні рівня, ні критеріїв, тож її план не завершено.
- Неверифіковано: 2.5, 3.5 і 6.4. Немає ні методу, ні події. Це також три найслабші вимоги в специфікації («quickly … as appropriate», «warm enough (TBD)», «user friendly and/or easy to use»). Прогалини в матриці зазвичай вказують на вимоги, які треба переписати, а не на відсутні тести.
- 3.1 підозріла. Див. наступний розділ.
Змінена вимога: 3.1 після PDR
TC-06 Solar Array Power Test пройдено: очікуваним результатом була пікова потужність щонайменше 72 W, а сонячні батареї дали 75.1 W. Потім 3.1 підвищили з 28 W до 30 W. Стовпці статусу досі показують «пройдено», бо TC-06 справді пройдено. Знак ⚠ після вимоги та після TC-06 означає, що успіх старший за вимогу. Клацання на ньому перелічує кожен зв’язок від 3.1, який зміна зробила підозрілим:
Для зв’язку верифікації запитання конкретне: чи досі 75.1 W виміряної пікової потужності показують 30 W середньої за орбіту? Відповідає бюджет потужності. Його рівняння EQ-1.3 перетворює пікову потужність на середню за орбіту з урахуванням освітленої частки орбіти (0.62) і ККД тракту живлення (0.6):
| Пікова потужність | Середня за орбіту (× 0.62 × 0.6) | Що це |
|---|---|---|
| 72,0 W | 26,8 W | Очікуваний результат TC-06 |
| 75,1 W | 27,9 W | Виміряний результат TC-06 |
| 75,3 W | 28,0 W | Потрібно для старої 3.1 |
| 80,6 W | 30,0 W | Потрібно для нової 3.1 |
Отже, успіх не можна перенести: щоб показати 30 W, сонячним батареям потрібно близько 80.6 W пікової потужності, а TC-06 виміряв 75.1 W на кваліфікаційних панелях на початку строку служби, до будь-якої деградації наприкінці строку. Рецензування також виявляє давнішу проблему, яку оголила зміна: поріг TC-06 у 72 W відповідає лише 26.8 W середньої за орбіту, тож навіть щодо 28 W очікуваний результат тесту не виводився з вимоги через бюджет потужності. Правильний результат — лишити зв’язок підозрілим, створити проблему, переглянути очікуваний результат TC-06 за рівнянням (і разом з інженером з електроживлення вирішити, чи змінюються батареї, чи запас), а потім повторити тест. Позначка підозрілості лишається, доки це рішення не задокументовано, тож ніхто не сприйме старе «Пройдено» як доказ для 30 W.
Експортована матриця містить лише результати верифікації, без позначок підозрілості: у завантаженій книзі 3.1 показує «Пройдено». Перегляньте підозрілі рядки в моделі, перш ніж експортувати копію для віхи.
Планування решти рядків перед рецензуванням
Список покриття показує 21 рядок, ще не верифікований (32 мінус 11), з елементами керування для завершення їхнього плану. Перед критичним рецензуванням проєкту він окреслює таку роботу:
- Перепишіть 2.5, 3.5 і 6.4 так, щоб їх можна було верифікувати, потім задайте кожній метод, рівень і критерії.
- Задайте 4.4 рівень і критерії та створіть для неї огляд; створіть аналізи для 1.5 і 6.5.
- Закрийте відмови: TC-04 — після дослідження маховиків, TC-09 — після зміни сторожового таймера, з окремим вимірюванням дрейфу для 2.2.
- Ухваліть рішення щодо 3.1: перегляньте й повторіть TC-06 щодо 30 W.
- Заплануйте невиконані події, почавши з TC-19 Array Deployment Test і чотирьох подій TS-2, які разом верифікують вісім вимог.
Запис кількостей на кожному рецензуванні (тут 11 пройдено, 3 не пройдено, 12 не виконано, 3 лише заплановано, 3 неверифіковано) дає тенденцію, з якою порівнюватиме наступне рецензування.
Одна матриця на продукт у лінійці продуктів
У цьому посібнику «збірка» означає те, на чому виконувався тест: версію програмного забезпечення та серійні номери дослідного зразка. Лінійка продуктів — інше поняття: кілька продуктів, як-от EO-1 Flight і дешевший EO-1 Lite, в одній моделі, кожен як конфігурація продукту. Їхні вимоги перетинаються, але не збігаються, і успіх на одному продукті не верифікує інший. EO-1 Lite літає з радіостанцією S-діапазону, тож тест лінії X-діапазону, пройдений для EO-1 Flight, нічого про нього не каже.
Тоді матрицю треба читати для кожного продукту. У Holarch виберіть конфігурацію продукту в Переглянути як ▾: RVTM показує лише вимоги цієї конфігурації та записані для неї результати, тож «верифіковано» означає верифіковано для цього продукту, а її експорти називають конфігурацію. Усі конфігурації додає по одному стовпцю підсумкового статусу на конфігурацію з «—» там, де вимога до неї не входить. Виконати набір у поданні конфігурації записує результати як результати цієї конфігурації й заповнює поле Конфігурація / збірка назвою продукту; збірку та дослідний зразок однаково варто записувати. Лінійки продуктів потребують тарифу Individual або Team; див. Лінійки продуктів: RVTM і посібник з інженерії лінійок продуктів.
Типові помилки
- Повторення вимоги як критерію успіху. «ADCS наводиться з точністю до 0.1 градуса» нічого не каже про те, скільки цілей, за яких умов і відносно якого еталона.
- Порогові значення тестів, не виведені з вимоги. Очікуваний результат тесту має випливати з вимоги через аналіз, що їх пов’язує, — для 72 W у TC-06 цього не було. Перевіряйте арифметику, коли пишете тест, а не коли змінюється вимога.
- Один тест для кількох вимог без вимірювання кожної. Спільний тест ефективний, але лише якщо процедура записує кожну величину, зазначену в пов’язаних вимогах.
- Пряма верифікація батьківських вимог. Тест для батьківської вимоги, що лише повторює тести її дочірніх, подвоює роботу й документацію. Верифікуйте кінцеві вимоги, а батьківська хай підсумовується.
- Аналіз без доказів. Аналіз — це подія верифікації, і йому потрібні звіт, версія та висновок, як і будь-якому тесту.
- Пов’язування тесту з вимогою загальним зв’язком «пов’язано». Матриця рахує лише зв’язки верифікації; тест, пов’язаний будь-яким іншим способом, лишає вимогу на вигляд неверифікованою.
- Скидання відмови на «не виконано», щоб упорядкувати матрицю. Зберігайте відмову та її проблему; саме історію запитує аудитор.
- Ігнорування підозрілих рядків під час приймання. Успіх, давніший за вимогу, яку він нібито верифікує, не є доказом для поточної вимоги.
Спробуйте в Holarch
- Створіть проєкт EO-1: Керування проєктами → Файли проєкту ▾ → Новий демопроєкт → CubeSat (Guided systems engineering). Або почніть із власних вимог у документі вимог; див. Вимоги.
- Відкрийте Верифікація → Центр тестування. У Покриття верифікацією задайте метод кожної вимоги кнопками A, Б, К і T, виберіть рівень у Рівень… і додайте критерії успіху через + Критерії.
- Створюйте набори тестів і тестові випадки через + Створити ▾ і + Тестовий випадок і пов’язуйте кожен тестовий випадок з його вимогами кнопкою + у стовпці Верифікує. Аналізи, огляди й демонстрації — теж тестові випадки.
- Записуйте результати кнопками статусу або пройдіть кампанію через Виконати набір, що записує випробувача, збірку (поле Конфігурація / збірка), дослідний зразок і файл доказів для кожного запуску. Після відмови клацніть + Створити Issue.
- Збережіть кампанію через Почати новий цикл… і порівнюйте кампанії в меню набору ⋯ → Тестові цикли….
- Відкрийте Верифікація → RVTM. Клацніть картку статусу, щоб відфільтрувати рядки. Щоб побачити позначку підозрілості, змініть текст вимоги 3.1, потім клацніть ⚠ поруч із нею.
- Клацніть Експортувати ▾, щоб отримати Excel (.xlsx), CSV або Word (.docx). Приклад для завантаження вище — саме такий експорт.
Повний довідник — у розділі Верифікація.
Куди далі
- Верифікація в Holarch: тестові випадки, запуски з доказами, тестові цикли та RVTM в одній моделі.
- Документація з верифікації: атрибути планування, правила статусів, режим виконання, тестові цикли та довідник з RVTM.
- Документація з вимог: написання й затвердження вимог і сторінка «Зв’язки для перевірки».