Holarch

गाइड · सत्यापन

सिस्टम्स इंजीनियरिंग में सत्यापन बनाम वैधीकरण

यह गाइड सुनें 29 मिनट

सत्यापन दिखाता है कि सिस्टम अपनी आवश्यकताओं को पूरा करता है; वैधीकरण दिखाता है कि वह अपने इच्छित उपयोग में हितधारकों की ज़रूरतों को पूरा करता है। यह गाइड ISO/IEC/IEEE 15288 की परिभाषाएं, हर एक किससे तुलना करता है, जीवन चक्र में दोनों कहाँ होते हैं, चार सत्यापन विधियां, वैधीकरण गतिविधियां, मॉडल सत्यापन और वैधीकरण, दोनों के पीछे की ट्रेसेबिलिटी, और उन्हें धुंधला करने वाली ग़लतियां बताती है, एक 6U CubeSat पर हल करके।

इस पृष्ठ पर
  1. संक्षिप्त उत्तर
  2. ISO/IEC/IEEE 15288 में परिभाषाएं
  3. हर एक किससे तुलना करता है
  4. जीवन चक्र में हर एक कब होता है
    1. V
    2. क्रमिक और निरंतर V&V
  5. चार सत्यापन विधियां
  6. वैधीकरण गतिविधियां
    1. EO-1 के लिए वैधीकरण
  7. मॉडल सत्यापन और मॉडल वैधीकरण
  8. दोनों के पीछे की ट्रेसेबिलिटी
  9. व्यवहार में सत्यापन साक्ष्य: TC-06
  10. सत्यापन और वैधीकरण की तुलना
  11. आम भ्रम
  12. Holarch हर एक को कैसे दर्ज करता है
    1. Holarch में आज़माएं
  13. अक्सर पूछे जाने वाले प्रश्न
    1. पहले क्या आता है, सत्यापन या वैधीकरण?
    2. क्या एक गतिविधि दोनों कर सकती है?
    3. वैधीकरण कौन करता है?
    4. जब सत्यापन पास हो लेकिन वैधीकरण विफल हो, तब क्या होता है?
  14. आगे कहाँ जाएं

संक्षिप्त उत्तर

सत्यापन पूछता है: क्या हमने सिस्टम सही बनाया? यह सिस्टम की तुलना उसकी आवश्यकताओं से, कथन दर कथन, करता है और साक्ष्य देता है कि हर एक पूरी होती है। वैधीकरण पूछता है: क्या हमने सही सिस्टम बनाया? यह सिस्टम की तुलना इस बात से करता है कि उसके हितधारकों को क्या चाहिए और वे उसका उपयोग कैसे करेंगे, और साक्ष्य देता है कि सिस्टम वह काम करता है जिसके लिए उसे ख़रीदा गया था।

दोनों प्रश्न एक जैसे लगते हैं और अक्सर एक ही टीम उन्हीं उपकरणों से चलाती है, लेकिन वे अलग उत्तर दे सकते हैं। कोई सिस्टम हर आवश्यकता पास कर सकता है और फिर भी अपने उपयोगकर्ताओं के काम न आए, क्योंकि कोई आवश्यकता छूटी हुई, ग़लत या वास्तविक उपयोग से भिन्न उपयोग के लिए लिखी गई थी। कोई सिस्टम अपने उपयोगकर्ताओं की अच्छी सेवा भी कर सकता है जबकि वह ऐसी आवश्यकता में विफल हो जो अंत में महत्वपूर्ण न निकले। सिस्टम्स इंजीनियरिंग दोनों को अलग रखती है क्योंकि हर एक ऐसी ग़लतियां पकड़ता है जिन्हें दूसरा नहीं देख सकता।

"building the product right" बनाम "building the right product" (उत्पाद को सही बनाना बनाम सही उत्पाद बनाना) वाक्यांश का श्रेय आमतौर पर सॉफ़्टवेयर इंजीनियरिंग पर Barry Boehm के शुरुआती काम को दिया जाता है, और यह अंतर याद रखने का अब भी सबसे छोटा तरीका है।

ISO/IEC/IEEE 15288 में परिभाषाएं

सिस्टम जीवन चक्र प्रक्रियाओं का अंतरराष्ट्रीय मानक ISO/IEC/IEEE 15288 सत्यापन और वैधीकरण को दो अलग तकनीकी प्रक्रियाएं मानता है: सत्यापन प्रक्रिया (खंड 6.4.9) और वैधीकरण प्रक्रिया (खंड 6.4.11)। एकीकरण सत्यापन से पहले आता है, और ट्रांज़िशन दोनों के बीच: सिस्टम को बनाए गए रूप में सत्यापित किया जाता है, उसके संचालन वातावरण को सौंपा जाता है, और फिर वहाँ वैधीकृत किया जाता है।

  • सत्यापन वस्तुनिष्ठ साक्ष्य के माध्यम से इस बात की पुष्टि है कि निर्दिष्ट आवश्यकताएं पूरी हो गई हैं। मानक में इसका उद्देश्य यह दिखाना है कि सिस्टम या तत्व अपनी आवश्यकताओं और विशेषताओं को पूरा करता है, और रास्ते में मिली किसी भी विसंगति की रिपोर्ट करना है।
  • वैधीकरण वस्तुनिष्ठ साक्ष्य के माध्यम से इस बात की पुष्टि है कि किसी विशिष्ट इच्छित उपयोग या अनुप्रयोग की आवश्यकताएं पूरी हो गई हैं। इसका उद्देश्य यह दिखाना है कि सिस्टम, अपने इच्छित वातावरण में उपयोग किए जाने पर, हितधारकों की ज़रूरतें पूरी करता है और अपने व्यावसायिक या मिशन उद्देश्य प्राप्त करता है।

दोनों परिभाषाएं वस्तुनिष्ठ साक्ष्य पर टिकी हैं: एक मापा गया परिणाम, एक विश्लेषण रिपोर्ट, एक निरीक्षण रिकॉर्ड या एक देखा गया प्रदर्शन जिसे कोई और जांच सके। राय, “ठीक लग रहा था” और ऐसा टेस्ट जिसे किसी ने लिखा नहीं, साक्ष्य नहीं हैं। दोनों का अंतर उस संदर्भ में है जिससे हर एक तुलना करता है।

INCOSE Systems Engineering Handbook (5वां संस्करण, खंड 2.3.5.9 और 2.3.5.11) यही विभाजन अपनाती है, और NASA Systems Engineering Handbook (NASA/SP-2016-6105 Rev 2) उन्हें अलग उत्पाद साकारीकरण प्रक्रियाएं देती है: उत्पाद सत्यापन (खंड 5.3) और उत्पाद वैधीकरण (खंड 5.4)। NASA की हैंडबुक एक उपयोगी बात साफ़ कहती है: सत्यापन दिखाता है कि उत्पाद विनिर्देश के अनुसार बनाया गया; वैधीकरण दिखाता है कि विनिर्देश, और इसलिए उत्पाद, सही था।

हर एक किससे तुलना करता है

उन्हें अलग पहचानने का सबसे स्पष्ट तरीका यह पूछना है कि साक्ष्य की तुलना किससे की जाती है।

  • सत्यापन आवश्यकताओं से तुलना करता है। संदर्भ सिस्टम, सबसिस्टम और कंपोनेंट विनिर्देशों के "shall" कथन हैं। उन्हें इंजीनियरिंग टीम लिखती है, हितधारकों से सहमति लेती है, और ऐसे शब्दों में रखती है कि कोई टेस्ट, विश्लेषण, निरीक्षण या प्रदर्शन पास या फ़ेल दे सके। ISO/IEC/IEEE 29148 ठीक इसी कारण सत्यापन योग्य होने को उन विशेषताओं में गिनता है जो हर आवश्यकता में होनी चाहिए (खंड 5.2.5): जिस आवश्यकता का सत्यापन नहीं हो सकता, वह सत्यापन में भाग ही नहीं ले सकती।
  • वैधीकरण हितधारकों की ज़रूरतों और इच्छित उपयोग से तुलना करता है। संदर्भ वह है जिसकी उपयोगकर्ता, ऑपरेटर, ग्राहक और अन्य हितधारक अपने शब्दों में अपेक्षा करते हैं, साथ में वास्तविक उपयोग की स्थितियां: परिचालन परिदृश्य, वातावरण, सिस्टम चलाने वाले लोग और प्रभावशीलता के माप जो बताते हैं कि उनके लिए “अच्छा” का क्या अर्थ है। ज़रूरतें अक्सर गुणात्मक होती हैं, इसलिए वैधीकरण माप के साथ-साथ परिदृश्यों, सिमुलेशन, परीक्षणों और हितधारकों के निर्णय पर निर्भर करता है।

ट्रेसेबिलिटी गाइड में ज़रूरतों और आवश्यकताओं की तुलना इसे एक पंक्ति में कहती है: ज़रूरतों का वैधीकरण होता है, आवश्यकताओं का सत्यापन। इस गाइड में बाकी सब इसी से निकलता है।

जीवन चक्र में हर एक कब होता है

V

Vee मॉडल जीवन चक्र को V के रूप में बनाता है। बायां हिस्सा विघटन और परिभाषा से होकर नीचे जाता है: संचालन की अवधारणा, सिस्टम आवश्यकताएं, उच्च-स्तरीय डिज़ाइन, विस्तृत डिज़ाइन। कार्यान्वयन सबसे नीचे है। दायां हिस्सा एकीकरण और जांच से होकर ऊपर जाता है, और दाईं ओर का हर चरण अपने सामने वाले चरण के प्रति जवाबदेह होता है:

दायां हिस्साकिससे जांच करता है (बायां हिस्सा)प्रकार
यूनिट सत्यापनविस्तृत डिज़ाइनसत्यापन
सबसिस्टम सत्यापनउच्च-स्तरीय डिज़ाइनसत्यापन
सिस्टम सत्यापनसिस्टम आवश्यकताएंसत्यापन
सिस्टम वैधीकरणसंचालन की अवधारणा और हितधारकों की ज़रूरतेंवैधीकरण

सबसे ऊपर की जोड़ी ही अकेली वैधीकरण जोड़ी है, इसीलिए वैधीकरण को अक्सर अंतिम चरण के रूप में दिखाया जाता है। V यह दिखाता है कि अंतिम साक्ष्य कहाँ बनता है, यह नहीं कि काम कब शुरू होता है। हर सत्यापन और वैधीकरण गतिविधि की योजना बाईं ओर बनती है, उसी समय जब वह आइटम बनता है जिसकी वह जांच करती है: वैधीकरण का तरीका संचालन की अवधारणा के साथ, सत्यापन विधि हर आवश्यकता के साथ।

क्रमिक और निरंतर V&V

यह पूछने के लिए कि क्या सिस्टम सही है, एकीकृत सिस्टम की प्रतीक्षा करना यह जानने का सबसे महंगा तरीका है कि वह सही नहीं है। व्यवहार में दोनों गतिविधियां पूरे जीवन चक्र में फैली होती हैं:

  • प्रारंभिक वैधीकरण। अवधारणाएं, मॉक-अप, नमूना उत्पाद और सिमुलेशन हार्डवेयर बनने से बहुत पहले हितधारकों के सामने रखे जाते हैं। हर समीक्षा इस जोखिम को घटाती है कि आवश्यकताएं ग़लत ज़रूरत को दर्ज करें।
  • हर स्तर पर सत्यापन। कंपोनेंट एकीकरण से पहले सत्यापित होते हैं, सबसिस्टम सिस्टम से पहले। बेंच पर मिला दोष सिस्टम टेस्ट में मिले दोष से कहीं कम महंगा पड़ता है।
  • पुनरावृत्त विकास में निरंतर V&V। जो टीमें किस्तों में डिलीवर करती हैं, जैसे निरंतर एकीकरण के साथ काम करने वाली सॉफ़्टवेयर टीमें, हर बिल्ड पर स्वचालित सत्यापन चलाती हैं और हर किस्त का उपयोगकर्ताओं के साथ वैधीकरण करती हैं। दोनों प्रश्न वही रहते हैं; बस वे बहुत अधिक बार पूछे जाते हैं।

चार सत्यापन विधियां

अधिकांश मानक और हैंडबुक यही चार विधियां इस्तेमाल करते हैं। RVTM गाइड बताती है कि उनमें से कैसे चुनें; यहाँ हर एक को EO-1 CubeSat की एक पंक्ति के साथ दिखाया गया है, जो इस पूरी गाइड में इस्तेमाल होता है: एक काल्पनिक 6U अंतरिक्ष यान जो 500 km की कक्षा से चार स्पेक्ट्रल बैंड में खेतों की इमेजिंग करता है, और जिसके विनिर्देश में 32 आवश्यकताएं हैं।

निरीक्षण
आइटम या उसके रिकॉर्ड को चलाए बिना जांचना। EO-1 की 3.4 Bus Regulation (12 V, 2% के भीतर) का सत्यापन TC-18 Bus Regulation Inspection से होता है, जो पावर डिस्ट्रीब्यूशन यूनिट के डिज़ाइन और उसके क्वालिफ़िकेशन लोड-स्टेप डेटा की समीक्षा है। यह पास हुआ: सबसे ख़राब स्थिति 11.81 V थी, 11.76–12.24 V के भीतर।
विश्लेषण
गणना, मॉडलिंग या सिमुलेशन, अक्सर निचले स्तर के टेस्ट डेटा के आधार पर। 1.7 Mission Lifetime (कक्षा में 730 दिन) का टेस्ट ज़मीन पर नहीं हो सकता, इसलिए TC-16 Lifetime Reliability Analysis पुर्ज़ों की विफलता दरों, विकिरण खुराक और बैटरी क्षय को जोड़ता है। यह 730 दिन तक चलने की 0.86 संभाव्यता के साथ पास हुआ, जबकि कम से कम 0.8 चाहिए था।
प्रदर्शन
आइटम को चलाकर दिखाना कि वह कुछ करता है, देखा गया लेकिन सटीक रूप से मापा नहीं गया। 6.1 Contact Scheduling (संपर्क 48 घंटे पहले बुक) को TC-20 Operations Rehearsal से दिखाया जाना है: साझेदार ग्राउंड नेटवर्क के साथ 14 दिनों की संपर्क शेड्यूलिंग। यह अभी तक नहीं चला है।
Test
आइटम को नियंत्रित स्थितियों में चलाकर परिणाम को किसी मान से मापना। 3.2 Battery Capacity (जीवन की शुरुआत में कम से कम 77 Wh) का सत्यापन TC-07 Battery Capacity Test से होता है, 20 °C पर C/2 डिस्चार्ज। यह 78.3 Wh पर पास हुआ।

चारों सत्यापन हैं। प्रदर्शन कोई “नरम टेस्ट” नहीं है और विश्लेषण सिर्फ़ इसलिए वैधीकरण गतिविधि नहीं बन जाता कि वह मॉडल का उपयोग करता है: इनमें से किसी को भी सत्यापन यह बनाता है कि पास का मानदंड किसी आवश्यकता से आता है।

वैधीकरण गतिविधियां

वैधीकरण इन्हीं में से कई तकनीकों का उपयोग करता है, पर एक अलग संदर्भ की ओर। सामान्य रूप ये हैं:

  • परिचालन परिदृश्य। सिस्टम, या उसके मॉडल, को संचालन की अवधारणा से गुज़ारना: एक सामान्य दिन, एक घटी हुई क्षमता वाला मोड, ऑपरेटरों के बीच हस्तांतरण। प्रश्न यह है कि क्या परिदृश्य वह हासिल करता है जो हितधारक चाहता था, न कि यह कि हर चरण अपनी संख्या पूरी करता है या नहीं।
  • मिशन सिमुलेशन। परिचालन अवधारणा को यथार्थवादी वातावरण और भिन्नता वाले सिमुलेशन में चलाना, फिर परिणामों को प्रभावशीलता के मापों (MOE) से पढ़ना, जो हितधारक की ओर से यह मापते हैं कि मिशन अपना काम कितनी अच्छी तरह करता है।
  • हितधारक समीक्षाएं। उपयोगकर्ताओं को अवधारणाएं, प्रोटोटाइप, नमूना उत्पाद या इंटरफ़ेस दिखाना और उनका निर्णय दर्ज करना। जल्दी, सस्ता, और अक्सर पहली बार जब कोई छूटी हुई ज़रूरत सामने आती है।
  • परिचालन परीक्षण और पायलट। वास्तविक उपयोगकर्ता, वास्तविक प्रक्रियाएं, एक प्रतिनिधि वातावरण। अक्सर यही निर्णायक वैधीकरण साक्ष्य होता है, और कई कार्यक्रमों में किसी स्वतंत्र संगठन द्वारा औपचारिक परिचालन टेस्ट और मूल्यांकन।

EO-1 के लिए वैधीकरण

EO-1 मॉडल में तीन हितधारक ज़रूरतें हैं, हर एक उन आवश्यकताओं से ट्रेस की गई जो उसे औपचारिक रूप देती हैं, और एक तीसरा टेस्ट सुइट, TS-3 Mission Validation, जिसमें हर ज़रूरत के लिए एक वैधीकरण इवेंट है। दोनों EO-1 संदर्भ मॉडल (v1.0) का और Holarch 2.2.1 या बाद के संस्करण में बनाए गए डेमो प्रोजेक्ट का हिस्सा हैं।

ज़रूरतआवश्यकताएं (सत्यापित)वैधीकरण इवेंटस्थिति
N1 Same-Day Crop Stress Alerts6.2 Image Delivery (डाउनलिंक के 6 घंटे के भीतर), 6.5 Planning Cycle Time (100 मिनट के भीतर)VAL-01 Customer Alert Pilot: तीन पायलट खेतों के ऊपर दर्ज पास को प्लानिंग, प्रोसेसिंग और ग्राहक पोर्टल से गुज़ारा गया, और खेतों के कृषि विशेषज्ञों ने अपनी दैनिक दिनचर्या में अलर्ट का उपयोग कियानहीं चलाया गया
N2 Twice-Weekly Revisit1.6 Revisit Time (72 घंटे के भीतर), 1.6.1 Ground Track Repeat और 1.6.2 Off-Nadir Imaging के ज़रिएVAL-02 Growing Season Revisit Simulation: नियोजित ग्राउंड ट्रैक, ऑफ़-नादिर सीमा और ऐतिहासिक बादल आवरण के साथ ग्राहक लक्ष्य सूची के ऊपर एक मौसम की इमेजिंगनहीं चलाया गया
N3 Field-Level Vegetation Maps1.2 Ground Sample Distance (4.5 m), 1.4 Spectral Bands (चार बैंड, 450–900 nm)VAL-03 Agronomist Map Review: कृषि विशेषज्ञ उन वनस्पति मानचित्रों की समीक्षा करते हैं जो चार EO-1 बैंड में 4.5 m पर रीसैंपल की गई हवाई इमेजरी से बने हैंपास: सभी 12 नमूना मानचित्र स्वीकार किए गए

हर पंक्ति दिखाती है कि वैधीकरण सत्यापन की पुनरावृत्ति क्यों नहीं है। 1.6 72 घंटे के भीतर पुनः दौरा मांगती है, जो कक्षा और पॉइंटिंग सीमाओं का गुण है, और TC-13 Ground Track Repeat Analysis पहले ही 3 दिन और 0.4 घंटे की पुनरावृत्ति दिखा चुका है। लेकिन किसानों को सप्ताह में दो बार उपयोगी इमेजरी चाहिए, और 1.6 में बादलों का ज़िक्र नहीं है। केवल बादल आंकड़ों वाला सिमुलेशन (VAL-02) बता सकता है कि लिखे अनुसार पूरी हुई आवश्यकता ज़रूरत पूरी करती है या नहीं। अगर नहीं करती, तो समाधान एक नई या बदली हुई आवश्यकता है, बेहतर टेस्ट नहीं।

N1 भी ऐसा ही है। 6.2 और 6.5 डिलीवरी शृंखला पर संख्याएं रखती हैं, और 6.5 का Monte Carlo विश्लेषण (देखें Monte Carlo गाइड) 100 मिनट पूरा करने की संभाव्यता लगभग 97.6% बताता है। क्या कोई कृषि विशेषज्ञ वास्तव में ओवरपास के दिन ही फ़सल के तनाव के बारे में, ऐसे रूप में जिस पर वह कार्रवाई कर सके, जान पाता है, यह एक अलग प्रश्न है, और VAL-01 इसे वास्तविक उपयोगकर्ताओं के साथ पूछता है।

VAL-03 सबसे पहले चला, किसी भी उड़ान हार्डवेयर से पहले, क्योंकि इसके लिए केवल नमूना इमेजरी और लोग चाहिए। यही प्रारंभिक वैधीकरण है: इसने कैमरा डिज़ाइन फ़्रीज़ होने से पहले पुष्टि की कि चार बैंड में 4.5 m खेत-स्तर के मानचित्रों के लिए पर्याप्त विस्तृत है। दो समीक्षकों ने खेत की सीमाओं के ओवरले मांगे, जो परिणाम के साथ दर्ज एक संभावित नई ज़रूरत है।

मॉडल सत्यापन और मॉडल वैधीकरण

मॉडल-आधारित सिस्टम्स इंजीनियरिंग में मॉडल स्वयं एक इंजीनियरिंग उत्पाद है, और यही दोनों प्रश्न उस पर भी लागू होते हैं। रक्षा और एयरोस्पेस व्यवहार ने दशकों से इन्हें मॉडल और सिमुलेशन के लिए परिभाषित किया है (सत्यापन, वैधीकरण और प्रत्यायन पर DoD Instruction 5000.61; मॉडल और सिमुलेशन की विश्वसनीयता पर NASA-STD-7009):

  • मॉडल सत्यापन: क्या मॉडल सही ढंग से बना है? क्या कार्यान्वयन उसके अपने विनिर्देश और मॉडलिंग नियमों से मेल खाता है: सिमुलेट किए गए प्रवाह में कोई अवधि छूटी न हो, कोई फ़ंक्शन ऐसा न हो जिसे कोई न करता हो, कोई आवश्यकता बिना सत्यापन इवेंट के न हो, समीकरण आयामी रूप से सुसंगत हों, कोड वही गणना करे जो उसके लेखक का इरादा था।
  • मॉडल वैधीकरण: क्या यह अपने उद्देश्य के लिए सही मॉडल है? क्या यह वास्तविक सिस्टम को उन निर्णयों के लिए पर्याप्त निकटता से दर्शाता है जिनका यह समर्थन करेगा? इसका उत्तर मॉडल की वास्तविकता से तुलना करके मिलता है: टेस्ट डेटा, उड़ान डेटा, कोई भरोसेमंद उच्च-निष्ठा मॉडल।
  • प्रत्यायन (accreditation), DoD के उपयोग में, यह औपचारिक निर्णय है कि कोई मॉडल किसी विशिष्ट उपयोग के लिए स्वीकार्य है, उसके सत्यापन और वैधीकरण साक्ष्य के आधार पर।

EO-1 में एक स्पष्ट उदाहरण है। इसका पावर बजट मापी गई अधिकतम ऐरे पावर को समीकरण EQ-1.3 से कक्षा-औसत पावर में बदलता है: कक्षा औसत = अधिकतम × 0.62 (धूप वाला अंश) × 0.6 (पावर पथ दक्षता)। उस समीकरण का सत्यापन करने का अर्थ है अंकगणित, इकाइयों और उसके लिंक की जांच। उसका वैधीकरण करने का अर्थ है यह पूछना कि क्या 0.62 और 0.6 वास्तविक कक्षा और वास्तविक पावर शृंखला से मेल खाते हैं, उदाहरण के लिए अनुमान की तुलना एक सिमुलेट की गई कक्षा के दौरान flatsat पर मापी गई कक्षा-औसत पावर से करके। नीचे आवश्यकता 3.1 पर निर्णय पूरी तरह उसी समीकरण पर निर्भर है, इसलिए बिना वैधीकरण वाला EQ-1.3 एक त्रुटिहीन टेस्ट को भी अनिर्णायक बना देगा।

मोटा नियम: जब किसी विश्लेषण या सिमुलेशन को सत्यापन साक्ष्य के रूप में उपयोग किया जाता है, तो उसके मॉडल को अपना वैधीकरण साक्ष्य चाहिए, इस अनुपात में कि निर्णय उस पर कितना टिका है।

दोनों के पीछे की ट्रेसेबिलिटी

सत्यापन और वैधीकरण दोनों को लिंक की अपनी शृंखला चाहिए:

  • ज़रूरतें → वैधीकरण। हर हितधारक ज़रूरत उस वैधीकरण गतिविधि से लिंक होती है जो दिखाएगी कि वह इच्छित उपयोग में पूरी होती है, और उन आवश्यकताओं से जो उसे औपचारिक रूप देती हैं।
  • आवश्यकताएं → सत्यापन। हर आवश्यकता उस टेस्ट, विश्लेषण, निरीक्षण या प्रदर्शन से लिंक होती है जो उसका सत्यापन करता है, एक विधि, एक स्तर और सफलता मानदंडों के साथ। आवश्यकता सत्यापन मैट्रिक्स इसी शृंखला की रिपोर्ट है।

साथ मिलकर वे उन दो कवरेज प्रश्नों का उत्तर देते हैं जो समीक्षा बोर्ड पूछता है: क्या हर आवश्यकता सत्यापित है, और क्या हर ज़रूरत वैधीकृत है? ज़रूरतों और आवश्यकताओं के बीच के लिंक दोनों शृंखलाओं को जोड़ते हैं, इसलिए एक ओर की कमी को दूसरी ओर तक ट्रेस किया जा सकता है: जिस ज़रूरत की सभी आवश्यकताएं पास होती हैं लेकिन वैधीकरण विफल होता है, वह किसी छूटी हुई या ग़लत आवश्यकता की ओर इशारा करती है।

मैट्रिक्स में दोनों शृंखलाएं साथ-साथ हैं: आवश्यकताओं का सत्यापन TC टेस्ट केस से होता है, ज़रूरतों का वैधीकरण VAL इवेंट से। मैट्रिक्स एक सत्यापन कमी भी दिखाता है: 6.5 Planning Cycle Time की एक विधि (विश्लेषण) है, लेकिन मॉडल में अभी कोई सत्यापन इवेंट नहीं है। Monte Carlo गाइड वह विश्लेषण चलाती है; उसके परिणाम को टेस्ट केस के रूप में दर्ज करने से वह पंक्ति बंद हो जाएगी।

व्यवहार में सत्यापन साक्ष्य: TC-06

EO-1 का TC-06 Solar Array Power Test दिखाता है कि सत्यापन साक्ष्य को क्या अच्छा बनाता है, और वह कैसे गिनती से बाहर हो जाता है। रिकॉर्ड पूरा है: M. Chen ने इसे ऐरे क्वालिफ़िकेशन पैनल QM-1 और QM-2 पर हार्नेस संशोधन C के साथ, AM0 (1361 W/m², एकरूपता 1.4%) पर बड़े क्षेत्र वाले सोलर सिम्युलेटर के नीचे चलाया, और I-V वक्र को tc06-array-iv-curve.csv के रूप में संलग्न किया। अधिकतम पावर 75.1 W रही, जबकि अपेक्षित परिणाम कम से कम 72 W था। पास।

फिर प्रारंभिक डिज़ाइन समीक्षा के बाद आवश्यकता 3.1 Orbit Average Power को 28 W से बढ़ाकर 30 W किया गया। टेस्ट परिणाम नहीं बदला, लेकिन वह जो साबित करता है, वह बदल गया। EQ-1.3 के ज़रिए 75.1 W अधिकतम 27.9 W कक्षा औसत है (75.1 × 0.62 × 0.6), जो 30 W से कम है; 30 W दिखाने के लिए लगभग 80.6 W अधिकतम चाहिए। इसलिए 3.1 से TC-06 तक का लिंक संदिग्ध चिह्नित होता है और तब तक संदिग्ध रहता है जब तक TC-06 का अपेक्षित परिणाम नई आवश्यकता से फिर से न निकाला जाए और टेस्ट दोबारा न चले या डिज़ाइन न बदले। RVTM गाइड समीक्षा को चरण दर चरण दिखाती है, और परिवर्तन प्रभाव विश्लेषण गाइड उसी परिवर्तन का डिज़ाइन में पीछा करती है।

इससे सत्यापन साक्ष्य के लिए तीन सबक निकलते हैं:

  1. साक्ष्य एक कॉन्फ़िगरेशन और एक आवश्यकता संस्करण से बंधा होता है। 28 W के सापेक्ष दर्ज पास 30 W का साक्ष्य नहीं है।
  2. पास का मानदंड आवश्यकता से आना चाहिए। TC-06 की 72 W सीमा केवल 26.8 W कक्षा औसत के बराबर है, इसलिए उसने पुराना 28 W भी नहीं दिखाया। कोई टेस्ट अपना मानदंड पास कर सकता है और फिर भी अपनी आवश्यकता का सत्यापन करने में विफल रह सकता है।
  3. प्रक्रिया में शामिल विश्लेषण को वैधीकरण चाहिए। निर्णय EQ-1.3 के दो गुणकों पर निर्भर करता है, जो पिछले खंड का मॉडल वैधीकरण प्रश्न है।

और इनमें से कुछ भी वैधीकरण नहीं है। एक साफ़ 30 W परिणाम भी केवल यह दिखाएगा कि ऐरे 3.1 को पूरा करते हैं। क्या 30 W खेत ग्राहकों के लिए रोज़ 120 दृश्यों की इमेजिंग के लिए पर्याप्त पावर है, यह उस तरह का प्रश्न है जिसका उत्तर मिशन-स्तर के वैधीकरण इवेंट देते हैं।

सत्यापन और वैधीकरण की तुलना

सत्यापनवैधीकरण
प्रश्नक्या हमने सिस्टम सही बनाया?क्या हमने सही सिस्टम बनाया?
किससे तुलनाआवश्यकताएं और डिज़ाइन विनिर्देशहितधारकों की ज़रूरतें, इच्छित उपयोग, प्रभावशीलता के माप
ISO/IEC/IEEE 15288सत्यापन प्रक्रिया (6.4.9)वैधीकरण प्रक्रिया (6.4.11)
सामान्य विधियांनिरीक्षण, विश्लेषण, प्रदर्शन, टेस्टपरिचालन परिदृश्य, मिशन सिमुलेशन, हितधारक समीक्षाएं, परिचालन परीक्षण, फ़ील्ड डेटा
स्तरकंपोनेंट, सबसिस्टम, सिस्टममुख्य रूप से अपने परिचालन वातावरण में सिस्टम; अवधारणाओं और प्रोटोटाइप पर प्रारंभिक वैधीकरण
वातावरणनियंत्रित: लैब, बेंच, सिम्युलेटरवास्तविक उपयोग का प्रतिनिधि, जहाँ संभव हो वास्तविक उपयोगकर्ताओं के साथ
कौन निर्णय करता हैइंजीनियरिंग टीम लिखित मानदंडों के आधार पर; स्वीकृति के समय ग्राहकहितधारक और उपयोगकर्ता, अक्सर किसी स्वतंत्र मूल्यांकनकर्ता के साथ
परिणामहर आवश्यकता के लिए पास या फ़ेलज़रूरत पूरी, आंशिक रूप से पूरी या पूरी नहीं, अक्सर नई या बदली हुई ज़रूरतों के साथ
ट्रेसेबिलिटीआवश्यकता → सत्यापन इवेंटज़रूरत → वैधीकरण इवेंट
सामान्य रिकॉर्डआवश्यकता सत्यापन मैट्रिक्स, टेस्ट रिपोर्टवैधीकरण योजना और रिपोर्ट, परिचालन मूल्यांकन रिपोर्ट
विफलता का अर्थसिस्टम किसी आवश्यकता को पूरा नहीं करता: डिज़ाइन या निर्माण ठीक करेंआवश्यकताओं ने ज़रूरत को नहीं पकड़ा: आवश्यकताएं ठीक करें, फिर डिज़ाइन
EO-1 उदाहरणTC-07: बैटरी 78.3 Wh, 77 Wh के सापेक्षVAL-03: कृषि विशेषज्ञ 4.5 m चार-बैंड मानचित्र स्वीकार करते हैं

आम भ्रम

  • “वैधीकरण अंतिम टेस्ट है।” अंत के पास होने वाले सिस्टम-स्तर के टेस्ट आमतौर पर अब भी सत्यापन होते हैं। वैधीकरण अपने संदर्भ (ज़रूरतें और इच्छित उपयोग) से परिभाषित होता है, अपने समय से नहीं, और इसे अंत से बहुत पहले शुरू होना चाहिए।
  • “सभी आवश्यकताएं पास हुईं, इसलिए सिस्टम वैधीकृत है।” आवश्यकताओं का पास होना दिखाता है कि आवश्यकताएं पूरी हुईं। यह इस बारे में कुछ नहीं कहता कि वे सही आवश्यकताएं थीं या नहीं। EO-1 1.6 को ठीक-ठीक पूरा कर सकता है और फिर भी वास्तविक बादल आवरण में N2 से चूक सकता है।
  • आवश्यकता का वैधीकरण बनाम सिस्टम का सत्यापन। ये शब्द स्वयं आवश्यकताओं पर भी लागू होते हैं। INCOSE Guide to Needs and Requirements आवश्यकता सत्यापन (क्या कथन सही ढंग से बना है: आवश्यक, असंदिग्ध, सत्यापन योग्य?) और आवश्यकता वैधीकरण (क्या यह उस ज़रूरत को व्यक्त करता है जिससे यह आया?) को सिस्टम सत्यापन और सिस्टम वैधीकरण से अलग करती है। स्पष्ट कहें कि आपका आशय किससे है। आवश्यकता लेखन गाइड कथनों को सत्यापन योग्य बनाने के बारे में बताती है।
  • “प्रदर्शन वैधीकरण है।” किसी आवश्यकता का प्रदर्शन सत्यापन है। उपयोगकर्ताओं के साथ किसी परिचालन परिदृश्य का प्रदर्शन, जिसे उनकी ज़रूरतों के आधार पर परखा जाए, वैधीकरण है। विधि यह तय नहीं करती; संदर्भ करता है।
  • “सिमुलेशन एक वैधीकरण है।” सिमुलेशन एक तकनीक है। 6.5 के प्लानिंग चक्र को 100 मिनट के सापेक्ष सिमुलेट करना 6.5 का सत्यापन करता है। एक बढ़ते मौसम को “सप्ताह में दो बार उपयोगी इमेजरी” के सापेक्ष सिमुलेट करना N2 का वैधीकरण करता है। और सिमुलेशन मॉडल को स्वयं अपना वैधीकरण चाहिए।
  • IV&V का अर्थ “अधिक V&V” है। स्वतंत्र सत्यापन और वैधीकरण वह V&V है जो प्रबंधन, बजट और तकनीकी निर्णय में डेवलपर से अलग किसी संगठन द्वारा किया जाता है। यह इस बारे में है कि इसे कौन करता है, कोई तीसरी गतिविधि नहीं।
  • लिंक को परिणाम गिनना। वैधीकरण इवेंट से लिंक की गई ज़रूरत वैधीकरण के लिए नियोजित है, वैधीकृत नहीं। कवरेज की गिनती बताती है कि क्या नियोजित है; केवल परिणाम बताते हैं कि क्या दिखाया गया है।

Holarch हर एक को कैसे दर्ज करता है

LML प्रोजेक्ट में सत्यापन और वैधीकरण उसी मॉडल में रखे जाते हैं जिसमें ज़रूरतें और आवश्यकताएं हैं, उसी तरह के आइटम और लिंक के साथ:

  • ज़रूरतें Statement हैं (Requirement नहीं), जो उन्हें औपचारिक रूप देने वाली आवश्यकताओं से traced to द्वारा लिंक होती हैं।
  • सत्यापन योजना हर Requirement पर रहती है: सत्यापन विधि (Analysis, Demonstration, Inspection, Test, किसी भी संयोजन में), स्तर और सफलता मानदंड।
  • सत्यापन इवेंट टेस्ट सुइट में Test Case हैं, जो आवश्यकताओं से verifies द्वारा लिंक होते हैं। विश्लेषण, निरीक्षण और प्रदर्शन भी टेस्ट केस हैं। हर रन टेस्टर, कॉन्फ़िगरेशन, टेस्ट आर्टिकल और साक्ष्य फ़ाइल दर्ज करता है; विफल टेस्ट Issue बन जाते हैं, और टेस्ट चक्र हर अभियान को सहेजते हैं।
  • वैधीकरण इवेंट भी Test Case हो सकते हैं, अपने अलग सुइट में (जैसे ऊपर TS-3), जो ज़रूरत से verifies द्वारा लिंक होते हैं। मानक LML स्कीमा verifies की अनुमति केवल आवश्यकताओं की ओर देता है, इसलिए EO-1 मॉडल का स्कीमा एक लक्ष्य जोड़ता है, Test Case verifies Statement; अपने प्रोजेक्ट में इसे ट्रेसेबिलिटी मैट्रिक्स में लिंक करने से पहले स्कीमा में जोड़ें (Test Case खोलें, + संबंध)। RVTM और सत्यापन कवरेज केवल आवश्यकताएं गिनते हैं, इसलिए वैधीकरण इवेंट “32 में से 11 आवश्यकताएं सत्यापित” आंकड़े को नहीं बदलते; मैट्रिक्स उन्हें आवश्यकताओं के बगल में दिखाता है।
  • प्रभावशीलता के माप MOE लेबल वाले Measure हैं, जिनके थ्रेशोल्ड और उद्देश्य मान होते हैं। सिम्युलेटर में एक Monte Carlo स्टडी किसी आउटपुट को किसी आवश्यकता या Measure से जांच सकती है और परिणाम को Test Case के रूप में दर्ज कर सकती है, और इसी तरह कोई विश्लेषण सत्यापन साक्ष्य बनता है।
  • परिवर्तन लिंक को संदिग्ध चिह्नित करते हैं, जिसमें सत्यापन करने वाले टेस्ट केस का लिंक भी शामिल है, जैसा TC-06 के साथ हुआ।
  • मॉडल सत्यापन वही है जो सत्यापन → मॉडल जांच करता है: पूरे मॉडल पर नियम, जैसे बिना सत्यापन टेस्ट केस वाली लीफ़ आवश्यकताएं और बिना Issue वाले विफल टेस्ट। Action आरेखों की सिमुलेशन चलने से पहले अपनी जांचें होती हैं। Holarch में मॉडल वैधीकरण का अलग रिकॉर्ड नहीं है; टेस्ट या उड़ान डेटा से तुलना को उस विश्लेषण टेस्ट केस के साक्ष्य के रूप में रखें जो मॉडल पर निर्भर है।

SE प्रक्रिया गाइड V के दोनों पक्ष दिखाती है। Vee मॉडल प्रक्रिया के साथ, सत्यापन लिंक कार्ड दाईं ओर के हर चरण को बाईं ओर के उस चरण के साथ जोड़ता है जिसकी वह जांच करता है: सिस्टम वैधीकरण को संचालन की अवधारणा के साथ (“needs validated”), सिस्टम सत्यापन को सिस्टम आवश्यकताओं के साथ (“requirements verified”), और नीचे सबसिस्टम और यूनिट स्तर।

ऊपर बताए भ्रम को ध्यान में रखते हुए कार्ड को कवरेज के रूप में पढ़ें। कोई ज़रूरत वैधीकृत तब गिनी जाती है जब कोई टेस्ट केस उससे verifies द्वारा लिंक हो, या जब उससे ट्रेस की गई कोई आवश्यकता पास हो चुकी हो, इसलिए N1 और N2 गिनी जाती हैं, हालांकि VAL-01 और VAL-02 नहीं चले हैं। कार्ड हर ट्रेस किए गए Statement को, जो आवश्यकता नहीं है, ज़रूरत के रूप में गिनता है; डेमो में यह N1–N3 में एक धारणा (1.1 Reference Orbit) और तीन परिचालन नियम (OR-1 से OR-3) जोड़ता है, इसीलिए यह 7 दिखाता है। वैधीकरण के परिणाम स्वयं टेस्ट सेंटर में हैं।

दस्तावेज़ योजनाओं को रख सकते हैं: दस्तावेज़ टेम्पलेट में Concept of Operations, Verification and Validation Plan, Test Plan, Test Report और IV&V Plan शामिल हैं, लाइव VCRM और RVTM ब्लॉक के साथ जो मॉडल से अपडेट होते हैं।

Holarch में आज़माएं

  1. EO-1 प्रोजेक्ट बनाएं: प्रोजेक्ट प्रबंधित करें → प्रोजेक्ट फ़ाइलें ▾ → नया डेमो प्रोजेक्ट → CubeSat (गाइडेड सिस्टम्स इंजीनियरिंग), या EO-1 संदर्भ मॉडल आयात करें।
  2. ⌘K / Ctrl+K दबाएं, crop stress टाइप करें और N1 Same-Day Crop Stress Alerts खोलें: इसके संबंध वे आवश्यकताएं दिखाते हैं जिनसे यह traced to है और वह VAL इवेंट जो इसे सत्यापित करता है। अपनी कोई ज़रूरत Statement के रूप में जोड़ें, उदाहरण के लिए किसी आवश्यकता दस्तावेज़ में आइटम जोड़ें ▸ से।
  3. सत्यापन → टेस्ट सेंटर में TS-3 Mission Validation खोलें। अपने सुइट के लिए + नया ▾ → टेस्ट सुइट… पर क्लिक करें, फिर हर वैधीकरण इवेंट के लिए + Test Case, उसके सेट-अप और अपेक्षित परिणाम के साथ हितधारकों के शब्दों में।
  4. सत्यापन → ट्रेसेबिलिटी मैट्रिक्स खोलें, पंक्तियों में ज़रूरतें और कॉलम में वैधीकरण टेस्ट केस रखें, और verified by चुनें: हर ज़रूरत का अपना VAL इवेंट है। लिंक जोड़ने के लिए किसी ख़ाली सेल पर क्लिक करें।
  5. आवश्यकता सत्यापन देखने के लिए सत्यापन → RVTM खोलें, और V के दोनों पक्ष देखने के लिए Vee मॉडल के साथ प्लान → SE प्रक्रिया।

पूरे संदर्भ सत्यापन, ट्रेसेबिलिटी, SE प्रक्रिया और मॉडल जांच हैं।

अक्सर पूछे जाने वाले प्रश्न

पहले क्या आता है, सत्यापन या वैधीकरण?

औपचारिक सिस्टम वैधीकरण आमतौर पर सिस्टम सत्यापन के बाद आता है, क्योंकि इसके लिए ऐसा सिस्टम चाहिए जो अपने इच्छित वातावरण में निर्दिष्ट अनुसार काम करे। लेकिन वैधीकरण गतिविधियां पहले शुरू होती हैं: अवधारणा और आवश्यकताओं की हितधारक समीक्षाएं किसी भी सत्यापन के संभव होने से पहले होती हैं। दोनों की योजना शुरुआत में बनाएं।

क्या एक गतिविधि दोनों कर सकती है?

हां, अगर उसकी योजना इसी तरह बनाई जाए और उसे दोनों संदर्भों के आधार पर परखा जाए। एक एंड-टू-एंड ऑपरेशंस रिहर्सल 6.1 Contact Scheduling का उसके 48 घंटे के मानदंड के सापेक्ष सत्यापन कर सकता है और, वास्तविक ऑपरेटरों और ग्राहकों की भागीदारी के साथ, N1 के लिए वैधीकरण साक्ष्य जुटा सकता है। दोनों निर्णय अलग-अलग दर्ज करें, क्योंकि वे भिन्न हो सकते हैं।

वैधीकरण कौन करता है?

आमतौर पर डेवलपर इसकी योजना बनाता है और इसमें सहायता करता है, लेकिन निर्णय हितधारकों का होता है: उपयोगकर्ता, ऑपरेटर, ग्राहक, कभी-कभी कोई स्वतंत्र टेस्ट संगठन। हितधारकों के बिना वैधीकरण उनकी ज़रूरतों के बारे में एक अनुमान भर है।

जब सत्यापन पास हो लेकिन वैधीकरण विफल हो, तब क्या होता है?

आवश्यकताओं ने ज़रूरत को नहीं पकड़ा। विफल ज़रूरत को उसकी आवश्यकताओं तक ट्रेस करें, छूटी हुई या ग़लत आवश्यकता खोजें, उसे परिवर्तन नियंत्रण से बदलें, और संदिग्ध लिंक का डिज़ाइन और सत्यापन तक पीछा करें। यह सिस्टम्स इंजीनियरिंग की सबसे महंगी विफलता है, इसीलिए प्रारंभिक वैधीकरण का लाभ मिलता है।

आगे कहाँ जाएं