Holarch

מדריך · אימות

מטריצת אימות דרישות (RVTM): עמודות, שיטות ודוגמה מעשית

האזנה למדריך 29 דק׳

מטריצת אימות דרישות, או RVTM, מפרטת כל דרישה עם האופן שבו היא תאומת, האירוע שמאמת אותה, התוצאה והראיה. המדריך הזה עוסק בעמודות, בבחירה בין בחינה, ניתוח, הדגמה או בדיקה, בתכנון מול תוצאות, באופן שבו תוצאות שנכשלו או השתנו מופיעות, ובסקירת כיסוי לפני אבן דרך, על ה-RVTM של CubeSat לתצפית על כדור הארץ בגודל 6U.

בדף זה
  1. מהי מטריצת אימות דרישות
  2. מי משתמש בה, ומתי
  3. העמודות
  4. בחירת שיטת אימות
  5. תכנון מול תוצאות
  6. ערכי מצב וסיכום
  7. לשמור אותה כנוצרת מהמודל
  8. איך תוצאות שנכשלו או השתנו מופיעות
    1. תוצאה שנכשלה
    2. דרישה שהשתנתה
  9. סקירת כיסוי לפני אבן דרך
  10. דוגמה מלאה: ה-RVTM של ה-CubeSat ‏EO-1
    1. התוכנית
    2. התוצאות ומערכי הבדיקות
    3. קריאת המטריצה
    4. דרישה שהשתנתה: 3.1 אחרי PDR
    5. תכנון השורות שנותרו לפני הסקירה
  11. מטריצה אחת לכל מוצר בקו מוצרים
  12. טעויות נפוצות
  13. לנסות ב-Holarch
  14. לאן ממשיכים

מהי מטריצת אימות דרישות

אימות שואל אם המערכת נבנתה נכון: האם היא עומדת בכל דרישה כפי שנוסחה? מטריצת אימות הדרישות היא המקום שבו עונים על השאלה הזאת דרישה אחר דרישה. כל שורה היא דרישה אחת. העמודות אומרות איך היא תאומת, באיזו רמת הרכבה, באיזה אירוע, ומה יצא מהאירוע הזה. על ההבדל בין אימות לתיקוף, שבודק את המערכת מול צורכי בעלי העניין, ראו אימות מול תיקוף.

לאותה טבלה יש כמה שמות. RVTM ‏(requirements verification traceability matrix) מדגיש את הקישור מדרישה לבדיקה. VCRM ‏(verification cross-reference matrix) נפוץ בתוכניות ביטחוניות ואווירונאוטיות ולעיתים קרובות מתכוון לחצי התכנוני: דרישה, שיטה ורמה. מטריצת אימות או מטריצת תאימות עשויות להוסיף הצהרת תאימות לכל שורה עבור לקוח. התוכן שונה מעט מארגון לארגון, אבל הרעיון זהה: שורה אחת לכל דרישה, ושום דבר לא נשאר בלי דרך מתוכננת להראות שעומדים בו.

ISO/IEC/IEEE 15288 מתאר את האימות כתהליך שמתכנן את פעולות האימות, מכין את מה שהן צריכות, מבצע אותן ומתעד את התוצאות, והוא מצפה שכל דרישה תכוסה בפעולה אחת לפחות. המטריצה היא התיעוד המקובל של הכיסוי הזה. ה-INCOSE Systems Engineering Handbook מתייחס אליה באותה דרך: כלי עבודה במהלך הפיתוח ותוצר מסירה בסקירות. המטריצה היא קצה האימות של עקיבות הדרישות: במקום שבו העקיבות שואלת מאיפה הגיעה דרישה ומה ממלא אותה, ה-RVTM שואל מה מוכיח אותה.

הדוגמה המלאה לאורך כל המדריך היא EO-1, ‏CubeSat בדיוני בגודל 6U שמצלם שטחים חקלאיים בארבע רצועות ספקטרליות ממסלול בגובה 500 km. במפרט שלו יש 32 דרישות ו-19 אירועי אימות בשתי חבילות בדיקה; חבילה שלישית מחזיקה את אירועי התיקוף של צורכי בעלי העניין שלו. זה אותו פרויקט שהסיור בפרויקט הדוגמה ל-MBSE עוקב אחריו מצורכי בעלי העניין ועד המסמכים, כך שאת השורות כאן אפשר לעקוב חזרה אל הפונקציות, הרכיבים והניתוחים שעונים עליהן.

מי משתמש בה, ומתי

  • סקירות דרישות (למשל סקירת דרישות מערכת). הסוקרים בודקים שלכל דרישה יש שיטה ורמה. דרישה שאיש אינו יכול לומר איך לאמת אותה היא בדרך כלל עמומה או לא מדידה, והסקירה היא הזמן הזול ביותר לנסח אותה מחדש.
  • סקירות תכן. המטריצה מציינת עכשיו מקרי בדיקה, ניתוחים ובחינות. הסוקרים מחפשים דרישות שעדיין אין להן אירוע, ובדיקות שצריכות מתקנים או פריטי בדיקה שאיש לא תכנן.
  • סקירות מוכנות לבדיקה. לפני שמערך מתחיל, המטריצה מראה אילו דרישות המערך יסגור ואילו נהלים מוכנים.
  • הסמכה. ההסמכה מראה שהתכן עומד בדרישות שלו, לעיתים קרובות עם מרווח, על פריט בדיקה שנבנה לשם כך. המטריצה מפרטת כל תוצאת הסמכה ואת הדוח שלה.
  • קבלה. הקבלה מראה שכל יחידה שנמסרה נבנתה ועובדת כפי שתוכננה. הלקוח נותן אישור סופי מול המטריצה, שורה אחר שורה, עם ראיות מצורפות או מוזכרות.
  • ביקורות והסמכה רגולטורית. מבקר בוחר שורות ועוקב אחריהן עד הראיות. מטריצה שעמודת הראיות שלה מצביעה על קבצים אמיתיים עם גרסאות שורדת את זה; מטריצה שכתוב בה “ראו דוח בדיקה” בלי גרסה אינה שורדת.

העמודות

למטריצה מעשית יש העמודות האלה. יש ארגונים שמפצלים אותן או משנים את שמן; מעטים משמיטים אחת מהן.

עמודהמכילהמתמלאת
דרישהמזהה ושם קצר; ההצהרה המלאה נמצאת במרחק לחיצה, לא מודבקתכשהדרישה נכתבת
שיטהבחינה, ניתוח, הדגמה או בדיקה; יותר מאחת אם צריךניתוח דרישות
רמההיכן היא מאומתת: רכיב, תת-מערכת או מערכת (או יחידה, מכלול, מקטע)ניתוח דרישות
קריטריוני הצלחההתוצאה המדידה שנחשבת לעמידה, עם תנאיםניתוח דרישות
אירוע אימותמקרה הבדיקה, הניתוח, הבחינה או ההדגמה שמבצעים אותותכן
מצבלא מאומת, מתוכנן, לא הורץ, עבר או נכשלאינטגרציה ובדיקות
ראיההדוח, קובץ הנתונים או הרשומה שמראים את התוצאה, עם הגרסה שלהם ועם הבנייה ופריט הבדיקה שעליהם הם רצואינטגרציה ובדיקות

ארבע העמודות הראשונות הן התוכנית. שלוש האחרונות הן התוצאות. חשוב להפריד בין שני החצאים, כי הם משתנים בזמנים שונים ומסיבות שונות (ראו תכנון מול תוצאות).

בחירת שיטת אימות

יש ארבע שיטות סטנדרטיות. הן מפורטות כאן מהזולה ליקרה, וזה גם סדר ההעדפה המקובל כשיותר מאחת מתאימה. מוטב לבחור את השיטה כשהדרישה נכתבת; המדריך לכתיבת דרישות מראה למה, על TC-06.

בחינה
בחינת הפריט או התיעוד שלו בלי להפעיל אותו: מדידת ממד, קריאת תווית, בדיקת תעודה, שרטוט או הגדרת תצורה. מתאימה לתכונות פיזיות, סימונים, חומרים וכל מה שמנוסח כ-“shall have” או “shall be made of”. היא כוללת גם סקירה של רשומות שהופקו במקום אחר: EO-1 מאמת את 3.4 Bus Regulation ‏(12 V בטווח של 2%) על ידי בחינת דוח ההסמכה של יחידת חלוקת ההספק ונתוני קפיצת העומס שלה, במקום לחזור על הבדיקה.
ניתוח
הצגה שעומדים בדרישה באמצעות חישוב, מידול או סימולציה, לעיתים קרובות תוך שימוש בנתוני בדיקה מרמות נמוכות יותר. מתאים כשאי אפשר לבדוק את הדבר האמיתי או שזה לא בטוח, או כשהניתוח מכסה הרבה יותר מקרים משכל בדיקה יכולה. את 1.7 Mission Lifetime של EO-1 ‏(730 ימים במסלול) אפשר להראות רק בניתוח אמינות, ואת 1.6.1 Ground Track Repeat בהתקדמות המסלול.
הדגמה
הפעלת הפריט כדי להראות שהוא עושה משהו, בתצפית אך בלי מכשור למדידה מדויקת. מתאימה לדרישות פונקציונליות ומבצעיות עם תוצאה של כן או לא: את 6.1 Contact Scheduling של EO-1 (קשרים שמוזמנים 48 שעות מראש) מראים על ידי הרצת צוות התפעול לאורך 14 ימי חזרות.
Test
הפעלת הפריט בתנאים מבוקרים ומדידת התוצאה מול מספר. מתאימה לדרישות ביצועים עם ערך וסבולת, כמו 2.1 Pointing Accuracy (בטווח של 0.1 מעלות מהמטרה). בדיקה מפיקה את הראיה החזקה ביותר ובדרך כלל עולה הכי הרבה.

כמה שאלות שמכריעות את הבחירה:

  • האם יש מספר בדרישה? אז בדרך כלל היא צריכה בדיקה או ניתוח; הדגמה אינה יכולה להראות “בטווח של 0.1 מעלות”.
  • האם אפשר לשחזר את התנאי? שנתיים במסלול, או מעבר בזווית של 25 מעלות מהנדיר מעל שדה אמיתי, אי אפשר לביים במעבדה. אלה הולכים לניתוח, בגיבוי בדיקה בנקודה שהמעבדה יכולה להגיע אליה.
  • באיזו רמה אפשר לראות את זה? את קיבול הסוללה אפשר לבדוק על מארז הסוללה (רמת רכיב); דיוק ההצבעה צריך את תת-מערכת הייצוב; הביקור החוזר בתוך 72 שעות קיים רק למשימה כולה. יש לאמת כל דרישה ברמה הנמוכה ביותר שבה התכונה קיימת במלואה.
  • מה הלקוח יקבל? חוזים קובעים לעיתים קרובות את השיטה לדרישות מפתח. יש להסכים עליה מוקדם, לא בקבלה.

יש לכתוב את קריטריוני ההצלחה באותו זמן. “עומד בדרישה” אינו קריטריון. “שגיאה של 0.1 מעלות לכל היותר בכל אחת מ-20 מטרות שנפקדו” הוא קריטריון: כל אחד יכול להריץ אותו ולהגיע לאותה הכרעה.

תכנון מול תוצאות

החצי התכנוני של המטריצה נקבע במהלך ניתוח הדרישות והתכן. הוא עונה על השאלה “איך נדע?” והוא צריך להיות שלם הרבה לפני שקיימת חומרה כלשהי. דרישה בלי שיטה בסקירת הדרישות היא פגם בקבוצת הדרישות, לא פער בתוכנית הבדיקות.

חצי התוצאות מתמלא במהלך האינטגרציה והבדיקות. הוא משתנה בכל פעם שאירוע רץ, ויש לו משמעות רק יחד עם מה שנבדק: גרסת הבנייה או התוכנה, המספר הסידורי של פריט הבדיקה, התאריך והאדם. תוצאה בלי הבנייה ופריט הבדיקה שלה אי אפשר לחזור עליה או לבקר אותה, והיא אינה יכולה לומר איזו בנייה תיקנה כשל.

שני הרגלים שומרים על כנות שני החצאים:

  • אירוע אחד לכל שורת ראיה. דוח ניתוח, רשומת בחינה והדגמה הם אירועי אימות בדיוק כמו מקרה בדיקה. יש לתת לכל אחד רשומה משלו עם תוצאה, כך שהמטריצה תציג ראיות לכל שיטה ולא רק לבדיקות.
  • לאמת את העלים, לסכם את ההורים. דרישת הורה שמפורקת לצאצאים מאומתת כשכל הצאצאים שלה מאומתים, או כשיש לה אירוע משלה. הסיכום מונע תכנון בדיקות כפולות להורה ומראה מיד איזה ענף מעכב אותו.

ערכי מצב וסיכום

חמישה ערכי מצב מכסים את חיי השורה:

מצבמשמעותמה לעשות
לא אומתאין שיטה ואין אירועלתכנן אותה, או לערער על הדרישה
מתוכנן בלבדנקבעה שיטה, עדיין אין אירועלכתוב את מקרה הבדיקה, הניתוח או הבחינה
לא הורץיש אירועים, לאף אחד אין תוצאהלתזמן אותם
עבראירוע עבר ואף אחד לא נכשללשמור את הראיה עם הבנייה ופריט הבדיקה שלה
נכשלאירוע נכשללפתוח Issue, לתקן, להריץ שוב

לאירוע אימות יש מצבים משלו, מפורטים יותר: לא הורץ, בתהליך, חסום, נכשל או עבר. לצורך המטריצה, לאירוע שנמצא בתהליך או חסום עדיין אין הכרעה, ולכן הדרישה שלו נחשבת לא הורצה.

בדרישת הורה, כשל בכל מקום מתחתיה הופך אותה לנכשלת, והיא עוברת רק כשכל צאצא עובר (או שהאירוע שלה עובר). אחרת היא מראה עד כמה התקדם הענף הפחות מכוסה שלה. ספירת השורות לפי מצב נותנת את המספר האחד שרוב הסקירות מבקשות ראשון: כמה דרישות מאומתות מתוך כמה.

לשמור אותה כנוצרת מהמודל

רוב המטריצות מתחילות את חייהן כגיליון אלקטרוני, ורוב הגיליונות סוטים. טקסט הדרישה מודבק פנימה ומתיישן כשהדרישה משתנה. מצב הבדיקה מוקלד ידנית אחרי כל הרצה, על ידי מי שזוכר. שני עותקים מסתובבים לפני סקירה, ואיש אינו בטוח איזה מהם הלקוח ראה. כל זה אינו רשלנות; גיליון אלקטרוני הוא עותק, ועותקים מתפצלים.

החלופה היא לשמור את תוכן המטריצה במקום שבו הוא כבר נמצא ולהפיק ממנו את הטבלה:

  • שיטה, רמה וקריטריוני הצלחה הם מאפיינים של הדרישה;
  • כל אירוע אימות הוא פריט שמקושר לדרישות שהוא מאמת;
  • כל תוצאה, עם הבנייה, פריט הבדיקה והראיה שלה, מתועדת על האירוע כשהוא רץ;
  • המטריצה היא שאילתה על הקישורים האלה, שנבנית מחדש בכל פעם שהיא נפתחת או מיוצאת.

כך המטריצה אינה יכולה לחלוק על הדרישות או על רשומות הבדיקה, כי אין לה נתונים משלה. עותק מיוצא לסקירה הוא עדיין תמונת מצב, אבל הוא נוצר בשניות מהמודל הנוכחי ולא מתוחזק ידנית. זו אחת התועלות הפשוטות ביותר של שמירת הדרישות, התכן והאימות במודל אחד; הדף תכונות האימות מתאר איך Holarch עושה זאת.

איך תוצאות שנכשלו או השתנו מופיעות

שני סוגי שינויים הופכים שורה לשגויה אחרי שנראתה גמורה.

תוצאה שנכשלה

כשל הוא מידע, לא מבוכה, והמטריצה צריכה להציג אותו בבירור. האירוע שנכשל נשאר נכשל עד שהוא מורץ שוב; הוא אינו מאופס בשקט. כל כשל מקבל Issue (דוח תקלה או דוח אי-התאמה) שמקושר לאירוע ולדרישות שהוא מאמת, כך ששורת המטריצה מובילה לחקירה. כשהתיקון מגיע, האירוע מורץ שוב על הבנייה החדשה, והרשומה שומרת את שתי ההרצות: הכשל על הבנייה הישנה וההצלחה על החדשה. שמירת התוצאות של כל מערך בדיקות כתמונת מצב (שנקראת לעיתים קרובות מחזור בדיקות) מאפשרת להשוות בין מערכים ולראות בדיוק אילו שורות השתנו.

דרישה שהשתנתה

הבעיה השקטה יותר היא דרישה שמשתנה אחרי שהבדיקה שלה עברה. אם דרישת הספק עולה מ-28 W ל-30 W, ההצלחה הישנה כבר אינה מוכיחה דבר על הערך החדש, אבל עמודת מצב עדיין תאמר “עבר”. מטריצה טובה מסמנת את הקישור בין הדרישה שהשתנתה לבין האירוע המאמת שלה כחשוד עד שמישהו סוקר אותו: או שהאירוע כבר מכסה את הערך החדש, או שהנוהל צריך להשתנות והאירוע צריך לרוץ שוב. אותו דבר חל כשמשהו במעלה הזרם של הדרישה משתנה. קישורים חשודים באופן כללי מוסברים בסעיף על קישורים חשודים במדריך לעקיבות; לאימות הכלל קצר: הצלחה שתועדה לפני השינוי האחרון בדרישה צריכה סקירה לפני שהיא נחשבת באבן דרך. המדריך לניתוח השפעת שינויים עוקב אחרי אותו שינוי מבקשת השינוי ועד הבדיקה החוזרת.

סקירת כיסוי לפני אבן דרך

שבוע לפני סקירה, יש לעבור על המטריצה עם השאלות האלה:

  1. שורות לא מאומתות. לכל דרישה צריכה להיות לפחות שיטה. לשורות בלי שיטה חסרה תוכנית, או שאי אפשר לאמת אותן כפי שנוסחו.
  2. שורות מתוכננות בלבד. לסקירת תכן, לכל אחת צריך להיות אירוע או סיבה שעדיין אין. לקבלה, אף אחת לא צריכה להישאר.
  3. שורות שנכשלו. כל אחת צריכה Issue מקושר עם בעלים ותוכנית. כשל בלי Issue הוא הממצא הנפוץ ביותר בסקירות בדיקה.
  4. שורות חשודות. כל אחת צריכה החלטה: עדיין תקפה, או הרצה חוזרת.
  5. סבירות הרמה והשיטה. יש לחפש דרישות ברמת מערכת שמאומתות רק בבדיקת רכיב, דרישות מספריות שמאומתות רק בהדגמה, ואירועים שהנוהל שלהם אינו מודד את מה שהדרישה קובעת.
  6. ראיות. יש לבדוק מדגמית כמה שורות שעברו: האם הראיה קיימת, והאם הבנייה ופריט הבדיקה שלה תואמים את מה שנסקר?
  7. אירועים יתומים. מקרי בדיקה שאינם מאמתים אף דרישה עולים כסף ואינם מוכיחים דבר ברשומה. יש לקשר אותם או להוציא אותם משימוש.

יש לתעד את הספירות לכל מצב בכל אבן דרך. המגמה (לא מאומתות יורדות, עברו עולות, נכשלו נסגרות) אומרת יותר על בריאות התוכנית מכל תמונת מצב בודדת.

דוגמה מלאה: ה-RVTM של ה-CubeSat ‏EO-1

הדוגמה היא פרויקט ההדגמה CubeSat EO-1 ב-Holarch, שבו הדרישות נמצאות ב-SRS-001 EO-1 System Requirements Specification, אירועי האימות הם Test Cases בשתי Test Suites, וכל מקרה בדיקה verifies את הדרישות שלו (חבילה שלישית, TS-3 Mission Validation, מתקפת את צורכי בעלי העניין ונשארת מחוץ ל-RVTM). שינוי אחד נוסף להדגמה עבור המדריך הזה, אותו שינוי ששלב השינוי בדוגמת ה-MBSE עושה: אחרי סקירת התכן המקדמית העומס הממוצע למסלול גדל ל-26 W, ולכן דרישה 3.1 Orbit Average Power הועלתה מ-28 W ל-30 W.

הורדת הדוגמה: מטריצת אימות הדרישות של EO-1 כחוברת Excel ‏(.xlsx, ‏32 שורות) או אותה מטריצה כ-CSV. שתיהן ייצוא ה-RVTM של Holarch עצמו של הפרויקט שמוצג בהמשך: מספר ושם הדרישה, שיטה, רמה, קריטריוני הצלחה, מקרי הבדיקה המאמתים עם המצב שלהם, מצב עצמי ומצב מסוכם. אפשר להשתמש בהן כתבנית לעמודות משלכם.

התוכנית

מבחר שורות, אחת לכל שיטה ורמה, עם קריטריוני ההצלחה כפי שנכתבו במפרט:

#דרישהשיטהרמהקריטריוני הצלחה
1.2Ground Sample Distance: ‏4.5 m ממסלול בגובה 500 kmTestמערכתMTF בתדר Nyquist של 0.12 לפחות על מטרת הפסים של 4 m
1.6.1Ground Track Repeat: כל 3 ימיםניתוחמערכתהתקדמות המסלול מראה חזרה כל 3 ימים ± שעה
2.1Pointing Accuracy: בטווח של 0.1 מעלותTestתת-מערכתשגיאה של 0.1 מעלות לכל היותר בכל אחת מ-20 מטרות שנפקדו
3.1Orbit Average Power: ‏30 W לפחות בסוף החיים (היה 28 W)Testתת-מערכתהספק ממוצע למסלול בסוף החיים שנחזה מהספק שיא מדוד
3.2Battery Capacity: ‏77 Wh לפחות בתחילת החייםTestרכיבקיבול מדוד של 77 Wh לפחות ב-C/2 וב-20 °C
3.4Bus Regulation: ‏12 V בטווח של 2%בחינהרכיבהאפיק בטווח 11.76–12.24 V בכל קפיצות העומס
6.1Contact Scheduling: ‏48 שעות מראשהדגמהמערכתקשרים שהוזמנו 48 h מראש במשך 14 ימים רצופים בחזרות
6.5Planning Cycle Time: בתוך 100 דקותניתוחמערכתסימולציית מונטה קרלו עומדת ב-100 דקות בהסתברות של 90% לפחות
2.5Safe Mode Recovery: “quickly … as appropriate”(אין)(אין)(אין)

כל ארבע השיטות מופיעות, בשלוש רמות. קיבול הסוללה נבדק על המארז לבדו, כי התכונה קיימת שם במלואה; דיוק ההצבעה צריך את תת-מערכת הייצוב על שולחן מיסב אוויר; החזרה של מסלול הקרקע היא תכונה של המסלול והולכת לניתוח. 6.5 מאומתת בניתוח הסתברותי של ציר הזמן המבצעי, סוג הבדיקה שהמדריך למונטה קרלו עובר עליו. הקריטריון של 3.1 הוא תחזית ממדידה: הבדיקה מודדת את הספק השיא של המערכים, ומשוואה בתקציב ההספק הופכת אותו לערך ממוצע למסלול. ל-2.5 אין שיטה כי, כפי שנוסחה, אי אפשר לאמת אותה.

התוצאות ומערכי הבדיקות

19 מקרי בדיקת האימות נמצאים בשתי חבילות: TS-1 Spacecraft Qualification Tests ‏(15 מקרי בדיקה, מבדיקות ספסל אופטי ועד ניתוחים) ו-TS-2 Communications and Ground Tests ‏(4). חבילה שלישית, TS-3 Mission Validation, מחזיקה את VAL-01 עד VAL-03, שמאמתים צורכי בעלי עניין ולא דרישות, ולכן ה-RVTM משמיט אותם (ראו אימות מול תיקוף). כל תוצאה מתועדת נושאת את הבודק, התאריך, הבנייה (גרסת תוכנת הטיסה) ופריט הבדיקה (מספרים סידוריים של החומרה), ואם יש, את קובץ הראיה.

TC-04 Pointing Accuracy Test נכשל: בהרצה השנייה שלו, עם תוכנת טיסה 2.3.1, שלוש מתוך 20 מטרות היו מחוץ ל-0.1 מעלות, הגדולה ב-0.14 מעלות, והחשד הוא חיכוך בגלגלים. לכשל יש Issue שמקושר למקרה הבדיקה ודרכו לדרישות 2.1 ו-2.2. TC-09 Safe Mode Entry Test נכשל באותו אופן (14 שניות מול 10) ויש לו Issue משלו. שני מקרי בדיקה, TC-11 UHF Command Test ו-TC-17 Slew Time Analysis, נמצאים בתהליך; במטריצה הם נחשבים לא הורצו עד שתהיה להם הכרעה.

מערך ה-flatsat הורץ פעמיים, והתוצאות של כל מערך נשמרו כמחזור בדיקות. השוואה בין השניים מראה מה המערך השני שינה:

  • Flatsat Cycle 1: ‏5 מתוך 9 עברו. TC-03 ו-TC-06 לא הורצו; TC-04 ‏(0.16 מעלות ב-5 מטרות) ו-TC-09 ‏(15 שניות) נכשלו.
  • Flatsat Cycle 2: ‏8 מתוך 11 עברו. TC-03 ו-TC-06 עברו, הניתוח TC-13 נוסף ועבר, TC-14 נוסף אבל לא הורץ. TC-04 ו-TC-09 השתפרו (0.14 מעלות ב-3 מטרות, 14 שניות) אבל עדיין נכשלו.

“השתפר אבל עדיין נכשל” הוא בדיוק מה שעמודת מצב מסתירה והשוואת מחזורים שומרת: התיקונים בין המערכים הזיזו את המספרים בכיוון הנכון, ואף אחד מהם אינו סגור.

קריאת המטריצה

המטריצה נוצרת מהדרישות וממקרי הבדיקה שלמעלה; שום דבר בה לא הוקלד לטבלה. הכרטיסים סופרים שורות לפי מצב מסוכם, וחמש הספירות מסתכמות ב-32 הדרישות: 11 עברו, 3 נכשלו, 12 לא הורצו, 3 מתוכננות בלבד, 3 לא מאומתות. קריאה שלה כמו שוועדת סקירה הייתה קוראת:

  • 11 מתוך 32 מאומתות (34%). הצלחות בבדיקה (1.2, 3.2), בניתוח (1.6.1, 1.7) ובבחינה (3.4). אף הדגמה עוד לא עברה: שלושתן (5.4, 6.1, 6.2) ממתינות לחזרות מקטע הקרקע ב-TS-2.
  • 2.1 ו-2.2 נכשלו דרך בדיקה אחת. TC-04 מאמת את שתיהן, כך שכשל אחד מכשיל שתי שורות. במבט מקרוב ל-2.2 Pointing Stability יש בעיה שנייה: הקריטריון שלה הוא סחיפה לאורך כל לכידה של 40 s, אבל TC-04 מודד רק את שגיאת ההצבעה בכל מטרה. אפילו TC-04 שעובר לא היה מראה שעומדים ב-2.2. זה ממצא של סבירות השיטה: 2.2 צריכה מדידה משלה, או שהנוהל של TC-04 צריך לתעד סחיפה.
  • 4.3 נכשלה דרך TC-09. ה-Issue ומשימה להעלות את קצב הדגימה של ה-watchdog ולהריץ שוב את TC-09 מתועדים; השורה נשארת נכשלת עד ש-TC-09 עובר על התוכנה החדשה.
  • 1.6 Revisit Time מסוכמת. בפני עצמה היא רק מתוכננת (ניתוח, אין אירוע), אבל שני הצאצאים שלה מכריעים אותה: 1.6.1 עברה, 1.6.2 Off-Nadir Imaging לא הורצה, ולכן 1.6 מוצגת כלא הורצה. אין צורך בבדיקה נפרדת של ההורה ברגע ששני הצאצאים עוברים.
  • מתוכננות בלבד: 1.5, 4.4 ו-6.5. לכל אחת יש שיטה ואין אירוע. ל-4.4 Downlink Encryption גם אין רמה ואין קריטריונים, כך שהתוכנית שלה לא הושלמה.
  • לא מאומתות: 2.5, 3.5 ו-6.4. אין שיטה, אין אירוע. אלה גם שלוש הדרישות החלשות ביותר במפרט (“quickly … as appropriate”, ‏“warm enough (TBD)”, ‏“user friendly and/or easy to use”). פערים במטריצה נוטים להצביע על דרישות שצריך לנסח מחדש, ולא על בדיקות חסרות.
  • 3.1 חשודה. ראו את הסעיף הבא.

דרישה שהשתנתה: 3.1 אחרי PDR

TC-06 Solar Array Power Test עבר: התוצאה הצפויה הייתה 72 W שיא לפחות, והמערכים סיפקו 75.1 W. אחר כך 3.1 הועלתה מ-28 W ל-30 W. עמודות המצב עדיין מציגות עבר, כי TC-06 אכן עבר. ה-⚠ שאחרי הדרישה ואחרי TC-06 אומר שההצלחה ישנה יותר מהדרישה. לחיצה עליו מפרטת כל קישור מ-3.1 שהשינוי הפך לחשוד:

לגבי קישור האימות השאלה מוחשית: האם 75.1 W של הספק שיא מדוד עדיין מראים 30 W בממוצע למסלול? תקציב ההספק עונה עליה. המשוואה שלו EQ-1.3 הופכת הספק שיא להספק ממוצע למסלול עם החלק המואר של המסלול (0.62) ונצילות נתיב ההספק (0.6):

הספק שיאממוצע למסלול (× 0.62 × 0.6)מה זה
72.0 W26.8 Wהתוצאה הצפויה של TC-06
75.1 W27.9 Wהתוצאה הנמדדת של TC-06
75.3 W28.0 Wנדרש עבור 3.1 הישנה
80.6 W30.0 Wנדרש עבור 3.1 החדשה

לכן אי אפשר להעביר את ההצלחה הלאה: כדי להראות 30 W, המערכים היו צריכים כ-80.6 W שיא, ו-TC-06 מדד 75.1 W על לוחות הסמכה בתחילת החיים, לפני כל התדרדרות של סוף החיים. הסקירה חושפת גם בעיה ישנה יותר שהשינוי הביא לאור: סף ה-72 W של TC-06 מתאים רק ל-26.8 W בממוצע למסלול, כך שאפילו מול 28 W התוצאה הצפויה של הבדיקה לא נגזרה מהדרישה דרך תקציב ההספק. התוצאה הנכונה היא להשאיר את הקישור חשוד, לפתוח Issue, לעדכן את התוצאה הצפויה של TC-06 לפי המשוואה (ולהחליט עם מהנדס ההספק אם המערכים או המרווח משתנים), ואז להריץ אותו שוב. סימן החשד נשאר עד שההחלטה הזאת מתועדת, כך שאיש לא יקרא את ה-“Passed” הישן כראיה ל-30 W.

המטריצה המיוצאת מכילה רק תוצאות אימות, לא סימוני חשד: בחוברת שהורדה 3.1 מוצגת כ-Passed. יש לסקור את השורות החשודות במודל לפני שמייצאים עותק לאבן דרך.

תכנון השורות שנותרו לפני הסקירה

רשימת הכיסוי מציגה את 21 השורות שעדיין אינן מאומתות (32 פחות 11), עם הפקדים להשלמת התוכנית שלהן. לפני סקירת התכן הקריטית, העבודה שהיא פורשת היא:

  1. לנסח מחדש את 2.5, ‏3.5 ו-6.4 כך שאפשר יהיה לאמת אותן, ואז לתת לכל אחת שיטה, רמה וקריטריונים.
  2. לתת ל-4.4 רמה וקריטריונים, וליצור עבורה את הבחינה; ליצור את הניתוחים ל-1.5 ול-6.5.
  3. לסגור את הכשלים: TC-04 אחרי חקירת הגלגלים, TC-09 אחרי שינוי ה-watchdog, כשהסחיפה של 2.2 נמדדת בנפרד.
  4. להחליט על 3.1: לעדכן את TC-06 ולהריץ אותו שוב מול 30 W.
  5. לתזמן את האירועים שלא הורצו, החל מ-TC-19 Array Deployment Test וארבעת האירועים של TS-2, שיחד מאמתים שמונה דרישות.

תיעוד הספירות בכל סקירה (כאן 11 עברו, 3 נכשלו, 12 לא הורצו, 3 מתוכננות בלבד, 3 לא מאומתות) נותן את המגמה שהסקירה הבאה תשווה אליה.

מטריצה אחת לכל מוצר בקו מוצרים

במדריך הזה “בנייה” פירושה מה שבדיקה רצה עליו: גרסת תוכנה והמספרים הסידוריים של פריט הבדיקה. קו מוצרים הוא רעיון אחר: כמה מוצרים, כמו EO-1 Flight ו-EO-1 Lite הזולה יותר, שנשמרים במודל אחד, כל אחד תצורת מוצר. הדרישות שלהם חופפות אבל אינן זהות, והצלחה במוצר אחד אינה מאמתת את השני. EO-1 Lite טסה עם רדיו ה-S-band, כך שבדיקת קישור ה-X-band שעברה עבור EO-1 Flight אינה אומרת עליה דבר.

את המטריצה יש לקרוא אז לכל מוצר. ב-Holarch, יש לבחור תצורת מוצר ב-הצגה כ ▾: ה-RVTM מציג רק את הדרישות של אותה תצורה ואת התוצאות שתועדו עבורה, כך ש-“מאומת” פירושו מאומת לאותו מוצר, והייצואים שלו מציינים את התצורה. כל התצורות מוסיף עמודת מצב מסוכם אחת לכל תצורה, עם “—” במקום שבו דרישה אינה חלק ממנה. הרצת החבילה בתצוגת תצורה מתעדת את התוצאות שלה כתוצאות של אותה תצורה וממלאת את השדה תצורה / גרסת בנייה בשם המוצר; עדיין כדאי לתעד את הבנייה ואת פריט הבדיקה. קווי מוצרים דורשים את התוכנית Individual או Team; ראו קווי מוצרים: RVTM ואת המדריך להנדסת קו מוצרים.

טעויות נפוצות

  • חזרה על הדרישה כקריטריון ההצלחה. “ה-ADCS מצביע בטווח של 0.1 מעלות” אינו אומר דבר על כמה מטרות, באילו תנאים או מול איזה ייחוס.
  • ספי בדיקה שלא נגזרו מהדרישה. התוצאה הצפויה של בדיקה צריכה לנבוע מהדרישה דרך הניתוח שמקשר ביניהן, כפי שה-72 W של TC-06 לא נבעו. יש לבדוק את החשבון כשהבדיקה נכתבת, לא כשהדרישה משתנה.
  • בדיקה אחת לכמה דרישות בלי למדוד כל אחת. שיתוף בדיקה יעיל, אבל רק אם הנוהל מתעד כל גודל שהדרישות המקושרות קובעות.
  • אימות ישיר של הורים. כתיבת בדיקה לדרישת הורה שרק חוזרת על הבדיקות של הצאצאים שלה מכפילה את העבודה ואת הניירת. יש לאמת את העלים ולתת להורה להסתכם.
  • ניתוח בלי ראיה. ניתוח הוא אירוע אימות וצריך דוח, גרסה והכרעה כמו כל בדיקה.
  • קישור בדיקה לדרישה בקישור כללי מסוג “קשור”. המטריצה סופרת רק קישורי אימות; בדיקה שמקושרת בכל דרך אחרת משאירה את הדרישה נראית לא מאומתת.
  • איפוס כשל ל-“לא הורץ” כדי לסדר את המטריצה. יש לשמור את הכשל ואת ה-Issue שלו; ההיסטוריה היא מה שמבקר מבקש.
  • התעלמות משורות חשודות בקבלה. הצלחה שקודמת לדרישה שהיא טוענת לאמת אינה ראיה לדרישה הנוכחית.

לנסות ב-Holarch

  1. יש ליצור את פרויקט EO-1: ניהול פרויקטים ← קובצי פרויקט ▾ ← פרויקט הדגמה חדש ← CubeSat (הנדסת מערכות מודרכת). או להתחיל מדרישות משלכם במסמך דרישות; ראו דרישות.
  2. יש לפתוח את אימות ← מרכז הבדיקות. ב-כיסוי אימות, יש להגדיר את השיטה של כל דרישה עם A, D, נ ו-T, לבחור רמה ב-רמה…, ולהוסיף קריטריוני הצלחה עם + קריטריונים.
  3. יש ליצור חבילות בדיקה ומקרי בדיקה עם + חדש ▾ ו-+ Test Case, ולקשר כל מקרה בדיקה לדרישות שלו עם + בעמודה verifies. גם ניתוחים, בחינות והדגמות הם מקרי בדיקה.
  4. יש לתעד תוצאות עם כפתורי המצב, או לעבור על מערך עם הרצת החבילה, שמתעדת לכל הרצה את הבודק, הבנייה (השדה תצורה / גרסת בנייה), פריט הבדיקה וקובץ הראיה. אחרי כשל, יש ללחוץ על + יצירת סוגיה.
  5. יש לשמור מערך עם התחלת מחזור חדש…, ולהשוות מערכים ב-⋯ ← מחזורי בדיקות… של החבילה.
  6. יש לפתוח את אימות ← RVTM. לחיצה על כרטיס מצב מסננת את השורות. כדי לראות סימן חשד, יש לשנות את הטקסט של דרישה 3.1, ואז ללחוץ על ה-⚠ שלידה.
  7. יש ללחוץ על ייצוא ▾ לקבלת Excel (.xlsx), CSV או Word (.docx). הדוגמה להורדה שלמעלה היא הייצוא הזה.

ההפניה המלאה נמצאת באימות.

לאן ממשיכים