אימות
אימות
תכנון האופן שבו כל דרישה מאומתת, ארגון מקרי בדיקה בחבילות, הרצת בדיקות עם תוצאות שלבים וראיות, שמירת מחזורי בדיקה ודיווח על כיסוי ב-RVTM.
סקירה כללית
אימות עונה על שאלה אחת לכל דרישה: איזו ראיה מראה שהיא מתקיימת?
Holarch שומר את כל מה שקשור לאימות באותו מודל כמו הדרישות:
- התוכנית: שיטת האימות, הרמה וקריטריוני ההצלחה
- מקרי הבדיקה שמבצעים את התוכנית
- התוצאות של כל הרצה
- הכיסוי שמתקבל
כיוון שכל זה נמצא במודל אחד, דוח הכיסוי תמיד עדכני.
הקבוצה אימות בסרגל הניווט מכילה:
| דף | מטרה |
|---|---|
| RVTM | מטריצת העקיבות של אימות הדרישות: כל דרישה עם השיטה, הרמה, מקרי הבדיקה המאמתים, התוצאה העצמית והתוצאה המסוכמת שלה. |
| מרכז הבדיקות | חבילות בדיקות ומקרי בדיקה, נהלים שלב אחר שלב, הרצות בדיקה עם ראיות, מחזורי בדיקה וכיסוי האימות של הדרישות. |
| מטריצת עקיבות | כל קשר כרשת, לדוגמה דרישות × מקרי בדיקה. ראו מטריצת עקיבות. |
| בדיקות המודל | בדיקות כללים של כל המודל, כולל דרישות עלה שלא אומתו ובדיקות שנכשלו בלי Issue. ראו בדיקות המודל. |
התג בסרגל על אימות סופר בדיקות שנכשלו ושגיאות של בדיקות המודל.
מושגים
מאפייני תכנון האימות
לכל Requirement יש שלושה מאפייני תכנון:
| מאפיין | ערכים | משמעות |
|---|---|---|
| Verification Method | Analysis, Demonstration, Inspection, Test (כל צירוף) | איך הדרישה מאומתת. |
| Verification Level | Component, Subsystem, System | רמת ההרכבה שבה היא מאומתת. |
| Success Criteria | טקסט | התוצאה המדידה שמראה שהדרישה מתקיימת. |
התוויות של הדרישה כוללות תוויות Verification Method תואמות (Analysis, Demonstration, Inspection, Test). הגדרת המאפיין או תווית מעדכנת את השני כחלק מאותו שינוי, וביטול פעולה אחד מבטל את שניהם. לכן פרויקטים מיובאים שמשתמשים בתוויות מתנהגים כמו פרויקטים שמשתמשים במאפיין.
Verification Requirements (LML 2.0)
Verification Requirement הוא Statement שמציין מה צריך להראות, ואיך, לפני שדרישה נחשבת כמתקיימת. זו הדרך של LML 2.0 לשמור את תוכנית האימות בפריט משלה במקום על הדרישה. יש לו:
| מאפיין | משמעות |
|---|---|
| Verification Method | Analysis, Demonstration, Inspection, Test (כל צירוף; אפשר להוסיף שיטות בסכמה). |
| Acceptance Criteria | התוצאות שהאימות צריך להשיג. |
| ראיה | סוג הרשומה שיש לאסוף ולמסור, כמו דוח בדיקה או רשומת בחינה. |
| נימוק | למה נבחרו השיטה, הקריטריונים והראיה האלה. |
מקשרים אותו עם verifies לדרישה (או לנכס) שהוא מכסה, ועם traced to למקרי הבדיקה שמבצעים אותו. אז ה-RVTM סופר את מקרי הבדיקה האלה כמאמתים את הדרישה, לוקח את השיטה ואת קריטריוני הקבלה מה-Verification Requirement כשלדרישה אין משלה, ומציג את ה-Verification Requirement תחת Verified By.
שתי הצורות פועלות זו לצד זו: מקרה בדיקה שמאמת דרישה ישירות (הצורה של LML 1.x) נספר בדיוק כמו קודם, והתווית Verification Requirement על דרישה נשארת זמינה.
מקרה בדיקה יכול גם לציין את הנכס הנבדק עם evaluates (מנקודת המבט של הנכס: evaluated by).
פרויקטים שנוצרו לפני התוספות האלה שומרים על הסכמה שלהם; Schema ← הוספת הרכיבים המובנים החדשים… מוסיף להם את המחלקה Verification Requirement ואת הקשר evaluates.
מקרי בדיקה וחבילות בדיקות
Test Case מאמת דרישות דרך הקשר verifies (מנקודת המבט של הדרישה: verified by). למקרה בדיקה יש:
- תיאור: הנוהל.
- Set Up, התוצאה הצפויה, תוצאה בפועל.
- Event Conditions (התנאים שבהם הבדיקה רצה, כמו סביבה, מצב פעולה או עומסים מדומים) ו-Event Constraints (מגבלות על אירוע הבדיקה, כמו עדים בלתי תלויים, נקודות עצירה או כללי דגימה). תיבת הדו-שיח של ההרצה מציגה אותם כשהם מלאים, ולייצוא ה-CSV של החבילה יש עמודה לכל אחד.
- evaluates: הנכס הנבדק.
- Status: Not Run, In Progress, Blocked, Failed או Passed.
- Steps: נוהל ממוספר אופציונלי, כל שלב עם Action, Expected Result, Actual Result ו-Pass/Fail.
- ראיות ההרצה, שנכתבות בכל הרצה מתועדת: נבדק על ידי, תאריך הבדיקה, תצורה (גרסת הבנייה או הגרסה הנבדקת), פריט הבדיקה (יחידה או מספר סידורי) ו-Test Evidence (קובץ).
- יומן הרצות: כל הרצה מתועדת עם תאריך, סטטוס, בודק, תצורה, פריט, תוצאה בפועל, שם קובץ הראיה ותוצאות השלבים.
אפשר לפרק מקרה בדיקה למקרי בדיקה צאצאים. הסטטוס של הורה מסוכם מהעלים שלו. הכלל הראשון שמתאים קובע:
- Failed אם עלה כלשהו נכשל.
- Blocked אם עלה כלשהו חסום.
- Passed אם כל העלים עברו.
- Not Run אם אף עלה לא רץ.
- In Progress אחרת.
Test Suite הוא Artifact עם התווית Test Suite. הוא מחזיק את מקרי הבדיקה שלו דרך source of (או referenced by בנתונים מיובאים). מקרי בדיקה שאינם באף חבילה מופיעים תחת מקרי בדיקה ללא חבילה.
מצב האימות של דרישה
כל דרישה מקבלת סטטוס עצמי ממקרי הבדיקה המאמתים שלה (אלה שמאמתים אותה ישירות ואלה שעוקבים מה-Verification Requirements שלה):
| סטטוס עצמי | כלל |
|---|---|
| נכשל | מקרה בדיקה מאמת נכשל. |
| עבר | מקרה בדיקה מאמת עבר (ואף אחד לא נכשל). |
| לא הורץ | קיימים מקרי בדיקה מאמתים, אף אחד לא עבר ולא נכשל. |
| מתוכנן בלבד | אין מקרה בדיקה, אבל הוגדרה Verification Method (על הדרישה או על אחד מה-Verification Requirements שלה). |
| לא אומת | אין מקרה בדיקה ואין Verification Method. |
הסטטוס המסוכם עוקב אחר הפירוק (decomposed by). עבור דרישת הורה:
- היא Passed כשיש לה בדיקה עוברת משלה, או כשכל דרישות הצאצא שלה Passed.
- היא Failed כשיש כישלון כלשהו מתחתיה.
- אחרת היא מקבלת את הסטטוס העצמי שלה או את הסטטוס של הצאצא הפחות מכוסה שלה, לפי מה שמתקדם יותר. הסדר הוא Unverified ← Planned-only ← Not Run.
Verified פירושו תמיד Passed.
מחזורי בדיקה
מחזור בדיקה הוא צילום מצב שמור של תוצאות חבילה: הסטטוס והתוצאה בפועל של כל מקרה בדיקה עלה. שומרים אחד בסוף כל מערכה, ואז מאפסים את החבילה ל-Not Run לקראת הבאה. אפשר להשוות מחזורים זה לזה או לתוצאות הנוכחיות, ולחזור למחזור.
איך להשתמש בה
מתי ולמה
מתכננים אימות בזמן כתיבת הדרישות, לא אחרי שהתכן נבנה. אם אי אפשר לציין את השיטה ואת קריטריוני ההצלחה של דרישה, בדרך כלל הדרישה אינה ניתנת לאימות כפי שהיא כתובה.
הזרימה הרגילה:
- ניתוח דרישות: מגדירים Verification Method, Level ו-Success Criteria לכל דרישה.
- תכן: כותבים מקרי בדיקה ומקשרים אותם לדרישות שהם מאמתים. רשומות ניתוח, הדגמה ובחינה הן גם מקרי בדיקה.
- אינטגרציה ובדיקות: מריצים את מקרי הבדיקה ומתעדים תוצאות וראיות. פותחים Issues על כישלונות. שומרים מחזור בדיקה לכל מערכה.
- סקירות וקבלה: מדווחים על הכיסוי עם ה-RVTM.
תכנון אימות לכל דרישה
נותנים לכל דרישה שיטה, רמה וקריטריוני הצלחה. עושים זאת בכרטיס הכיסוי של מרכז הבדיקות.
- יש לפתוח את אימות ← מרכז הבדיקות.
- יש לגלול אל כיסוי אימות.
מוצגת כל דרישה שעדיין לא אומתה.
- בשורה, לוחצים על כפתורי השיטה כדי להפעיל או לכבות את השיטות: A (Analysis), D (Demonstration), I (Inspection), T (Test).
הדרישה עוברת מלא אומת למתוכנן בלבד.
- יש לבחור את הרמה ברמה…: Component, Subsystem או System.
- יש ללחוץ על + קריטריונים.
- יש להקליד את התוצאה המדידה וללחוץ על שמירה.
על הכפתור כתוב עכשיו קריטריונים ✓.
אפשר לערוך את המאפיינים האלה גם בחלונית המאפיינים של כל דרישה.
יצירת חבילות בדיקות ומקרי בדיקה
- בכותרת הדף, יש ללחוץ על + חדש ▾ ← חבילת בדיקות….
- יש להזין מספר (לדוגמה
TS-3), שם ותיאור. - יש ללחוץ על יצירה.
מוצג כרטיס חבילה חדש.
- בכרטיס החבילה, יש ללחוץ על + Test Case.
- ביצירת פריט, יש לתת שם למקרה הבדיקה.
מקרה הבדיקה נוסף לחבילה עם הסטטוס Not Run.
- בשורת מקרה הבדיקה, יש ללחוץ על + בעמודה verifies.
- יש לבחור את הדרישות שמקרה הבדיקה מאמת.
- יש להקליד את התוצאה הצפויה בשורה.
- כותבים את הנוהל בתיאור של מקרה הבדיקה, בחלונית המאפיינים או בתצוגת הפריט.
כתיבת נוהל שלב אחר שלב
שלבים הם אופציונליים. מקרה בדיקה בלי שלבים מורץ כיחידה אחת.
- בשורת מקרה הבדיקה, יש ללחוץ על + שלבים.
- יש ללחוץ על + הוספת צעד עבור כל שלב.
- יש למלא Action והתוצאה הצפויה לכל שלב.
- משנים סדר עם ↑, ומסירים שלב עם ×.
- יש ללחוץ על החלה.
על הכפתור כתוב עכשיו Steps (N).
דרכים אחרות ליצור מקרה בדיקה
- מכרטיס הכיסוי: בכיסוי אימות, לוחצים על + Test Case בשורת דרישה. הפעולה יוצרת את Verify <requirement name>, שכבר מקושר לדרישה, תחת «מקרי בדיקה ללא חבילה».
- עם AI: בוחרים דרישה במסמך או בתצוגת הפריט שלה. בוחרים ✦ AI ▾ ← יצירת מקרה בדיקה…. ה-AI מנסח את השם, שלבים מסודרים, ההכנה, התוצאה הצפויה והשיטה. בודקים את הטיוטה ב-Review Test Case — <requirement>, ואז לוחצים על יצירת מקרה בדיקה. ראו AI.
הרצת בדיקות ותיעוד תוצאות
מצב ההרצה מוביל דרך הבדיקות אחת אחת ומתעד כל תוצאה עם הראיה שלה.
- אופציונלי: כדי להריץ רק חלק מהבדיקות, לוחצים על מסנן סטטוס כמו Not Run (12). מורצים רק מקרי בדיקה עלים עם הסטטוס הזה.
- בכותרת הדף, יש ללחוץ על הרצת החבילה.
תיבת הדו-שיח הרצת החבילה נפתחת על הבדיקה הראשונה שהיא Not Run.
- ממלאים פעם אחת את שדות ההפעלה: בודק (ברירת המחדל היא השם של המשתמש), תצורה / גרסת בנייה ופריט הבדיקה. בקו מוצרים שמוצג ככל התצורות, קודם בוחרים רישום תוצאות עבור: התצורה שעליה הבדיקה רצה, או No configuration. ✔ הצלחה, ✘ כישלון וחסום ממתינים עד שבוחרים (קווי מוצרים).
- יש לקרוא את הנוהל, ה-Set Up, ה-Steps והתוצאה הצפויה של הבדיקה.
- יש לבצע את הבדיקה. לכל שלב, ממלאים את הערך בפועל ובוחרים הצלחה/כישלון.
- יש לתאר את תוצאה בפועל.
- יש לבדוק את תאריך ושעה.
- יש ללחוץ על צירוף ראיה… כדי להוסיף יומן, קובץ נתונים או תמונה.
- יש ללחוץ על ✔ הצלחה, ✘ כישלון או חסום.
תיבת הדו-שיח עוברת לבדיקה הבאה. כדי לעבור בלי לתעד, לוחצים על דילוג. כדי לחזור, לוחצים על ‹ הקודם.
- אחרי ✘ כישלון, יש ללחוץ על + יצירת סוגיה, ואז על הבא ›.
תיבת הדו-שיח מציגה תועד. אפשר ליצור Issue כדי לעקוב אחרי הכישלון; הוא מקושר למקרה הבדיקה הזה ולדרישות שהוא מאמת.
- חוזרים על צעדים 4 עד 10 לכל בדיקה.
בסוף, ההרצה הושלמה מציג סרגל סטטוס עם הספירות. סקירה מההתחלה חוזר לבדיקה הראשונה.
אפשר לבטל כל תוצאה מתועדת בביטול פעולה אחד. היא עושה את כל אלה:
- מעדכנת את ה-Status, ה-Actual Result, ה-Tested By, ה-Test Date, ה-Configuration, ה-Test Article וה-Test Evidence של מקרה הבדיקה
- שומרת את תוצאות השלבים
- מוסיפה רשומה ליומן ההרצות של הבדיקה
כדי לתעד תוצאה בלי מצב הרצה, לוחצים על הסטטוס בשורת מקרה בדיקה (לדוגמה Not Run) ובוחרים את החדש, ואז לוחצים על הטקסט של תוצאה בפועל ומקלידים את התוצאה. גם Enter או F2 על ערך במיקוד פותחים אותו; Escape משאיר אותו ללא שינוי.
כדי להריץ בדיקה שוב, לוחצים על ↻ הרצה חוזרת בשורה שלה (מוצג אחרי שלבדיקה יש תוצאה). תיבת הדו-שיח של ההרצה נפתחת על הבדיקה הזו בלבד, בלי להחזיר אותה ל-Not Run; התוצאה החדשה נוספת ליומן ההרצות שלה לצד ההרצות הקודמות.
ייבוא תוצאות ממערכת בדיקות אחרת
כשבדיקות רצות במקום אחר, כמו מתקן בדיקות אוטומטי או צנרת CI, מייבאים את התוצאות שלהן במקום להקליד אותן. Holarch קורא דוחות JUnit XML (שרוב מריצי הבדיקות ומערכות ה-CI כותבים), קובצי CSV וחוברות עבודה של Excel (.xlsx).
- בכותרת הדף, יש ללחוץ על ייבוא תוצאות….
- יש ללחוץ על בחירת קובץ… ולבחור את קובץ התוצאות.
- יש לבחור אילו מקרי בדיקה להתאים: התאמת מקרי בדיקה ב- (כולם, או חבילה אחת) והתאמה לפי (Number, then name, Number, Name או Global ID).
- לקובץ CSV או Excel, יש לבדוק את העמודות ש-Holarch זיהה מהכותרת: עמודת מקרה הבדיקה ועמודת הסטטוס הן חובה; העמודות תוצאה בפועל, תאריך, בודק, תצורה ופריט הבדיקה הן אופציונליות.
- אופציונלי: למלא נבדק על ידי, תאריך הבדיקה, תצורה / גרסת בנייה ופריט הבדיקה עבור מה שחסר בקובץ.
- יש לבדוק את התצוגה המקדימה: כל מקרה בדיקה שהותאם עם שינוי הסטטוס שלו, והשורות שלא תואמות לאף מקרה בדיקה, תואמות לכמה מקרי בדיקה או שדולגו.
- יש ללחוץ על Record N Results.
כל התוצאות מתועדות, וביטול פעולה אחד מחזיר הכול לאחור. כל אחת מעדכנת את ה-Status, ה-Tested By, ה-Test Date, ה-Configuration וה-Test Article של מקרה הבדיקה, ומוסיפה ליומן ההרצות שלו רשומה שמציינת את הקובץ. לא נוצר דבר.
- מילות סטטוס: pass, passed, ok ו-success מתעדות Passed; fail, failed, failure ו-error מתעדות Failed; blocked, in progress ו-not run מתעדות את הסטטוסים האלה. בדיקות שדולגו (JUnit
<skipped>, או skipped בעמודת הסטטוס) נשארות ללא שינוי. - תוצאה בפועל: הודעת כישלון של JUnit, או העמודה Actual Result, הופכת לתוצאה בפועל. בלי אחת מהן, התוצאה בפועל נשארת כפי שהייתה.
- מקרי בדיקה שחוזרים: כשקובץ מציין מקרה בדיקה פעמיים, השורה המאוחרת קובעת; המוקדמת מוצגת כמדולגת.
- מקרי בדיקה הורים: מקרה בדיקה עם מקרי בדיקה צאצאים לא מתועד; הסטטוס שלו מסוכם מהצאצאים שלו.
כדי לתעד תוצאות מצנרת CI בלי לפתוח את Holarch, שולחים אותן ל-REST API (POST …/test-results), או נותנים ללקוח AI להציע אותן עם כלי ה-MCP record_test_results. שניהם מתעדים תוצאה באותה דרך כמו ייבוא תוצאות…, כולל רשומה ביומן ההרצות (תוצאות בדיקה).
שמירת מחזור בדיקה
שומרים מחזור כשמערכת בדיקות מסתיימת.
- בכרטיס החבילה, יש ללחוץ על התחלת מחזור חדש… (או ⋯ ← התחלת מחזור חדש…).
- בהתחלת מחזור בדיקה חדש, יש לתת שם למחזור (ברירת מחדל Test Cycle N).
- יש לבדוק את תצורה / גרסת בנייה ואת פריט הבדיקה. שניהם מתחילים עם הערך שתועד הכי הרבה פעמים בהרצה; הם מודפסים בדוח הבדיקה של המחזור.
- יש ללחוץ על אחד מאלה:
- תיעוד והתחלה מחדש: שומר את התוצאות, ואז מגדיר כל Status בחבילה ל-Not Run ומנקה את התוצאות בפועל.
- תיעוד בלבד: שומר את התוצאות ומשאיר אותן על מקרי הבדיקה.
מחזור שומר לכל מקרה בדיקה את הסטטוס, התוצאה בפועל, הבודק, תאריך הבדיקה, התצורה, פריט הבדיקה, שם קובץ הראיה ותוצאות השלבים.
כדי להציג, להשוות, לשחזר או למחוק מחזורים מאוחר יותר, לוחצים על ⋯ ← Test Cycles… (N) בכרטיס החבילה. לתוצר למסירה, לוחצים על ⋯ ← Test Report…: הוא כותב את דוח הבדיקה של המחזור כ-Word, Excel, CSV או דף אינטרנט (ראו הפקת מסמכים).
דיווח על כיסוי
- יש לפתוח את אימות ← RVTM.
הכרטיס הראשון מציג verified / total עם סרגל התקדמות. הכרטיסים האחרים סופרים Failed, Not Run, Planned-only ו-Unverified.
עמודות המספר והדרישה נשארות בתצוגה כשטבלה רחבה נגללת הצידה. כששבב סטטוס מקוצר כדי להיכנס (בחלק מהשפות), הצבעה עליו מציגה את הטקסט המלא.
- אופציונלי: לחיצה על כרטיס מציגה רק את הדרישות האלה.
- יש ללחוץ על ייצוא ▾.
- יש לבחור Excel (.xlsx), CSV או Word (.docx).
דוגמה מעשית: הדגמת CubeSat EO-1
יוצרים את ההדגמה עם ניהול פרויקטים ← קובצי פרויקט ▾ ← פרויקט הדגמה חדש, ואז:
- יש לפתוח את אימות ← RVTM.
בכרטיס הראשון כתוב 11 / 32 אומת (עבר). באחרים כתוב 3 Failed, 12 Not Run, 3 Planned-only ו-3 Unverified.
- יש למצוא את 1.6 Revisit Time.
Own הוא Planned-only: השיטה היא Analysis, אבל אין לה בדיקה משלה. Status הוא Not Run. הסטטוס מסוכם מהצאצאים שלה:
- 1.6.1 Ground Track Repeat היא Passed דרך TC-13.
- 1.6.2 Off-Nadir Imaging מאומתת על ידי TC-14, שהוא Not Run.
הצאצא הפחות מכוסה הוא Not Run, שמתקדם יותר מ-Planned-only.
- יש ללחוץ על הכרטיס Failed.
2.1 Pointing Accuracy ו-2.2 Pointing Stability נכשלות דרך TC-04 Pointing Accuracy Test. 4.3 נכשלת דרך TC-09 Safe Mode Entry Test.
- יש לפתוח את אימות ← מרכז הבדיקות.
בכרטיסים כתוב 22 מקרי בדיקה ב-3 חבילות. ב-TS-1 Spacecraft Qualification Tests, השורה של TC-04 מציגה J. Alvarez · 2026-10-02 10:15 · 📎 tc04-pointing-errors.csv ו-Issue: Test failure: Pointing Accuracy Test.
- בשורה של TC-04, יש ללחוץ על Steps (3).
שלב 3 נכשל עם 0.14 degrees on targets 7, 12 and 18.
- ב-TS-1, יש ללחוץ על ⋯ ← Test Cycles… (2).
- יש להשוות Flatsat Cycle 1 ← Flatsat Cycle 2.
TC-03 ו-TC-06 השתנו מ-Not Run ל-Passed. שורות שהשתנו מודגשות.
עכשיו מריצים שוב את TC-09 אחרי התיקון של ה-watchdog:
- יש ללחוץ על המסנן Failed (2), ואז על הרצת החבילה.
ההרצה נפתחת על TC-04.
- יש ללחוץ על דילוג כדי להגיע ל-TC-09.
- יש להזין Flight software 2.3.2 כתצורה / גרסת בנייה.
- יש להקליד Safe mode in 8 seconds כתוצאה בפועל.
- יש ללחוץ על ✔ הצלחה.
- יש לפתוח שוב את ה-RVTM.
4.3 היא עכשיו Passed, ובכרטיס הראשון כתוב 12 / 32.
לבסוף, מתכננים דרישה שלא אומתה:
- בכיסוי אימות, יש למצוא את 2.5 Safe Mode Recovery (Unverified).
- יש ללחוץ על T, לבחור System ברמה…, ולהוסיף קריטריונים.
- יש ללחוץ על + Test Case כדי להתחיל את הבדיקה שלה.
עצות ושיטות עבודה טובות
- כותבים קריטריוני הצלחה כמספרים מדידים עם תנאים, כמו Range ≥ 25 km in 3 of 3 flights at 20 °C. לא חוזרים על הדרישה.
- מאמתים דרישות עלה ונותנים להורים להסתכם. בדיקת המודל Requirement.10 מסמנת דרישות עלה בלי מקרה בדיקה מאמת. ההורים מכוסים דרך הצאצאים שלהם.
- משתמשים במקרה בדיקה אחד לכל אירוע אימות, גם ל-Analysis, Inspection ו-Demonstration. כך ה-RVTM מציג ראיות לכל שיטה.
- מתעדים את התצורה בכל הרצה. כשתוצאה משתנה בין מחזורים, יומן ההרצות מראה איזו גרסת בנייה גרמה לכך.
- פותחים Issue על כל כישלון. בדיקת המודל TestCase.1 מסמנת מקרי בדיקה שנכשלו בלי Issue מקושר.
טעויות נפוצות
- ניסיון להגדיר Passed על מקרה בדיקה הורה. הורים מציגים את הסטטוס המסוכם של הצאצאים שלהם ואי אפשר להגדיר אותו. מתעדים תוצאות על העלים.
- קישור דרישה לבדיקה שלה עם traced to במקום verifies. הדרישה נשארת Planned-only או Unverified. משתמשים ב-+ בשורת מקרה הבדיקה, שיוצר verifies.
- מקרה בדיקה שלא מאמת דבר. הוא נספר במרכז הבדיקות אבל אף פעם לא ב-RVTM.
כיצד זה מתחבר לתכונות אחרות
- ניזון מ:
- מזין את:
- ה-RVTM והייצואים שלו
- Issues על כישלונות, שאפשר לתכנן כמשימות בלוח Kanban (ניהול פרויקט)
- בדיקות המודל (Requirement.10, TestCase.1)
- כרטיסי המצב בדף הבית והתג של האימות
- קווי בסיס וחבילות סקירה
- מטריצת עקיבות: פתיחה במטריצה בכרטיס הכיסוי פותח דרישות × מקרי בדיקה לפי verified by; ⋯ ← Open in ▸ מטריצת עקיבות של חבילה פותח את ההיררכיה שלה.
מרכז הבדיקות
כתובת: test-center; test-center?root=<id> מרחיב, גולל אל מקרה בדיקה או חבילה ובוחר אותם (משמש את Open in ▾ ← מרכז הבדיקות במקרה בדיקה).
כותרת הדף
| פקד | פעולה |
|---|---|
| ייצוא ▾ | RVTM (CSV), RVTM (Excel), RVTM (Word). |
| + חדש ▾ | חבילת בדיקות…, Test Case… (מקרה בדיקה שלא שויך). |
| ייבוא תוצאות… | מתעד תוצאות מקובץ JUnit XML, CSV או Excel על מקרי הבדיקה התואמים, אחרי תצוגה מקדימה. ראו ייבוא תוצאות ממערכת בדיקות אחרת. |
| הרצת החבילה | פותח את מצב ההרצה לכל מקרה בדיקה עלה (או רק לאלה שתואמים למסנן הסטטוס). מושבת כשאין מקרי בדיקה. |
כרטיסי מצב ומסננים
- מקרי בדיקה: מספר מקרי הבדיקה העלים, ומספר החבילות.
- בוצעו: אחוז ומספר העלים שאינם Not Run.
- עברו: אחוז ומספר העלים שעברו.
- נכשלו: מספר העלים שנכשלו, עם מספר החסומים.
מתחת לכרטיסים:
- סרגל סטטוס.
- המסננים All (N), לא הורץ, בתהליך, חסום, נכשל ועבר, כל אחד עם הספירה שלו. לחיצה נוספת על מסנן מנקה אותו.
- בצד שמאל, מיון החבילות: לפי מספר, לפי שם או לפי תאריך שינוי.
- חיפוש מקרי בדיקה: מתאים למספר, לשם או לתיאור. חבילה ששמה תואם מציגה את כל מקרי הבדיקה שלה.
כרטיס חבילה
הכותרת מציגה ▾/▸ (כיווץ), את הקישור לחבילה, את השבב Test Suite, את הסטטוס המסוכם, את מספר הבדיקות, את מספר המחזורים, סרגל סטטוס מוקטן ו:
- + Test Case — יצירת מקרה בדיקה בחבילה הזו.
- התחלת מחזור חדש… — תיעוד התוצאות כמחזור ואיפוס החבילה (ראו למעלה).
- ⋯ (אפשרויות החבילה). הפריטים עוקבים אחר תהליך הבדיקה: הרצה ותיעוד, דוח, פתיחה, ואז שכפול ומחיקה.
| פריט | פעולה |
|---|---|
| Run Cycle… | פותח את מצב ההרצה רק למקרי הבדיקה של החבילה הזו, החל מהראשון שהוא Not Run. כבוי כשאין בחבילה מקרי בדיקה. |
| התחלת מחזור חדש… | כמו הכפתור שבכרטיס: תיעוד התוצאות כמחזור, ואז איפוס החבילה. |
| Test Cycles… (N) | פותח את רשימת מחזורי הבדיקה. |
| Test Report… | פותח את Test Report על המחזור האחרון: בוחרים את המחזור (או את התוצאות הנוכחיות) ואת הפורמט (Word כברירת מחדל), ואז ייצוא. |
| מקרי בדיקה (Word)… | כותב מסמך Word של מקרי הבדיקה של החבילה. |
| ייצוא CSV | <suite>.csv: Number, Name (מוזח לפי עומק), Description, Set Up, Expected Result, Actual Result, Status, Status Roll-Up, Verifies. |
| ייצוא JSON | <suite>.json: החבילה, מחזורי הבדיקה שלה ועץ מקרי הבדיקה עם הדרישות המאומתות. |
| פתיחה כמסמך | פותח את החבילה כמסמך. |
| פתיחה ב- ▸ | תצוגת פריט (תצוגת הפריט של החבילה) או מטריצת עקיבות (המטריצה עם החבילה כשורש). |
| שכפול | מעתיק את החבילה ואת מקרי הבדיקה שלה (<suite> (Copy)) עם קישורי ה-verifies שלהם, כשהסטטוסים מאופסים ל-Not Run והתוצאות בפועל מנוקות. הודעה: Duplicated as <name>. |
| מחיקה… | מחיקת חבילת הבדיקות: מוחק את החבילה; מסמנים Also delete its N test case(s) כדי למחוק גם אותם. |
טבלת מקרי הבדיקה
| עמודה | תוכן |
|---|---|
| מספר | מספר מקרה הבדיקה. |
| מקרה בדיקה ונוהל | שם (קישור לתצוגת הפריט) ותיאור; ▾/▸ למקרי בדיקה צאצאים. |
| התוצאה הצפויה | הטקסט (עד שלוש שורות; לחיצה עליו עורכת אותו בתיבה), ו-+ שלבים / Steps (N). הורים מציגים —. |
| תוצאה בפועל | הטקסט (לחיצה עליו עורכת אותו); מתחתיו הבודק והתאריך של ההרצה האחרונה, עם התצורה והפריט בהצבעה וקישור 📎 לקובץ הראיה. בדיקה שנכשלה מציגה Issue: <issue> או + יצירת סוגיה. |
| מצב | גלולת סטטוס (Not Run, In Progress, Blocked, Failed, Passed); לחיצה עליה בוחרת סטטוס אחר. ↻ הרצה חוזרת לידה אחרי שלבדיקה יש תוצאה. הורים מציגים את הסטטוס המסוכם. |
| Verifies | הדרישות המאומתות, כל אחת עם × (הסרת verifies, מוצג בהצבעה על הדרישה), ו-+ (קישור דרישה שהבדיקה הזו מאמתת). |
לחיצה על שורה מחוץ לשדות שלה מציגה את מקרה הבדיקה בחלונית המאפיינים. חבילה ריקה: אין מקרי בדיקה בחבילה הזו. אפשר להוסיף אחד דרך + Test Case. אין התאמה: אין מקרי בדיקה שתואמים למסנן. יש לנקות את המסנן כדי לראות את כולם.
תיבת הדו-שיח «שלבי בדיקה»
כותרת: Test Steps — <test case>. עמודות הטבלה:
- #
- Action (מציין מיקום Do this)
- התוצאה הצפויה (Expect this)
- תוצאה בפועל (Observed)
- הצלחה/כישלון (—, Pass, Fail)
- ↑ (Move up) ו-× (Remove step)
מתחת לטבלה: + הוספת צעד, ביטול והחלה. שלבים ריקים מושמטים ב«החלה». כשאין שלבים תיבת הדו-שיח מציגה אין עדיין צעדים. מקרה בדיקה ללא צעדים מורץ כמכלול.
תיבת הדו-שיח «הרצת החבילה»
| חלק | תוכן |
|---|---|
| הפעלה | בודק (Your name), תצורה / גרסת בנייה (גרסת בנייה, גרסה או תצורה), פריט הבדיקה (מספר יחידה או מספר סידורי), Stage (Development, Qualification, Acceptance, Integration, Operational) ו-Event (לדוגמה Thermal vacuum 1). ממולאים מראש מההרצה האחרונה של הבדיקה הראשונה; Stage ו-Event נשמרים בכל בדיקה שמתעדים. |
| התקדמות | Test N of M, שם החבילה וסרגל התקדמות. |
| Heading | מקרה הבדיקה, הסטטוס הנוכחי, ו-run N times, last <date>. |
| גוף | נוהל, Set Up, Steps (Action, Expected, Actual, Pass/Fail), התוצאה הצפויה, תוצאה בפועל, תאריך ושעה, ראיה (צירוף ראיה… ושמות הקבצים, או Current: <file> / No file). אפשר לבחור כמה קבצים: הראשון הופך לראיה של הבדיקה, והאחרים נוספים לרשימת הראיות שלה. |
| כפתורים | ‹ הקודם, דילוג, חסום, ✘ כישלון, ✔ הצלחה; סגירה בתחתית. |
מקרי בדיקה (Word)
- שם הקובץ: ברירת מחדל <suite> Test Cases.
- בחירת מאפיינים: Number, Description, Set Up, Expected Result, Actual Result, Status, Status Roll-Up, Verifies, ובנוסף כל מאפיין אחר של Test Case (Tested By, Test Date, Configuration, Test Article, Test Evidence ומאפיינים מותאמים). Number, Description, Expected Result, Actual Result ו-Status מסומנים כברירת מחדל.
- הורדה: כותב סעיף כותרת (מספר מקרי הבדיקה ותאריך היצירה) וסעיף אחד לכל מקרה בדיקה.
תיבת הדו-שיח «מחזורי בדיקה»
כותרת: Test Cycles — <suite>.
- טבלת המחזורים: Test Cycle, Saved ו-Results (סרגל סטטוס מוקטן ו-N/M passed), עם View, Report… (דוח הבדיקה של המחזור), Revert ו-Delete בכל שורה.
- Revert שואל Write the statuses and actual results saved in "<name>" back to the test cases?
- השוואה: שני בוררים (כל מחזור או תוצאות נוכחיות) וטבלה של Test Case, Before ו-After. שורות שהשתנו מודגשות.
- בתחתית: התחלת מחזור חדש… וסגירה.
כשאין מחזורים תיבת הדו-שיח מציגה אין עדיין מחזורי בדיקה. «התחלת מחזור חדש…» מתעד את התוצאות הנוכחיות ומאפס את החבילה.
כיסוי אימות
הכרטיס האחרון בדף. משתמשים בו כדי לתכנן אימות ולמצוא דרישות שעדיין צריכות בדיקות.
- כותרת: N of M requirements verified by a passing test (P%), עם פתיחה במטריצה.
- סרגל סטטוס ומסננים: Not verified (N) (ברירת המחדל), All (N) ומסנן אחד לכל סטטוס.
- הערה: אומת = מקרה בדיקה מאמת עבר. דרישת אב מאומתת כשיש לה בדיקה עוברת משלה או כשכל דרישות הצאצא שלה מאומתות. לחצני השיטה: Analysis, Demonstration, Inspection, Test.
כל שורה מציגה, מימין לשמאל:
- גלולת הסטטוס (הצבעה עליה מציגה את הסטטוס העצמי כשהוא שונה)
- הקישור לדרישה ומספר הבדיקות
- כפתורי השיטה A D I T
- רמה…
- + קריטריונים, או קריטריונים ✓ אחרי שהוגדרו קריטריונים
- + Test Case
מוצגות עד 300 שורות, ואז …and N more. כשכולן מאומתות, הכרטיס מציג כל דרישה מאומתת בבדיקה שעוברת.
קובצי ראיה
Evidence (n) מתחת למקרה בדיקה פותח את רשימת הראיות שלו. שומרים כל יומן, תמונה וגיליון נתונים מהרצה יחד עם הבדיקה.
- הוספת קבצים… מצרף קובץ אחד או יותר, וביטול פעולה אחד מחזיר הכול לאחור.
- כל קובץ הוא Artifact עם התווית Verification Evidence, שמחזיק את הקובץ, ושמקרה הבדיקה references.
- הורדה שומר קובץ; הסרה מוחק את ה-Artifact שלו.
מתחת לסטטוס, מקרה בדיקה מציג את ה-Verification Stage וה-Verification Event שלו כשהם מוגדרים.
יצירת Issue
+ יצירת סוגיה מופיע בבדיקה שנכשלה, בשורה ובמצב ההרצה. הוא יוצר Issue:
- בשם Test failure: <test case>, עם הסטטוס Open
- עם תיאור שמכיל את התוצאה הצפויה ואת התוצאה בפועל
- מקושר למקרה הבדיקה (causes, או related to) ולכל דרישה שהבדיקה מאמתת
ההודעה היא Created issue <name>.
כשהתוכנית הרשמית פעילה, בדיקה שנכשלה מציגה במקום זאת Disposition…. הוא מתעד אי-התאמה ובמקרה הצורך ויתור. ראו תוכנית רשמית.
RVTM
כתובת: rvtm, עם rvtm?status=<status> ו-?q=<text>.
כותרת הדף
| פקד | פעולה |
|---|---|
| ייצוא ▾ | Excel (.xlsx) (RVTM.xlsx), CSV (RVTM.csv) או Word (.docx) (Requirements Verification Traceability Matrix, סעיף אחד לכל דרישה עם הנוסח שלה). |
| מרכז הבדיקות | פותח את מרכז הבדיקות. |
שלושת הייצואים מכילים Requirement Number, Requirement, Verification Method, Verification Level, Success Criteria, Verified By (כל מקרה בדיקה עם הסטטוס המסוכם שלו), Own Status, Status (מסוכם), Verification Stage ו-Verification Event. כשהתוכנית הרשמית פעילה הם מוסיפים Deviations and Waivers ו-Closure.
כרטיסים
אומת (עבר) מציג verified / total עם סרגל התקדמות. Failed, Not Run, Planned-only ו-Unverified מציגים ספירות.
ה-RVTM מפרט את הדרישות של הפרויקט עצמו. דרישות במסמך עם התווית Customer Specification לא נכללות בשורות ובסכומים שלו; מטריצת התאימות מעריכה אותן, עם האימות של הדרישות שלכם שעונות עליהן.
לחיצה על כרטיס מסננת את הטבלה (מוצגים רק אלה. לחיצה להצגת הכול.). לחיצה על השבב Status: <status> × מנקה את הסינון.
טבלה
| עמודה | תוכן |
|---|---|
| # | מספר הדרישה. |
| דרישה | שם, עם קישור לתצוגת הפריט. ⚠ אחרי השם פירושו שאחד הקישורים של הדרישה צריך בדיקה: הדרישה השתנתה, או שהפריט שמעליה השתנה. |
| שיטה | שיטות אימות, או —. |
| רמה | רמת אימות, או —. |
| Verified by | מקרי הבדיקה המאמתים, או No test. ⚠ אחרי מקרה בדיקה פירושו שקישור האימות שלו צריך בדיקה; ה-tooltip מציג מה השתנה ומתי. |
| Stage | שלבי האימות של מקרי הבדיקה המאמתים, או —. |
| ראיה | מספר קובצי הראיה של מקרי הבדיקה ושל הדוחות שמאמתים את הדרישה ישירות. לחיצה עליו מוסיפה דוח, כמו ניתוח. |
| Own | סטטוס עצמי. |
| מצב | סטטוס מסוכם. |
| חריגה/ויתור | בתוכנית רשמית בלבד. חריגות וויתורים נגד הדרישה עם הסטטוס שלהם, או Disposition… לתוצאה שנכשלה. |
| Closure | בתוכנית רשמית בלבד. אישור סופי…, Closed עם שם ותאריך ו-Reopen, או Open. ראו תוכנית רשמית. |
RVTM | VCRM מחליף את הטבלה. ה-VCRM (מטריצת הפניות צולבות של אימות) היא תצוגת התכנון: העמודות I, A, D ו-T מסמנות את השיטות (inspection, analysis, demonstration, test), ואחריהן Level, Stage, Event, Verified by ו-Status.
סינון לפי מספר או שם מצמצם את השורות. לחיצה על שורה (או Enter) מציגה את הדרישה בחלונית המאפיינים.
הצבעה על ה-⚠ של דרישה מראה אילו פריטים השתנו מאז הבדיקה האחרונה של הקישורים שלה. לחיצה עליו פותחת את תיבת הדו-שיח Links to Review — <requirement>: כל קישור לבדיקה בכל אחד מקצות הדרישה, עם Diff וסימון כנבדק…, וקישורים פתוחים לבדיקה לרשימה המלאה (קישורים לבדיקה). הייצואים משמיטים את סימוני החשד: עמודות הסטטוס שלהם מכילות תוצאות אימות בלבד.
קיצורים
| מקש | היכן | פעולה |
|---|---|---|
| Enter / Space | שורה ב-RVTM | הצגת הדרישה בחלונית המאפיינים |
| ↑ / ↓ | RVTM | מעבר בין שורות |
| Esc | RVTM | ניקוי הבחירה |
| ⌘K / Ctrl+K | בכל מקום | חיפוש פעולות כמו ייצוא RVTM (Excel) |
הודעות
| הודעה | משמעות |
|---|---|
| נדרש שם או מספר | יצירת חבילה בלי אף אחד מהם. |
| אין מה להריץ: אין מקרי בדיקה תואמים. יש להוסיף מקרי בדיקה או לנקות את מסנן הסטטוס. | «הרצת החבילה» לא מצא מקרה בדיקה עלה שתואם למסנן. |
| מחזור הבדיקה נשמר / מחזור הבדיקה נשמר; הסטטוסים אופסו ל-Not Run | תיעוד בלבד / תיעוד והתחלה מחדש. |
| נוצר מקרה בדיקה <name> | + Test Case בכרטיס הכיסוי. |
| <file> (שם בלבד: מעל 10 MB) | קובץ הראיה גדול ממגבלת הקובץ הבודד (10 MB בתוכנית Free, שנספרים כ-10 × 1,048,576 בתים); רק השם שלו מתועד. |
| אין בפרויקט הזה דרישות. יש לכתוב או לייבא דרישות, ואז לקשר מקרי בדיקה עם “verified by”. | ה-RVTM ריק. |
| אין דרישה שתואמת לסינון. יש לנקות את הסינון כדי להציג את כל הדרישות. | המסנן של ה-RVTM מסתיר את כל השורות. |
| יש לסמן את התיבה כדי ליצור את מקרה הבדיקה הזה. | «יצירת מקרה בדיקה» מצא כתובת אינטרנט בטיוטת ה-AI; יש לאשר אותה לפני היצירה. |
מגבלות
- קובצי ראיות בדיקה: 10 MB (10,485,760 בתים) לקובץ בתוכנית Free; 25 MB (26,214,400 בתים) בתוכניות בתשלום. קבצים גדולים יותר נרשמים בשמם בלבד. הראיות נספרות באחסון של הפרויקט (ראו אחסון ומגבלות).
- כרטיס הכיסוי מציג את 300 הדרישות הראשונות של המסנן הנוכחי.
- במקרה הבדיקה נשמר קובץ ראיות אחד לכל מקרה בדיקה (האחרון); יומן ההרצות שומר את שם קובץ הראיות של כל הרצה.
קשור
- מדריך: מטריצת אימות דרישות (RVTM): עמודות, שיטות ודוגמה מעשית, השיטה שמאחורי ה-RVTM.
- ממשקים — דרישות ממשק ו-ICDs.
- תקציבים ו-TPMs — Measures שעוקבים אחר ביצועים מול ספים.
- ניהול פרויקטים — תכנון תיקונים לבדיקות שנכשלו.
- עזרה: הגדרת אימות, הרצת החבילה והפקת ה-RVTM, RVTM, מרכז הבדיקות, מטריצת עקיבות, בדיקות המודל, סימולציה ובדיקה מול דרישה.