الحدود المختبرة
ما حجم المشروع الذي يتعامل معه Holarch
أكبر المشاريع التي يُختبر بها Holarch، وذاكرة المتصفح وأوقات الفتح التي تحتاجها، واختبار الحمل على الخدمة المستضافة الذي يستند إليه حد العناصر في كل خطة.
أداء
قيست بمشاريع مولَّدة بلغتَي النمذجة كلتيهما؛ وأرقام المتصفح في Safari على Mac. ويسمّي كل جدول إصدار Holarch الذي قيس عليه.
- تطبيق سطح المكتب (Holarch مثبتًا على حاسوبك): اختُبر حتى 700,000 عنصر لكل مشروع في LML و400,000 في SysML v2 (ما بعد 250,000 عنصر).
- الخدمة المستضافة (app.holarch.app): حتى 50,000 عنصر لكل مشروع؛ اربط المشاريع للبرامج الأكبر عبر الروابط بين المشاريع وخريطة البرنامج والمكتبات (حدود الخطط).
- خادم Holarch ذاتي الاستضافة (Enterprise): اختُبر حتى 400,000 عنصر لكل مشروع، في LML وSysML v2. ويبقى المشروع دون 1 GB من ذاكرة الخادم الإضافية حتى نحو 330,000 عنصر LML وما بعد 400,000 عنصر SysML v2 (الخادم ذاتي الاستضافة بعد 250,000 عنصر).
الخدمة المستضافة: ذاكرة الخادم
ذاكرة الخادم التي يحتاجها المشروع وهو مفتوح، فوق ما يستخدمه الخادم من دونه، لكل 10,000 عنصر. اختُبرت حتى 50,000 عنصر لكل مشروع، وهو حد الخدمة المستضافة.
| اللغة | لكل 10,000 عنصر | أكبر مشروع مختبَر |
|---|---|---|
| LML | نحو 17 MB | 50,000 عنصر |
| SysML v2 | 4–8 MB | 50,000 عنصر |
- الأرقام هي الذاكرة الإضافية لمشروع مفتوح، لا ذاكرة الخادم كله. والأساس، أي خادم بدأ للتو بعد تسجيل دخول واحد، نحو 130 MB.
- الذاكرة التي تحتاجها علامة تبويب المشروع في متصفحك مبيّنة أدناه (ذاكرة المتصفح).
ذاكرة المتصفح
تستخدم صفحة Holarch نحو 100 MB دون مشروع مفتوح. وهذا هو الأساس. والأرقام أدناه هي الذاكرة التي تحتاجها علامة تبويب المتصفح فوق الأساس لكل 10,000 عنصر في المشروع، عند أعلى نقطة أثناء فتح المشروع.
| اللغة | الخدمة المستضافة | مثبَّت على حاسوبك |
|---|---|---|
| LML | 40–60 MB | 50–70 MB |
| SysML v2 | 100–155 MB | 70–80 MB |
- يختلف الرقم باختلاف حجم المشروع. خطّط على أساس الرقم الأعلى.
- يضيف التعديل القليل: بعد 100 تعديل، لم تستخدم علامة تبويب مشروع LML ذاكرة أكثر مما قبلها. وأثناء حفظ التعديلات، قد تحتاج لفترة وجيزة إلى نحو 0.6 GB إضافية.
- الذاكرة التي يجب التخطيط لها لكل حجم مشروع: متطلبات النظام.
أوقات الفتح
من النقرة حتى تصبح الصفحة جاهزة للاستخدام. ثم يُجري مشروع SysML v2 أول فحص للنموذج في الخلفية بينما تعمل؛ والرقم الثاني هو الوقت حتى ينتهي ذلك الفحص.
| العناصر | LML، مستضاف | LML، مثبَّت | SysML v2، مستضاف | SysML v2، مثبَّت |
|---|---|---|---|---|
| 50,000 | نحو 1 s | نحو 1 s | نحو 2 s؛ الفحص 4 s | لم يُقَس |
| 100,000 | — | نحو 1 s | — | نحو 2 s؛ الفحص 5 s |
| 150,000 | — | لم يُقَس | — | لم يُقَس |
| 200,000 | — | نحو 2 s | — | لم يُقَس |
| 250,000 | — | لم يُقَس | — | نحو 6 s؛ الفحص 14 s |
- قيست الأوقات المستضافة مقابل خادم اختبار. ويضيف الاتصال البطيء بالشبكة وقت تنزيل المشروع.
- — : فوق حد الخدمة المستضافة البالغ 50,000 عنصر لكل مشروع.
- تأكيد التعديلات وعمل كثير من الأشخاص في آنٍ واحد على الخدمة المستضافة: راجع نتائج اختبار الحمل.
- سرعة محرك لغة SysML v2 وذاكرته وحده: راجع نتائج اختبار Language Engine.
ما بعد 250,000 عنصر، مثبَّتًا على حاسوبك
فتح Holarch 2.30.0 في Safari مشاريع مولَّدة من 400,000 و700,000 عنصر LML ونموذج SysML v2 من 400,000 عنصر، وأجرى تعديلًا واحدًا، وحفظه، وأغلق المشروع. ولم يفشل شيء.
| المشروع | الفتح | اكتمال العمل في الخلفية | ذاكرة المتصفح لكل 10,000 عنصر، أثناء الفتح |
|---|---|---|---|
| LML، 400,000 عنصر | نحو 4 s | 16 s | نحو 105 MB |
| LML، 700,000 عنصر | نحو 6 s | 21 s | نحو 130 MB |
| SysML v2، 400,000 عنصر | نحو 3 s | 19 s | نحو 85 MB |
- عند هذه الأحجام تحدد ذاكرة حاسوبك الحد.
- قد تتوقف الصفحة عن الاستجابة بضع ثوانٍ أثناء فتح مشروع LML بهذا الحجم وأثناء حفظ أول تعديل عليه.
الخادم ذاتي الاستضافة بعد 250,000 عنصر
اختُبر خادم Holarch يعمل بالإصدار Holarch 2.30.0 بمشاريع مولَّدة من 250,000 و400,000 عنصر LML، بثلاث علاقات لكل عنصر، ونموذج SysML v2 من 400,000 عنصر. ومرّ كل مشروع بعبء العمل هذا:
- حفظ المشروع كله على الخادم، وفتحه، ثم فتحه مرة أخرى.
- يعدّل المالك من 10 صفحات في آنٍ واحد لمدة 60 ثانية، وكل صفحة تُجري تعديلًا واحدًا في الثانية وتعيد فتح المشروع كل 15 ثانية.
- ضغط سجل التغييرات.
- حذف المشروع.
نجحت كل المراحل: لا أخطاء في الخادم ولا تعديلات مرفوضة.
| المشروع | لكل 10,000 عنصر، أعلى مرحلة | دون 1 GB | تأكيد التعديل p95 |
|---|---|---|---|
| LML، 250,000 عنصر | نحو 31 MB | نعم | 30 ms |
| LML، 400,000 عنصر | نحو 30 MB | لا، بدءًا من نحو 330,000 عنصر | 60 ms |
| SysML v2، 400,000 عنصر | نحو 21 MB | نعم | 34 ms |
- هذه الأرقام هي ذاكرة الخادم الإضافية التي يحتاجها المشروع، فوق ما يستخدمه الخادم من دونه. وليست ذاكرة الخادم كله.
- يقتصر حفظ المشروع كله افتراضيًا على 192 MB من بيانات المشروع، أي نحو 340,000 عنصر LML أو 430,000 عنصر SysML v2. ويمكن للخادم ذاتي الاستضافة رفع الحد؛ وقد رفعته تشغيلات الـ 400,000 عنصر.
- هذه أحجام مختبَرة تحت عبء العمل هذا، وليست ضمانًا لكل نموذج. ولم تكن النصوص الطويلة والمخططات الكثيرة جزءًا من هذا الاختبار.
1.1.6 → 2.15.1
Holarch 1.1.6 هو أول إصدار قيس بهذه الاختبارات للمشاريع الكبيرة. وشُغّلت الاختبارات نفسها دون تغيير على 1.1.6 وعلى 2.15.1، بمشاريع LML المولَّدة نفسها، على الحاسوب نفسه وبحدود الخادم نفسها.
| المقياس | Holarch 1.1.6 | Holarch 2.15.1 |
|---|---|---|
| الذاكرة لكل 10,000 عنصر: الإنشاء، والفتح، و200 تعديل، وإصدار | 220–250 MB | 40–55 MB من 20,000 عنصر فأكثر (80–110 MB عند 5,000–10,000) |
| الشيء نفسه، مع كتابة إصدار أثناء تعديل المالك | نفدت الذاكرة عند 25,000 عنصر | 45–67 MB |
| الأساس: الخادم بعد تسجيل دخول واحد | نحو 125 MB | نحو 130 MB |
| كتابة إصدار لمشروع من 25,000 عنصر | 7.5 s | 0.4 s |
| أكبر مشروع مختبَر | 25,000 عنصر | 115,000 عنصر، أكبر ما يتسع له حفظ واحد بحجم 64 MB |
| الخطوة | العناصر | Holarch 1.1.6 | Holarch 2.15.1 |
|---|---|---|---|
| الرئيسية | 25,000 / 50,000 | 36 s / 149 s | 0.7 s / 1.6 s |
| صفحة فحوص النموذج | 25,000 / 50,000 | 66 s / 297 s | 0.4 s / 0.7 s |
| مصفوفة التتبع (المتطلبات × حالات الاختبار) | 10,000 | 47 s | 0.2 s |
| مصفوفة تتبع التحقق من المتطلبات | 10,000 | 31 s | 0.1 s |
| فتح مستند من 2,000 متطلب | 5,000 / 10,000 / 25,000 | 0.6 s / 0.6 s / 0.8 s | 0.5 s / 0.5 s / 0.5 s* |
| الحفظ بعد تعديل واحد | 5,000 / 10,000 / 25,000 / 50,000 | 0.2 s / 0.5 s / 30 s / 152 s | 0.15 s / 0.3 s / 0.8 s / 1.6 s* |
| فحص جودة 2,000 متطلب | 10,000 | 30 s | 3.2 s |
| أكبر مشروع مرّ بكل خطوة | — | 50,000 عنصر، مع توقف الصفحة عن الاستجابة أكثر من دقيقتين في كل مرة | 100,000 عنصر؛ الرئيسية 3.2 s، والمصفوفة 0.3 s |
- * قيست على 2.16.1، الذي جعل هاتين الخطوتين أسرع مما في 2.15.1. وقيست الأرقام الأخرى على 2.15.1.
- في 1.1.6 أوقفت مصفوفة التتبع الصفحة أكثر من دقيقتين عند 25,000 عنصر، لذا لم تُقَس هناك بأحجام أكبر. وفي 2.15.1 تُفتح في أقل من 0.3 s بكل حجم حتى 100,000 عنصر.
معيار النجاح
تُختبر الخدمة المستضافة تحت الحمل بعدة أشخاص يفتحون مشروعًا واحدًا ويعدّلونه في آنٍ واحد. وينجح حجم المشروع حين تستوفي الخدمة كل شرط في هذا السيناريو:
- ضغط الخادم للتو سجل تغييرات المشروع. وفتح المشروع في هذه الحالة هو الأعلى كلفة.
- يفتح 10 أشخاص المشروع في اللحظة نفسها.
- ثم يعدّله الأشخاص العشرة أنفسهم لمدة 60 ثانية، وكل منهم يُجري تعديلًا واحدًا في الثانية.
- تأكيد التعديل: يؤكد الخادم 95 % من التعديلات خلال 1.5 ثانية (p95 ≤ 1.5 s).
- لا إخفاقات: لا أخطاء في الخادم.
إعداد الاختبار
- برمجيات خادم الإنتاج، على إعداد اختبار أبطأ من الخدمة المستضافة، فالنتائج متحفظة.
- حدود الموارد وإعدادات الخدمة المستضافة.
- عملت قاعدة البيانات وتخزين الملفات على الحاسوب نفسه، لا عبر شبكة. وبدأ خادم جديد لكل تشغيل.
- مشاريع LML مولَّدة: 40 % متطلبات في المواصفات، و20 % وظائف، و15 % مكونات، و15 % حالات اختبار، و5 % مخاطر، والباقي مدخلات ومخرجات، بثلاث علاقات لكل عنصر.
النتائج
| العناصر | البيانات المرسلة لكل فتح | استغرقت 10 عمليات فتح | تأكيد التعديل p95 | النتيجة |
|---|---|---|---|---|
| 50,000 | 27.2 MB | 3.7 s | 1.49 s | نجاح |
| 50,000 (التشغيل الثاني) | 27.2 MB | 3.6 s | 1.08 s | نجاح |
- لم يحدث خطأ في الخادم في أي تشغيل.
- أُكِّد التعديل المعتاد (p50) في نحو 30 ms في كل تشغيل. وتنتظر التعديلات البطيئة خلف الاستجابات الكبيرة لعمليات الفتح المتزامنة.
حدود الخطط
| الخطة | العناصر لكل مشروع |
|---|---|
| Free / الأكاديمية | 1,000 (2,000 في مؤسسة صف دراسي نشطة) |
| Individual | 5,000 |
| Team | 50,000 |
- تتسع الخدمة المستضافة (app.holarch.app) لما يصل إلى 50,000 عنصر لكل مشروع في كل خطة؛ اربط المشاريع للبرامج الأكبر. واختُبر تطبيق سطح المكتب (Holarch مثبتًا على حاسوبك) حتى 700,000 عنصر لكل مشروع في LML و400,000 في SysML v2.
- يمكن أن يبلغ حفظ المشروع كله، مثل استيراد ملف مشروع، 192 MB على الأكثر من بيانات المشروع. وقد يبلغ المشروع ذو النصوص الطويلة هذا الحجم قبل حد العناصر.
- ما الذي يُحتسب عنصرًا: راجع الأسعار.
- ذاكرة الحاسوب التي يحتاجها مشروع بكل حجم في المتصفح: راجع متطلبات النظام.
رحلات الذهاب والإياب: ما تحتفظ به كل صيغة تبادل
صُدِّر كل نموذج بكل صيغة تنطبق عليه واستُورد مجددًا إلى مشروع جديد بالخيارات الافتراضية. ثم عُدّ كل عنصر من الأصل محفوظًا أو محوَّلًا أو مُسقطًا. قيست في Holarch 2.21.0، وهي نفسها في الخدمة المستضافة ومثبتًا على حاسوبك.
- محفوظ: وُجد مجددًا دون تغيير. يحتفظ العنصر بفئته واسمه ورقمه ووصفه وتسمياته؛ وتحتفظ العلاقة بنوعها وطرفيها وسماتها؛ وقيمة السمة أو طريقة العرض المحفوظة أو الوصف المنسَّق كما كان من قبل.
- محوَّل: وُجد مجددًا مع اختلاف، مثل Statement يعود Requirement، أو رقم أو تسمية مفقودة، أو سمة علاقة تعود بقيمتها الافتراضية.
- مُسقَط: غير موجود في المشروع الجديد، لأن الصيغة ليس فيها مكان له أو أُسقط أحد طرفيه.
| الصيغة | العناصر | العلاقات | قيم السمات | طرق العرض المحفوظة | المستندات | الأوصاف المنسَّقة |
|---|---|---|---|---|---|---|
| ملف مشروع Holarch (.json) | 407 / 0 / 0 | 915 / 0 / 0 | 979 / 0 / 0 | 83 / 0 / 0 | 3 / 0 / 0 | 5 / 0 / 0 |
| النسخة الاحتياطية وحزمة المشروع في Holarch (.holarch)* | 424 / 0 / 0 | 949 / 0 / 0 | 1,104 / 0 / 0 | 84 / 0 / 0 | 3 / 0 / 0 | 5 / 0 / 0 |
| UML/SysML XMI، مع بيانات Holarch | 317 / 0 / 90 | 631 / 0 / 284 | 672 / 0 / 307 | 0 / 3 / 80 | 0 / 0 / 3 | 5 / 0 / 0 |
| UML/SysML XMI، SysML عادي | 83 / 234 / 90 | 548 / 95 / 272 | 138 / 38 / 803 | 0 / 3 / 80 | 0 / 0 / 3 | 0 / 5 / 0 |
| Papyrus (.uml) | 317 / 0 / 90 | 631 / 0 / 284 | 672 / 0 / 307 | 0 / 3 / 80 | 0 / 0 / 3 | 5 / 0 / 0 |
| ReqIF | 407 / 0 / 0 | 879 / 21 / 15 | 979 / 0 / 0 | 0 / 0 / 83 | 3 / 0 / 0 | 5 / 0 / 0 |
| CSV، كل السمات والتسميات والعلاقات | 393 / 14 / 0 | 810 / 96 / 9 | 979 / 0 / 0 | 0 / 0 / 83 | 3 / 0 / 0 | 5 / 0 / 0 |
| نسخة SysML v2، ثم نسخة LML | 348 / 41 / 18 | 703 / 56 / 156 | 857 / 33 / 89 | 26 / 7 / 50 | 3 / 0 / 0 | 0 / 5 / 0 |
* قيست في Holarch 2.33.0 على العرض التوضيحي الحالي CubeSat EO-1 (424 عنصرًا، و949 علاقة، و1,104 قيم سمات، و84 طريقة عرض محفوظة، و3 مستندات، و5 أوصاف منسَّقة)؛ ولم يُحوَّل شيء ولم يُسقط شيء.
- ملف المشروع وحزمة المشروع: المشروع كله، بما فيه الرئيسية والمخططات البيانية ولوحة معلومات البرنامج وإعدادات المشروع.
- XMI وPapyrus مع بيانات Holarch: كل عنصر له عنصر مقابل في SysML يعود دون تغيير، بفئته في LML ورقمه وتسمياته وسماته. والعناصر الـ 90 المُسقطة هي مهام ومستندات ومخاطر ومشكلات وبنود جدول زمني ومخاطر على السلامة وعناصر أخرى ليس لها عنصر في SysML؛ ومعظم العلاقات المُسقطة متصلة بها. وتعود أيضًا سمات العلاقات مثل Trigger وAmount. ولا تدخل في XMI المخططات غير تدفقات مخططات الإجراءات.
- XMI دون بيانات Holarch: SysML 1.6 عادي. تعود عناصر Statement بوصفها Requirement، ولا توجد في الملف أرقام LML وتسمياتها وسماتها.
- ReqIF: يعود كل عنصر وكل قيمة سمة وكل تسمية وبنية المستند، وتحتفظ العلاقات بسماتها. ولا تُكتب تعددية التفكيك، لأن ReqIF يحمل التفكيك بوصفه بنية المستند. وتُتخطى إضافات المخطط الخاصة بالعرض التوضيحي (مثل Equation يحقق Requirement) في مشروع جديد، إذ له المخطط القياسي.
- CSV: يعود كل عنصر وكل قيمة سمة. والجدول ليس فيه مكان لسمات العلاقات، فتعود بقيمها الافتراضية، وتُستبعد التسميات غير الموجودة في المشروع الجديد.
- نسخة SysML v2 والعودة: تحويل مع تقرير، وليس صيغة تبادل. لا تعود أرقام Measure وAsset، ولا بعض التتبعات.
| الصيغة | Hybrid Car، 708 عناصر | Hybrid Car، بيانات Holarch | Battery Pack، 62 عنصرًا |
|---|---|---|---|
| ملف مشروع Holarch (.json) | 708 / 0 / 0 | كلها محفوظة | 62 / 0 / 0 |
| نص SysML v2 (.sysml) | 708 / 0 / 0 | ليست في الملف | 62 / 0 / 0 |
| SysML v2 JSON | 708 / 0 / 0، مع حفظ معرّفات العناصر | ليست في الملف | 62 / 0 / 0، مع حفظ معرّفات العناصر |
| نسخة LML، ثم نسخة SysML v2 | 22 / 184 / 502 | حُفظ 21 من 27 عنصرًا | 6 / 21 / 35 |
- نص SysML v2 وJSON: يعود كل عنصر في النموذج دون تغيير. ولا تنتقل حالة المتطلبات ونتائج التحقق والمخاطر والمستندات وسائر بيانات Holarch إلا في ملف المشروع.
- نسخة LML والعودة: يُعاد بناء النموذج من نسخة LML، فلا تعود التعاقبات والاستيرادات والبيانات الوصفية ومعظم التنميط.
كرّر الاختبار: أنشئ العرض التوضيحي من مشروع توضيحي جديد، وصدّره بإحدى الصيغ، واستورد الملف إلى مشروع جديد بالخيارات الافتراضية، وقارن المشروعين في قاعدة البيانات.
ما لم يُقَس
- مشاريع SysML v2، والمشاريع ذات المخططات الكثيرة، والأوصاف الطويلة بالنص المنسَّق.
- عدة مشاريع كبيرة قيد الاستخدام في اللحظة نفسها.
أسئلة عن نموذج بحجمك: تواصل معنا.