مقاييس الجودة ومؤشرات الأداء الرئيسية

لماذا يهم

من دون مؤشرات متفق عليها تعود نقاشات الجودة إلى الآراء أو إلى أسهل رقم يمكن جمعه، وهو غالباً عدد حالات الاختبار. فتموّل القيادة الاختبار بالحدس، وتعرف حال الجودة من شكاوى العملاء.

وللمختبِر الذي ينتقل إلى دور قيادي، فإن المؤشرات وتكلفة الجودة هي لغة اجتماعات الميزانية وقرارات الإصدار. فعبارة «كلّفتنا العيوب المتسرّبة في الربع الماضي ثلاثة إصلاحات عاجلة ونحو ⁦90⁩ ساعة دعم، وهذا ما نقترحه» أثقل وزناً من «نحتاج إلى مختبِرين أكثر»، بشرط أن يُتتبَّع كل رقم إلى بيانات حقيقية.

المقاييس ومؤشرات الأداء والمؤشرات الاستباقية والمتأخرة

يصنّف منهج ISTQB للمستوى التأسيسي المقاييس المستخدمة في الاختبار إلى مقاييس تقدم المشروع، وتقدم الاختبار، وجودة المنتج، والعيوب، والمخاطر، والتغطية، والتكلفة. وقد يتابع الفريق عشرات منها لتوجيه عمله اليومي.

أما مصطلح مؤشر الأداء الرئيسي فمصدره ممارسات الإدارة العامة، ويُستخدم بتساهل. والتعريف العملي المفيد: يصبح المقياس مؤشر أداء رئيسياً حين يتتبّع هدف عمل، ويكون له مالك مسمّى وقيمة مستهدفة وعتبات لها إجراءات متفق عليها، ويراجعه أصحاب القرار في موعد ثابت. فكل مؤشر أداء رئيسي مقياس، لكن معظم المقاييس لا ينبغي أن تصبح مؤشرات أداء رئيسية.

• المؤشر المتأخر (Lagging indicator): يقيس نتيجةً بعد وقوعها، مثل العيوب التي يجدها العملاء، وحوادث الإنتاج، ونسبة فشل التغييرات (Change fail rate)، أي نسبة عمليات النشر التي تتطلب تدخلاً فورياً كالتراجع أو الإصلاح العاجل. وهو جدير بالثقة، لكنه يصل بعد فوات الأوان على الإصدار الذي يصفه.
• المؤشر الاستباقي (Leading indicator): يتحرك مبكراً ويُتوقع أن يتنبأ بالنتيجة، مثل المخاطر العالية التي لها اختبارات ناجحة قبل الإصدار، والقصص التي رُوجعت معايير قبولها قبل التطوير، ونسبة الاختبارات المتذبذبة في حزمة الانحدار. تستطيع التصرف بناءً عليه في الوقت المناسب، لكن صلته بالنتيجة افتراض.
• اقرن بينهما: لكل مؤشر متأخر مؤشر استباقي أو اثنان يستطيع الفريق تحريكهما في هذا السبرنت، وكل مؤشر استباقي يُقارَن بمؤشره المتأخر عبر عدة إصدارات. فإذا ارتفعت تغطية المخاطر ولم تنخفض العيوب المتسرّبة، فالمؤشر الاستباقي يقيس الشيء الخطأ.

بناء مجموعة المؤشرات: من هدف العمل إلى المؤشرات

فكرتان من دليل مقاييس الاختبار تزداد أهميتهما في مؤشرات الأداء الرئيسية. ابدأ من القرار لا من لوحة المعلومات: فالرقم الذي لن يتصرف أحد بناءً عليه لا مكان له في المجموعة. وقانون غودهارت (Goodhart’s law): حين يصبح المقياس هدفاً يُحاسَب الناس عليه، يحسّنون الرقم بدلاً من الجودة؛ لذا فعدد حالات الاختبار أو عدد العيوب لكل مختبِر مؤشرات سيئة. أعطِ كل مؤشر تعريفاً مكتوباً ومقياساً مقابلاً (Counter-metric) يكشف التلاعب.

تجعل شجرة المؤشرات (KPI tree) السلسلة صريحة: هدف عمل واحد، وهدف الجودة الذي يدعمه، ومؤشر متأخر أو اثنان، والمؤشرات الاستباقية التي يستطيع الفريق تحريكها، والبيانات التي تغذيها. المثال لتطبيق توصيل طعام، وخطوط الأساس فيه مأخوذة من إصداراته الثلاثة الأخيرة.

• القيم المستهدفة والعتبات: القيمة المستهدفة (Target) هي ما تسعى إليه، ولكل نطاق من نطاقات العتبات (Thresholds) إجراء متفق عليه (الكهرماني (Amber): نقاش في المراجعة الأسبوعية؛ الأحمر (Red): يقرر مالك الإصدار صراحةً). اضبطها من خط الأساس (Baseline) الخاص بك، لا من الأرقام المرجعية لشركات أخرى.
• وتيرة المراجعة: المؤشرات الاستباقية في كل سبرنت مع الفريق، والمؤشرات المتأخرة شهرياً أو مع كل إصدار مع القيادة، والمجموعة نفسها كل ربع سنة: أوقف المؤشرات التي لم تعد تقود قرارات.
• التعريفات: اكتب ما يُعدّ وما يُستثنى، ومصدر البيانات، ونافذة العدّ (مثلاً ⁦30⁩ يوماً بعد الإصدار)، والمالك، حتى يعني رقم الربع القادم الشيء نفسه.

BUSINESS GOAL      More repeat orders
QUALITY OBJECTIVE  Customers rarely meet a checkout defect in production

LAGGING KPIs (per release, reviewed with leadership)
  K1  Customer-found Critical/Major checkout defects, 30-day window
      baseline 5 · target <= 2 · amber 3 · red >= 4
  K2  Change fail rate of the checkout service (DORA definition)
      baseline 14% · target <= 10% · amber > 10% and <= 15% · red > 15%

LEADING INDICATORS (per sprint, reviewed by the team)
  L1  High checkout risks covered by passing tests at release     -> K1
      target 100% · red < 95% (release owner decides explicitly)
  L2  Checkout stories with acceptance criteria reviewed by QA
      before development                                          -> K1
      target >= 90% · red < 75%
  L3  Flaky rate of the checkout regression suite                 -> K2
      target < 2% · red > 5%

DATA  CI test results · defect tracker · deployment log ·
      support tickets tagged "checkout"

جرّبها: مولّد الاختبار المبني على المخاطر جرّبها: حاسبة النسبة المئوية

لوحات القيادة والمقارنة العادلة بين الفرق

تجيب لوحة المعلومات المخصصة للقيادة عن ثلاثة أسئلة في أقل من دقيقة: هل نسير نحو الهدف؟ هل الوضع يتحسن أم يسوء؟ هل يلزم قرار؟ والمقارنة بين الفرق هي الموضع الذي تُحدث فيه المؤشرات أكبر ضرر: فاختلاف المنتجات ومستويات المخاطر وقواعد العدّ يُنتج أرقاماً مختلفة لأسباب لا علاقة لها بجودة اختبار الفريق.

• اعرض من ثلاثة إلى خمسة مؤشرات لكل هدف، ولكلٍّ منها اتجاهه خلال ست فترات، والقيمة المستهدفة، والنطاق بالكلمات (على المسار، معرّض للخطر، خارج المسار) لا باللون وحده، وتاريخ البيانات ومصدرها، وجملة واحدة تفسّرها.
• اختم بالطلب: القرار أو الدعم المطلوب وموعده.
• قارن بإنصاف: التعريفات المكتوبة نفسها ونافذة العدّ نفسها، والمعدلات بدلاً من الأعداد الخام (العيوب المتسرّبة لكل إصدار أو لكل ⁦100⁩ تغيير)، وقارن كل فريق بخط أساسه أولاً.
• استخدم المقارنات بين الفرق لاكتشاف الممارسات التي تستحق النقل، لا لترتيب الفرق أو الأشخاص أبداً؛ فحين يقرر الترتيب المكافآت تتوقف الأرقام عن الصدق.

جرّبها: تحويل Markdown إلى PDF

تكلفة الجودة: أربع فئات

يصنّف نموذج تكلفة الجودة، المأخوذ من إدارة الجودة العامة، ما تنفقه المؤسسة بسبب الجودة في أربع فئات: الأوليان تُنفقان لتحقيق الجودة، والأخيرتان ثمن العيوب. وتسمي بعض مراجع الاختبار فئة التقييم «الكشف» (Detection). والمراجعات تكشف عيوباً في نواتج العمل، لذا تعدّها معظم الفرق تقييماً، أما الاتفاق على معايير القبول قبل بناء أي شيء فيغيّر طريقة أداء العمل ويُعدّ وقاية. وأينما رسمت الحد، فارسمه بالطريقة نفسها كل ربع سنة.

• الوقاية (Prevention): التدريب على البرمجة الآمنة، والاتفاق على معايير القبول قبل التطوير، ومعايير كتابة الشيفرة، ومعالجة سبب جذري ظهر في اجتماع استعادي.
• التقييم (Appraisal): تصميم الاختبارات وتنفيذها، والمراجعات، والتحليل الساكن، وبيئات الاختبار وبياناته، وصيانة الاختبارات الآلية.
• الإخفاق الداخلي (Internal failure): العيوب المكتشفة قبل الإصدار، من التحقيق فيها وإصلاحها وإعادة اختبارها إلى البناء الذي ينتظر الإصلاح.
• الإخفاق الخارجي (External failure): العيوب التي يجدها العملاء، ومنها الإصلاحات العاجلة، ومكالمات الدعم، والمبالغ المستردة، ومعالجة الحوادث، والغرامات التعاقدية، والعملاء المفقودون الذين لا يظهرون في أي سجل.

إظهار القيمة بأمانة: الميزانيات وقرار الإطلاق

القيمة الكمية تأتي من سجلاتك: العيوب المكتشفة والمُصلَحة قبل الإصدار، والعيوب المعروفة الموثقة مع حلول بديلة، والتكلفة المقيسة للعيوب التي تسرّبت. والقيمة النوعية حقيقية لكن لا يمكن عدّها: الثقة في الإصدار، والسمعة، والامتثال للأنظمة والعقود. اعرض النوعين، وبيّن أيّهما الكمي وأيّهما النوعي.

أرقام العائد على الاستثمار (ROI) المخترعة مضلِّلة. فعبارة «حقق الاختبار عائداً بنسبة ⁦900%⁩» تضرب عادةً عدد العيوب المكتشفة في تكلفة يُفترض أن كلاً منها كان سيسببها في الإنتاج. ولا أحد يعرف أيّها كان سيصل إلى المستخدمين ولا كم كان سيكلّف، ورقم واحد يُطعن فيه يُسقط مصداقية التقرير كله. استخدم التكاليف المقيسة والافتراضات المعلنة والنطاقات.

• طلب الميزانية: ابدأ من الإخفاق الخارجي المقيس («استغرقت ثلاثة إصلاحات عاجلة لصفحة الدفع ومكالمات الدعم التي سببتها نحو ⁦120⁩ ساعة في الربع الماضي»)، واقترح استثماراً محدداً في الوقاية أو التقييم، وسمِّ المؤشرات التي يُفترض أن تتحرك، واتفق على موعد للمراجعة. واعرض الأثر توقعاً يُتحقق منه، لا عائداً موعوداً.
• قرار الإطلاق أو التأجيل (Go/No-Go): وازن بين تكلفة مزيد من التقييم الآن (أيام اختبار إضافية وإيرادات متأخرة) وتكلفة الإخفاق الخارجي المرجّحة للعيوب المفتوحة والمخاطر غير المختبرة. وقدّم لمالك الإصدار المخاطر المتبقية بكلمات واضحة والتقدير في صورة نطاق؛ فالقرار له.

أسئلة شائعة

المراجع

• Certified Tester Advanced Level Test Management (CTAL-TM) v3.0ISTQB · 2024منهج ISTQB المتقدم لإدارة الاختبار: التخطيط والتقدير، والاختبار المبني على المخاطر، والمتابعة، والمقاييس والتقارير.
• ISTQB Certified Tester Foundation Level (CTFL) v4.0ISTQB · 2023المنهج التأسيسي لاختبار البرمجيات: مستويات الاختبار وأنواعه وتقنيات تصميم الاختبارات وإدارة الاختبار والأدوات.
• DORA's software delivery performance metricsDORA (Google Cloud)مقاييس DORA للتسليم — زمن تنفيذ التغيير وتكرار النشر وزمن التعافي من النشر الفاشل ونسبة فشل التغييرات وما يتصل بها — مجمّعة حسب الإنتاجية وعدم الاستقرار.