ما يجب تسجيله وما لا يُسجَّل أبدًا
التتبّع يحتوي كل ما رآه النموذج
هذه هي الحقيقة التي تغيّر طريقة التعامل مع التتبّعات. السياق المجمّع يشمل المستندات المسترجعة، وبيانات المستخدمين، ونتائج الأدوات، وكل ما قرأه الوكيل، لذا فمخزن التتبّعات الكامل الدقة نسخة من شريحة كبيرة من بياناتك الحساسة في نظام جُهّز على الأرجح كبنية تحتية للمراقبة بضوابط وصول خاصة بالمراقبة. تعامل معه على هذا الأساس: اضبط الوصول إليه كما تضبط الوصول إلى البيانات الأصلية، وحدّد مدة الاحتفاظ عن قصد بدل وراثة قيمة افتراضية، وتأكد أن من يستطيعون قراءة تتبّعات التشغيل الفعلي مجموعة محددة. احجب البيانات وقت الكتابة لا وقت القراءة، لأن الحجب المطبّق عند الإخراج مرشّح يمكن لأحد تجاوزه، أما القيمة التي لم تُكتب قط فلا تُكشف قط. ويجب إزالة بيانات الاعتماد والرموز المميّزة والمفاتيح بنيويًا في طبقة التسجيل، لا بتذكّر عدم تسجيلها.
- التتبّع نسخة من كل ما رآه النموذج، بما في ذلك بيانات المستخدمين المسترجعة
- طبّق ضوابط الوصول ومدة الاحتفاظ الخاصة بالبيانات الأصلية، لا الخاصة بمخزن سجلات
- احجب وقت الكتابة؛ فالترشيح وقت القراءة ضابط يمكن تجاوزه
- أزل بيانات الاعتماد بنيويًا في طبقة التسجيل، لا بالانضباط الشخصي
الحقول التي تجعل تصحيح الأخطاء ممكنًا
في المقابل، سجّل ما يكفي للعمل، لأن التسجيل الناقص يُنتج حوادث لا يستطيع أحد تفسيرها وفريقًا يخمّن. المجموعة غير القابلة للتفاوض: معرّفات التشغيل والخطوات ممرّرة في كل مكان، والتعليمات المجمّعة لكل استدعاء للنموذج، ومعاملات الأدوات ونتائجها الخام، وإصدارات النموذج والتعليمات، وحالة الميزانية، وقرارات السياسات أو البوابات التي اتُّخذت وما أعادته، والحالة النهائية مع سببها. سجّل حالات السماح كما تسجّل حالات الرفض، لأن معرفة أن فحصًا ما جرى ونجح دليل، وغياب سجله ملتبس. اجعل الحقول منظّمة بدل إخراج نص سردي، كي يكون السجل قابلًا للاستعلام وتكون الأسئلة الإجمالية — أي أداة لها أعلى معدّل أخطاء في المعاملات هذا الأسبوع — قابلة للإجابة دون كتابة محلّل. واكتب بمستوى تفصيل يستطيع متابعته شخص لم يبنِ النظام، لأنه هو من سيقرؤه في الثالثة فجرًا.
- المعرّفات، والتعليمات المجمّعة، والمعاملات، والنتائج الخام، والإصدارات، والميزانية، والقرارات، والحالة النهائية
- سجّل حالات السماح كما تسجّل حالات الرفض — غياب السجل دليل ملتبس
- حقول منظّمة لا نص سردي، كي تكون الأسئلة الإجمالية قابلة للاستعلام
- اكتب لشخص لم يبنِ النظام ويقرؤه تحت الضغط
المقاييس التي يجب أن تستطيع الإجابة منها
التتبّعات تشرح التشغيل، والمقاييس تخبرك أي التشغيلات تستحق النظر، لذا احتفظ بمجموعة صغيرة تُستخدم فعلًا. معدّل النجاح حسب نوع المهمة. والتكلفة والخطوات لكل مهمة ناجحة، معروضة كتوزيع لا كمتوسط. وزمن الاستجابة في الأطراف القصوى. وأعداد الإخفاقات حسب فئة التصنيف، وهذا ما يحوّل الدرس السابق من مفردات إلى قائمة عمل. وحجم الاستدعاءات ومعدّل الأخطاء ومعدّل أخطاء المعاملات لكل أداة. ومعدّل تجاوز الميزانية ومعدّل التصعيد. ومعدّل إصابة التخزين المؤقت، لأنه يحرّك التكلفة وزمن الاستجابة معًا وينجرف بصمت. أبقِها صغيرة بما يكفي لتتسع المجموعة كلها في شاشة واحدة وينظر إليها أحد أسبوعيًا، لأن نمط الفشل هنا ليس قلة المقاييس، بل لوحة متابعة غنية إلى حد لا يقرؤها أحد، ولا يلاحظ أحد أن رقمًا فيها ظل خاطئًا لمدة شهر.
- معدّل النجاح حسب نوع المهمة؛ والتكلفة والخطوات لكل نجاح كتوزيعات لا كمتوسطات
- أعداد الإخفاقات حسب فئة التصنيف — هذا ما يجعل التصنيف عمليًا
- لكل أداة: الحجم ومعدّل الأخطاء ومعدّل أخطاء المعاملات؛ وتجاوزات الميزانية والتصعيدات
- أبقِ المجموعة صغيرة بما يكفي لتتسع في شاشة وتُقرأ أسبوعيًا