الحوار مع الإدارة
أسئلة لا قائمة تحقق
يفشل الحوار مع الإدارة حول الذكاء الاصطناعي (AI) بطريقتين مألوفتين. فإذا أُدير كقائمة تحقق، جمع أسماء: قائمة أنظمة، واسم مورّد، و«نعم» على كل سؤال عن الحوكمة، وتتكيّف الأجوبة من تلقاء نفسها لإنهاء الاجتماع. وإذا أُدير بمجاراة الحماس، تحوّل إلى إعجاب مشترك ببرنامج التحول. أما النسخة المثمرة فهي المقابلة المعتادة القائمة على الشك المهني، موجّهة إلى موضوع جديد: أسئلة مفتوحة، ثم تتبّع الجواب. اسأل عمّا يقرره النموذج، ثم اسأل عمّا حدث آخر مرة أخطأ فيها. اسأل من يملكه، ثم اسأل عمّا غيّره ذلك الشخص هذه السنة. اسأل عمّا ستفعله الإدارة لو تعطّل النموذج صباح الغد. السؤال اللاحق هو موضع المعلومة، لأن الجواب الأول هو ما تقوله المؤسسة لنفسها، والجواب الثاني هو ما تعرفه فعلًا.
- قائمة التحقق تجمع أسماء، والأجوبة تتكيّف من تلقاء نفسها لإنهاء الاجتماع
- أسئلة مفتوحة، ثم تتبّع الجواب، فالجواب الثاني هو ما تعرفه المنشأة فعلًا
- أرفق بكل سؤال عن القدرة سؤالًا عن الإخفاق: ماذا حدث آخر مرة أخطأ فيها
- سؤال التعطّل، أي ماذا ستفعلون غدًا من دونه، يكشف البديل بصدق
كيف يبدو الجواب الجيد
للأجوبة الجيدة ملمس مشترك، وهو ليس الطلاقة التقنية. مالك محدد بالاسم يتبيّن، حين تسأله، أنه يتخذ فعلًا قرارات بشأن النموذج. وحدود معروفة تُذكر دون طلب: أين يكون أداؤه سيئًا، وأي الحالات تُحال إلى شخص، وما الذي لم يُصمَّم أصلًا للتعامل معه. وبديل استُخدم مرة واحدة على الأقل، لا مجرد وصف له. وسجل تغييرات يطابق السنة التي مرّ عليها الفريق للتو. وللأجوبة السيئة ملمس مشترك أيضًا: حماس بلا ملكية، وفوائد بلا حدود، ومصطلحات حوكمة تُردَّد بسلاسة زائدة قليلًا، والعلامة التي تتكرر في هذه الدورة كلها: ثقة بمخرجات النموذج من أشخاص لا يستطيعون القول كيف سيعرفون لو أخطأت تلك المخرجات. لا أحد الملمسين استنتاج، ولا يحل أي منهما محل الاختبار. لكن كليهما دليل على البيئة، ومكان كليهما في تقييم المخاطر.
- مالك محدد، وحدود تُذكر دون طلب، وبديل استُخدم فعلًا، وسجل تغييرات يطابق السنة
- الحماس بلا ملكية والفوائد بلا حدود هما ملمس الجواب السيئ
- مصطلحات الحوكمة المردّدة بسلاسة زائدة دعوة إلى سؤال لاحق، لا إلى الاطمئنان
- العلامة المتكررة: ثقة بالمخرجات من أشخاص لا يستطيعون اكتشاف خطئها
من الحوار إلى الملف
الحوار الذي يغيّر التدقيق ولا يترك أثرًا لم يحدث، من وجهة نظر الملف. ما يدخل الملف: من سُئل، وما الذي سُئل عنه، وجوهر الأجوبة، بما فيها الأسئلة اللاحقة، لأن «أفادت الإدارة بأن النموذج مراقَب» و«لم تستطع الإدارة وصف المراقبة حين سُئلت» ورقتا عمل مختلفتان تصفان الاجتماع نفسه. والعلامات التحذيرية التي رُصدت، مربوطة بالمخاطر التي تُسهم في تقييمها بدلًا من أن تبقى أجواء عامة. والتأييد المخطط، لأن الإفادات عن الحوكمة تظل إفادات وتحتاج إلى الربط نفسه بالأدلة كأي إفادة أخرى. والأثر في الخطة: ما الذي يعامله الفريق الآن بشكل مختلف بسبب ما سمعه. والمعيار الذي يجب أن يستوفيه السجل هو المعيار المتكرر في هذه الوحدة: مراجع لم يكن في الغرفة يستطيع أن يرى ما عُرف، وما يعنيه، وما فعله التدقيق حياله.
- دوّن الأسئلة اللاحقة: الجواب المتعثر عن السؤال الثاني هو غالبًا النتيجة
- تدخل العلامات التحذيرية الملف مربوطة بالمخاطر، لا كأجواء يضطر المراجع إلى إعادة بنائها
- الإفادات عن الحوكمة تظل إفادات، فخطّط للتأييد
- الاختبار: مراجع لم يكن في الغرفة يرى ما عُرف وما فعله التدقيق حياله