مشكلة بطاقة التقييم
يعاود تقييم مخاطر الوكيل الظهور كممارسة شرائية. يحتاج السجل إلى رقم قابل للمقارنة؛ ويستطيع المورّد تقديم بطاقة تقييم دون كشف القياسات عن بُعد؛ وتجيب بطاقة التقييم عن سؤال هل هذا الوكيل معتمد بدلًا من هل هذا التشغيل آمن. هذا خطأ في التصنيف. التقييم المحسوب وقت النشر يصبح قديمًا في اللحظة التي يلمس فيها الوكيل أداة جديدة، أو وجهة جديدة، أو شكل مهمة جديد. الأثر المفيد ليس رقمًا في سجل. إنه إشارة محدَّثة باستمرار مستمدة من التشغيل نفسه.
هذه ليست حجة ضد الحوكمة. إنها حجة حول مكان وجود الدليل. تحتاج الحوكمة إلى مؤشر إلى إشارة حية، لا إلى بديل مجمّد عنها.
لماذا يستمر التقييم الثابت
الاستمرار بنيوي، لا غير عقلاني. فرق الشراء مسؤولة عن سجل. يحتاج السجل إلى صفوف، وتحتاج الصفوف إلى قيم يمكن مقارنتها عبر المورّدين والفرق ودورات المراجعة. تناسب بطاقة التقييم سير العمل هذا. أما الإشارة الحية فلا تناسبه، لأنها تتغير بين وقت قراءتها ووقت التصرف بناءً عليها.
هناك أيضًا عدم تماثل في ما يستطيع المورّدون تقديمه. يمكن إنتاج بطاقة تقييم دون كشف القياسات عن بُعد أو مخططات الأدوات أو بيانات التتبع. أما الإشارة وقت التشغيل فلا يمكن. طلب إحداها يعني طلب رؤية داخلية لكيفية تصرف الوكيل فعليًا، وهي محادثة تجارية مختلفة.
النتيجة أن السجل ينتهي إلى الإجابة عن سؤال يسهل الإجابة عنه ونادرًا ما يكون السؤال المهم. الاعتماد بوابة. والسلامة خاصية لمسار. الاثنان ليسا شيئًا واحدًا، والخلط بينهما ينتج إحساسًا زائفًا بالتغطية.
ما يكشفه التشغيل فعليًا
التشغيل سلسلة قرارات. تُظهر تسلسلات استدعاء الأدوات انحرافًا في النية لا يلتقطه أي استبيان قبل النشر. الوكيل الذي يبدأ بقراءة مستند وينتهي بالكتابة إلى نقطة نهاية خارجية قد غيّر ملف مخاطره الفعلي داخل مهمة واحدة، ولا يعكس أي تقييم ثابت هذا الانتقال.
عدة سمات قابلة للملاحظة ورخيصة التسجيل:
- تسلسلات استدعاء الأدوات. الترتيب والتجاور والتكرار. التركيبة الجديدة من أدوات لم تظهر معًا في تشغيلات سابقة إشارة مختلفة عن سلسلة مألوفة.
- وجهات الخروج. المضيفات والبروتوكولات والمسارات المرئية لأول مرة. الجِدة إشارة أقوى من قائمة الحظر، لأن قوائم الحظر متأخرة.
- مزيج الأفعال. نسبة العمليات الشبيهة بالقراءة إلى الشبيهة بالكتابة. التحول نحو الكتابة أو الحذف أو الإرسال يغيّر عواقب الخطأ.
- أنماط إعادة المحاولة. المحاولات المتكررة بعد فشل قد تشير إلى عطل عابر أو محاولة تصعيد. التمييز مهم.
- محاولات التصعيد. طلبات الحصول على صلاحيات أوسع، أو مهلات أطول، أو أدوات إضافية أثناء التشغيل.
قد يكون الوكيل نفسه منخفض المخاطر في مهمة وعالي المخاطر في أخرى خلال ساعة. مهمة تلخيص تقرأ مستندًا وتعيد نصًا ليست نفس كائن المخاطر كمهمة تقرأ مستندًا وتستعلم من قاعدة بيانات وتنشر إلى خدمة خارجية، حتى عندما ينفذهما الوكيل نفسه بالإعدادات نفسها.
تصميم إشارة قابل للعمل
هدف التصميم هو إشارة مستمدة من المسار، ومحدَّثة مع تطور المسار، ومرتبطة بالأفعال لا بالوكلاء.
استخلاص المخاطر من سمات المسار
قيّم التشغيل، لا الوكيل. تشمل السمات تركيبات الأدوات الجديدة، والوجهات المرئية لأول مرة، وتحولات مزيج الأفعال، ودفعات إعادة المحاولة، ومحاولات التصعيد. تسهم كل سمة في إشارة يُعاد حسابها مع وصول أحداث جديدة. الإشارة دالة على المسار المسلوك، لا خاصية للكيان الذي سلكه.
آلية ملموسة: حافظ على خط أساس لكل فئة أدوات لتسلسلات الاستدعاء والوجهات المرصودة. عندما ينتج تشغيل تركيبة لم تُرصد من قبل، أو وجهة لم تُرَ، أطلق حدث جِدة. جمّع أحداث الجِدة على نافذة منزلقة لإنتاج إشارة مخاطر حالية. النافذة مهمة لأن وجهة جديدة واحدة ضجيج؛ أما تجمع منها خلال فترة قصيرة فليس كذلك.
اربط العتبات بالأفعال، لا بالوكلاء
يجب أن تحكم العتبة الفعل، لا الفاعل. القراءة رخيصة السماح. أما الكتابة إلى وجهة مرئية لأول مرة فليست كذلك. والحذف ليس كذلك. وتصعيد الصلاحيات ليس كذلك. العتبات المعبَّر عنها على مستوى الفعل تسمح لتشغيل منخفض المخاطر بالمضي دون مراجعة، مع إجبار التوقف عند الخطوة المحددة التي تحمل العواقب.
هنا أيضًا ينتمي مدخل السجل. يجب أن يحتفظ السجل بمؤشر إلى الإشارة الحية وسياسة العتبات الحالية، لا بتقييم ثابت. يجيب المدخل عن أين الدليل وأي سياسة تنطبق، لا عن
السجل الذي يشير إلى إشارة حية يبقى مفيدًا مع تغير الإشارة. أما السجل الذي يحمل رقمًا مجمّدًا فيصبح مضللًا بمجرد أن يتباعد سلوك الوكيل عن الظروف التي حُسب فيها الرقم. المؤشر هو أثر الحوكمة. والإشارة هي الأثر التشغيلي.
المقايضات
التقييم المستمر ليس مجانيًا، والتكاليف حقيقية.
التخزين واهتمام المراجعة. تسجيل سمات المسار لكل تشغيل ينتج حجمًا من البيانات يجب تخزينه والاستعلام عنه ومراجعته. سياسات الاحتفاظ مهمة. لا يحتاج كل حدث إلى الاحتفاظ به بكامل الدقة؛ أخذ العينات والتجميع خياران هندسيان مشروعان، بشرط توثيق أخذ العينات وألا يخفي التجميع الأحداث المهمة.
إجهاد التنبيهات. هذا هو نمط الفشل السائد. إذا لم تُضبط العتبات لكل فئة أدوات، تنتج الإشارة سيلًا ثابتًا من التنبيهات منخفضة القيمة، ويتوقف المراجعون عن قراءتها. الفشل ليس أن الإشارة خاطئة؛ بل أن الإشارة مُتجاهَلة. الضبط لكل فئة أدوات ليس اختياريًا. عتبة فئة القراءة وعتبة فئة الكتابة لا ينبغي أن تتشاركا قيمة واحدة.
السلبيات الكاذبة مقابل الإيجابيات الكاذبة. بالنسبة للأفعال غير القابلة للعكس، السلبية الكاذبة أكثر تكلفة من الإيجابية الكاذبة. يمكن مراجعة كتابة محظورة وإطلاقها. أما حذف مكتمل فلا يمكن. هذا عدم التماثل يرجّح عتبات أضيق على الأفعال غير القابلة للعكس وأوسع على القراءات القابلة للعكس، حتى عندما يعني ذلك مزيدًا من الإيجابيات الكاذبة في مسار القراءة.
التكيّف الخصومي. الوكيل الذي يُحسَّن ضد الإشارة سيتعلم تجنب السمات التي تطلقها. يتدهور كشف الجِدة مع تحول الجِدة إلى مألوف. تحتاج الإشارة إلى إعادة تأسيس دورية لخط الأساس، وإعادة التأسيس نفسها حدث مراجعة.
ما الذي يغيّره هذا
التحول العملي من تقييم لمرة واحدة إلى تقييم جارٍ. لا يزال السجل موجودًا، لكنه يحمل مؤشرًا إلى إشارة حية وسياسة تربط مستويات الإشارة ببوابات الأفعال. تتغير محادثة المورّد من قدّم بطاقة تقييم إلى اكشف القياسات عن بُعد التي تجعل الإشارة ممكنة. وتتغير محادثة المراجعة من هل هذا الوكيل معتمد إلى ماذا فعل هذا التشغيل، وهل تجاوز عتبة.
هذا سير عمل أصعب في البناء وأصعب في البيع. وهو أيضًا الوحيد الذي يبقى صحيحًا مع تغير سلوك الوكيل، وسيتغير، لأن البيئة التي يعمل فيها تتغير أيضًا.