/articlesعمليات تقنية المعلومات
إيجاد السبب الجذري للحادثة بأدلة يمكن التحقق منها
كيف يعمل تحليل السبب الجذري للحوادث في بوتيفاي: اجمع المشكلات وعمليات النشر والسجلات والتغييرات، ورتّبها زمنيًا، وطابق الأسماء، ثم رتّب الأسباب بأدلتها.
- آخر تحديث
- نُشر
- دقائق قراءة
- 06
- في هذه الصفحة
- 09
في هذه الصفحة09
- ماذا يستطيع الذكاء الاصطناعي في تحليل السبب الجذري، وماذا لا يستطيع؟
- الخطوة الأولى: اجمع المشكلات وعمليات النشر والسجلات والتغييرات
- الخطوة الثانية: ضع كل شيء في نافذة زمنية واحدة
- الخطوة الثالثة: طابق الخدمة نفسها بين الأدوات
- الخطوة الرابعة: رتّب الأسباب المحتملة بدل تسمية سبب واحد
- الخطوة الخامسة: اربط كل نتيجة بدليلها
- أخطاء شائعة: انحراف الساعات، وأخذ التوقيت كسبب، وغيرها
- كيف يساعد بوتيفاي في تحليل السبب الجذري؟
- أسئلة شائعة
01
ماذا يستطيع الذكاء الاصطناعي في تحليل السبب الجذري، وماذا لا يستطيع؟
معظم وقت تحليل السبب الجذري (RCA) يذهب في جمع الأدلة: فتح المشكلة في Dynatrace، والبحث عن عمليات النشر، وتفتيش سجلات Splunk، ومراجعة تغييرات ServiceNow، ومعرفة أي خادم تقصده كل أداة. بوتيفاي ينجز هذا الجمع في دقائق، ولا ينسى التحقق من النظام الثاني.
لكن الذكاء الاصطناعي لا يثبت السبب وحده. كتاب هندسة موثوقية المواقع (SRE) من Google يصف حل الأعطال بأنه وضع فرضية مما تراه ثم اختبارها حتى يظهر السبب. بوتيفاي قوي في النصف الأول ومفيد في الثاني، أما القرار الأخير وأي اختبار يمس بيئة الإنتاج فيبقى للمهندس.
فالهدف ليس ذكاء اصطناعيًا يعلن السبب الجذري، بل قائمة قصيرة مرتبة بالأسباب المحتملة، لكل سبب مصادره، يؤكدها المهندس أو يستبعدها بسرعة.
02
الخطوة الأولى: اجمع المشكلات وعمليات النشر والسجلات والتغييرات
ابدأ من العَرَض واجمع أربعة أنواع من الأدلة للخدمة المتأثرة. كل نوع يجيب عن سؤال مختلف، وإهمال أحدها أشيع سبب لاتهام الشيء الخطأ.
- المشكلات والتنبيهات: ما الذي تعطّل، ومتى، وأي خدمات تأثرت. في Dynatrace هي المشكلة وأدلة سببها، وفي Splunk التنبيهات المنطلقة أو أحداث ITSI البارزة.
- عمليات النشر: أي برمجيات تغيّرت. أحداث النشر في Dynatrace أسرع مصدر، إن كان خط النشر لديك يسجلها.
- السجلات والتتبعات والمقاييس: ماذا فعل النظام فعلًا. ابحث عن أنواع أخطاء جديدة، وعمليات بطيئة، وخدمات معتمَد عليها تحت ضغط.
- طلبات التغيير: ما غيّره الأشخاص خارج عمليات النشر، مثل قاعدة في الجدار الناري أو إعداد في قاعدة البيانات أو شهادة، اعتُمدت في ServiceNow.
03
الخطوة الثانية: ضع كل شيء في نافذة زمنية واحدة
قبل أي مقارنة، اختر نافذة واحدة واستخدمها في كل استعلام: من قبل أول عَرَض بقليل (غالبًا ساعة إلى ساعتين للعطل المفاجئ، وأطول للتدهور البطيء) حتى الآن أو حتى التعافي. كل استعلام يستخدم البداية والنهاية نفسيهما بتوقيت UTC، فتتطابق النتائج.
والأنظمة تختلف في الوقت أيضًا. الساعات تنحرف، وبعض الأدوات تسجّل الحدث بوقت استلامه لا بوقت وقوعه، وتغييرات ServiceNow تعرض غالبًا النافذة المخططة لا الفعلية. اترك هامش دقائق عند مقارنة الأوقات، وقدّم الوقت الفعلي على المخطط.
04
الخطوة الثالثة: طابق الخدمة نفسها بين الأدوات
نادرًا ما تحمل الخدمة الاسم نفسه في كل مكان. Dynatrace يعطيها معرّف كيان، وSplunk حقل خادم أو مصدر، وServiceNow عنصر تهيئة له sys_id خاص. وقبل مطابقتها لا يعرف بوتيفاي أن تغييرًا على عنصر وارتفاع الأخطاء على خادم يخصان الشيء نفسه.
احفظ المطابقات كبيانات لا كتخمين. ابحث عن الخدمة بالاسم في كل أداة، وتأكد بأسماء الخوادم أو الوسوم أو الروابط، واحفظ المطابقات المؤكدة ليبدأ التحقيق التالي منها. مطابقة خاطئة واحدة تفسد كل مقارنة بعدها، لذلك يؤكد شخص كل مطابقة جديدة.
05
الخطوة الرابعة: رتّب الأسباب المحتملة بدل تسمية سبب واحد
حين تكون الأدلة على خط زمني واحد والأسماء متطابقة، يبني بوتيفاي قائمة قصيرة بالأسباب المحتملة ويرتبها بالاختبارات نفسها التي يستخدمها المهندس الخبير. ويعرض الجدول النتيجة لحادثة مثال في خدمة الدفع.
- التوقيت: التغيير وقع قبل أول عَرَض لا بعده.
- الوصول: التغيير مسّ الخدمة المتعطلة أو شيئًا تعتمد عليه.
- التوافق: نوع التغيير يناسب نوع العطل، مثل تعديل إعداد الاتصالات مع ارتفاع أخطاء مهلة الاتصال.
- الانتشار: الخدمات المتأثرة تطابق ما يستطيع التغيير الوصول إليه.
- السوابق: تغيير مشابه سبّب حادثة مشابهة من قبل.
| السبب المحتمل | أدلة تؤيده | أدلة تعارضه | الفحص التالي |
|---|---|---|---|
| الإصدار 4.12 من خدمة الدفع | نُشر قبل ارتفاع الأخطاء بست دقائق، وأخطاء مهلة جديدة في السجلات | لا شيء حتى الآن | مقارنة نسبة الأخطاء على الخوادم التي ما زالت على 4.11 |
| تغيير إعداد في قاعدة البيانات | تغيير معتمد في النافذة نفسها على عنصر قاعدة البيانات | زمن استجابة قاعدة البيانات بقي ثابتًا | فحص مقاييس الاتصالات |
| مزوّد الدفع الخارجي | بعض الأخطاء تذكر المزوّد | الأخطاء بدأت قبل ارتفاع الاستدعاءات إلى المزوّد | أولوية منخفضة ما لم يُستبعد السببان الأولان |
06
الخطوة الخامسة: اربط كل نتيجة بدليلها
تحليل السبب الجذري الذي يكتبه الذكاء الاصطناعي مفيد فقط إن أمكن التحقق من كل جملة فيه. كل نتيجة تشير إلى الاستعلام الذي أنتجها: أي نظام، وأي نافذة، وماذا أعاد. وما استنتجه النموذج دون مصدر مباشر يُوسم فرضية لا حقيقة.
وهذا مهم في التحقيقات الطويلة أيضًا. حين يختصر بوتيفاي نتيجة كبيرة ليكمل عمله، تبقى النتيجة الكاملة متاحة، فيقتبس التقرير النهائي السجل الأصلي لا ملخص ملخص.
07
أخطاء شائعة: انحراف الساعات، وأخذ التوقيت كسبب، وغيرها
تحليل السبب الجذري بمساعدة الذكاء الاصطناعي يقع في أخطاء البشر نفسها، لكن أسرع. انتبه لما يلي.
- انحراف الساعات: مقارنة الأوقات الدقيقة بين الأنظمة قد تُظهر السبب وكأنه جاء بعد النتيجة. اترك هامشًا، واذكر مقداره في التقرير.
- أخذ التوقيت كسبب: يروي كتاب SRE قصة بطء تزامن مع استدعاء واحد لقاعدة البيانات، حتى تبيّن أن طلبات المحتوى الثابت غير المرتبطة به بطيئة أيضًا. التزامن خيط يُختبر لا حكم نهائي.
- لوم آخر نشر: الإصدارات الحديثة سهلة الإيجاد فتُلام أولًا. أعطِ تغييرات البنية التحتية والإعدادات الوزن نفسه.
- غياب البيانات ليس غياب المشكلة: «لا أخطاء في السجلات» قد تعني فهرسًا خاطئًا أو نافذة ضيقة. يجب أن يذكر بوتيفاي أين بحث.
- البحث المفتوح: البحث بلا نافذة زمنية أو حد للنتائج قد يتوقف أو يكلف كثيرًا. حدّد كل استعلام.
08
كيف يساعد بوتيفاي في تحليل السبب الجذري؟
في بوتيفاي أربعة إجراءات مخصصة لهذه الخطوات. الأول يجد الخدمة أو الخادم أو التطبيق نفسه في أنظمتك المربوطة. والثاني يحفظ مطابقة مؤكدة بين الأسماء، وينتظر دائمًا موافقة شخص. والثالث يتحقق من تداخل نافذتين زمنيتين، مع هامش للساعات المختلفة. والرابع يعيد قراءة الأدلة الكاملة التي جُمعت في التحقيق نفسه، فتعود كل نتيجة إلى مصدرها.
وتعمل هذه الإجراءات مع إجراءات القراءة في تكاملات Dynatrace وSplunk وServiceNow: المشكلات وعمليات النشر، والبحث في السجلات وأحداث ITSI البارزة، والحوادث والتغييرات القريبة. ثم يسلّم بوتيفاي النتيجة تقريرًا بصيغة PDF أو Excel أو Word أو CSV، بالعربية أو الإنجليزية. وفي صفحة الحلول، قسم فرق تقنية المعلومات، مثال على الخط الزمني.
09
أسئلة شائعة
01هل يجد الذكاء الاصطناعي السبب الجذري للحادثة تلقائيًا؟
يجمع الأدلة ويرتب الأسباب المحتملة أسرع بكثير من الإنسان، لكنه لا يثبت السبب وحده. تعامل مع نتائجه كفرضيات مرتبة بأدلتها، ودع المهندس يؤكد.
02ما البيانات التي يحتاجها الذكاء الاصطناعي لتحليل السبب الجذري؟
على الأقل: المشكلة أو التنبيه، وأحداث النشر، والسجلات أو التتبعات، وطلبات التغيير للخدمة المتأثرة والنافذة الزمنية. ومن دون طلبات التغيير يميل الذكاء الاصطناعي إلى لوم أوضح عملية نشر.
03كيف تتعامل مع انحراف الساعات بين أدوات المراقبة؟
استخدم نافذة واحدة بتوقيت UTC لكل الاستعلامات، وقارن الأوقات بهامش دقائق لا بالثانية. وقدّم وقت وقوع الحدث على وقت تخطيطه أو استلامه.
04هل هذا هو تحليل Dynatrace Davis أو منصات AIOps نفسه؟
لا. التحليل المدمج في منصة المراقبة ينظر في بيانات تلك المنصة. أما بوتيفاي فيعمل عبر المنصات ويضيف طلبات التغيير وسجلات الأدوات الأخرى والحوادث السابقة، وكثيرًا ما يبدأ من مشكلة المنصة نفسها كأول خيط.
05كيف تتحقق من صحة تحليل السبب الجذري الذي يقدمه الذكاء الاصطناعي؟
كل نتيجة مربوطة بالاستعلام أو السجل الذي يدعمها. يراجع المراجعون هذا الدليل، ويبحثون عن أدلة تعارض السبب الأول، ويجرون اختبارًا قد ينفيه قبل قبوله.
10
المصادر
11