باستخدام Datamining / إحصائيات مراقبة السجل

Question

لدي مجموعة كبيرة من ملفات السجل التي أرغب في وصفها أو ربما تضيف نوعا ما من شجرة القرار أو نوع من التحليلات. لكنني لا أعرف بالضبط ما. ما نوع التحليل الذي قمت به مع ملفات السجل، والكثير من ملفات السجل.

على سبيل المثال، حتى الآن أقوم بجمع عدد الطلبات التي يتم بها تقديمها إلى صفحة معينة لملف سجل معين.

Servlet = 60 Requets Servlet2 = 70 طلبات، إلخ.

أعتقد أن هناك مباشرة، مرشح حسب الطلبات الأكثر شعبية فقط. أيضا، قد تفعل شيئا مثل 60 طلب بالنظر إلى فترة ساعتين. 60/160 دقيقة.

Answer 1

تقرر ما يعتمد التحليل الذي يجب القيام به على المقررات التي تحاول إجراءها بناء على هذا التحليل. على سبيل المثال، أقوم حاليا بمراقبة سجلات الاستثناءات التي أبلغ عنها طلبنا (يتم تسجيل جميع الاستثناءات في تطبيق العميل مع الخادم) لتحديد ما يجب أن يكون أخطاء عميل ذات الأولوية عالية للتحقيق. يمكنني أيضا استخدام برنامج البحث في البحث لمراقبة أي استثناءات تم الإبلاغ عنها بواسطة برنامج الخادم الخاص بنا والتي قد تحتاج إلى تحقيق أكثر فورية. في الجزء العلوي من السجلات الناتجة عن كل شيء على أي حال، أستخدم أيضا بعض برامج المراقبة لتتبع استخدام خادم الويب الخاص بنا وخادم قاعدة البيانات الذي يسجل إحصائيات الاستخدام وما إلى ذلك في قاعدة بيانات. الهدف النهائي من ذلك هو التنبؤ بمستويات الاستخدام في المستقبل وشراء المزيد من الأجهزة حسب الاقتضاء لمواكبة الطلب.

اثنين من الأدوات (المجانية) التي كنت أستخدمها هي:

Hyperic. للمراقبة، من السهل جدا إعدادها وقد تكون قادرا على بدء تشغيل الكثير من البيانات التي قد تكون مهتما بها، أي طلبات IE في الثانية على خادم ويب.

برقة للبحث عن ملفات السجل، من السهل جدا الحصول على الإعداد والعمل مع ويمنحك قدرات البحث الممتازة على ملفات السجل الخاصة بك. إذا كنت تعمل مع ملفات السجل في الوقت الحالي، لم تجرب Splunk، أوصي بالتأكيد بذلك. لقد لاحظت بضعة لحظات من وحدة المعالجة المركزية بنسبة 100٪ أثناء استخدامه على خادم الإنتاج الرئيسي الخاص بنا، لذلك توقف تشغيله على هذا الجهاز مؤخرا، مجرد كلمة تحذير.

لست متأكدا من هدفك مع هذا التحليل، كان لي الكثير عن البحث عن أي أخطاء يجب أن أعرفه، والتخطيط لاحتياجات القدرات المستقبلية. إذا كنت مهتما في الأخير، فستصيد أيضا فن تخطيط القدرات.