|
Log Analysis and Event Correlation Using Variable Temporal Event Correlator (vtec)Bog'liq Krizak.en.uzXotira tugashini kuzatish
AMD hisoblash tarmoqlarida keng tarqalgan muammo
bu xotiradan tashqari holatlardir. Noqonuniy ishlar yoki
mashinaga o'rnatilgandan ko'ra ko'proq xotira talab
qilinadigan ishlar tizimning xotirasi tugashiga olib keladi;
yadro keyinchalik xotiradan qolgan qotilni (OOM killer)
chaqiradi. OOM qotili yaratadigan syslog xabari juda
kam foydali ma'lumotlarga ega: faqat PID va jarayon
nomi. OOM holatiga sabab bo'lgan ish egasini aniqlash
uchun biz har besh daqiqada cron ishini bajaramiz
tizimlari
bu
keshlar
the
tarkibi
ning
/proc/
/stat
ichiga
/var/spool.
Qoidalar mexanizmi OOM qotil
hodisasini ko'rganda, u ishni o'n daqiqa oldin
(serverga OOM holatini tiklash uchun vaqt berish
uchun) navbatga qo'yadi, u mashinaga kiradi va
a
katalog
ostida
NFS fayl serverini tekshirish
Kod 2-misolida umumlashtirilgan va soddalashtirilganidek,
bizda "NFS serveri javob bermayapti" xabarlari uchun mijoz
tizimlarini kuzatuvchi va xabarlar tezligi ma'lum chegaradan
oshib ketganda saqlash va tarmoq guruhlarini ogohlantiruvchi
qoida mexanizmi mavjud.
/var/spool/proc/
/stat
Referat bo'lgan fayl
OOM qotil xabari bilan rad etilgan. Ushbu fayl bizga nafaqat noto'g'ri
ish bilan shug'ullanayotganini, balki u o'ldirilganda qanchalik katta
bo'lganini ham aytadi. Ushbu ma'lumotlar foydalanuvchiga boshqa
hisoblash tugunlarida ko'proq muammolarni oldini olish uchun
o'zlarining ommaviy topshiriqlari holatini tekshirishni so'rab elektron
pochta xabarini yaratish uchun ishlatiladi.
Looplarni qayta ishga tushirish
Bizda AMD’dagi barcha serverlarimiz yuklashni tugatgandan
so‘ng syslog xabarini yuborish uchun sozlangan. VTEC qoida
mexanizmi ushbu xabarlarni kuzatib boradi va agar mashina 90
daqiqada besh martadan ortiq qayta ishga tushsa, operatsion
xodimlarni ogohlantiradi. Ushbu qayta yuklash tsikllari ko'p bitli
ECC xatosini, yadro vahimasini yoki tizim boshqaruvchisining
e'tiborini talab qiladigan boshqa tizim konfiguratsiyasi
muammosini ko'rsatishi mumkin.
|
| |
