Server monitoring en reporting

[eppie]

Hallo,

Na lang zoeken is het mij niet geluk om een programma te vinden welke het volgende kan;
Het monitoren van een linux server op het gebied van, temp sensors, smart, stroom uitval enz en als er iets mis gaat
er gemaild wordt naar iemand.

Kan van alles vinden op het gebied van trafficmonitoring enz maar dat zoek ik niet

Voor de rest heb ik mon ben-ben enz beken maar dat is het ook niet echt

Iemand een idee wat hier handig voor is zonder allemaal scripts zelf te moeten maken?

alvast bedankt

[moto-moi]

Al naar nagios gekeken?
Want ik doe daar eigenlijk alles mee wat jij nu roept, en als het er niet standaard mee kan, dan kun je op http://nagiosexchange.org zat plugins vinden die het wel doen

[eppie]

Thx was hem wel tegen gekomen met apt-get maar d8 dat dat zo'n netwerk monitoring ding was,zal er is naar kijken thx!

[moto-moi]

het kan veel meer dan dat

[eppie]

Ziet er wel nice uit ja, maarop het plaatje zie ik eigenlijk weinig hardware dingen. Zoals een raid die fout gaat, een uitgevallen ups enz dat kan er dus ook mee worden gemonitored. en dan worden gemailed?

[Jaap-Jan]

eppie schreef op zaterdag 19 augustus 2006 @ 00:44:
Ziet er wel nice uit ja, maarop het plaatje zie ik eigenlijk weinig hardware dingen. Zoals een raid die fout gaat, een uitgevallen ups enz dat kan er dus ook mee worden gemonitored. en dan worden gemailed?

Met wat moti-moi heeft aangedragen kun je al heel wat doen, hoor.

Van NagiosExchange: plug-ins voor RAID- controllers en http://www.nagiosexchange...tnagext_pi1[page]=20%3A10 voor Linux Software RAID

Met betrekking tot de UPS: met een paar seconden op Google had ik de naam check_ups gevonden door simpelweg 'Nagios UPS' in te typen. Ook de 'about'- pagina van Nagios laat genoeg zien van wat het programma kan, dus probeer het maar eens uit zou ik zeggen .

[ Voor 1% gewijzigd door Jaap-Jan op 19-08-2006 00:59 . Reden: NagiosExchange maakt gebruik van arrays in de GET- variabelen, wat een beetje botst met RML ]

[Creepy]

Daarnaast zijn plugins voor Nagios ook nog eens eenvoudig zelf te schrijven. Wij checken er naast o.a. uptime, load, diskspace, http ook zaken mee als mail queue size, of onze eigen geschreven webapplicaties nog draaien, hoeveel mensen op de eigen webapplicatie ingelogd zijn etc.

[moto-moi]

Ik heb ook 2 eigen checks gemaakt, eentje controlleerd of Omega nog up to date is, en een andere controlleerd of een bepaalde cronjob die wat data in een database moet proppen geslaagd is.
Als je eenmaal weet hoe dat moet is dat echt ubersimpel

[bastichelaar]

Kijk ook eens naar Zabbix (http://www.zabbix.org), kan hetzelfde en nog meer. Is alleen wat lastiger goed op te zetten...

[Rac-On]

big brother is ook een bekende

[Chatslet]

Ik heb het als volgt opgelost: In de /dev map staat als het goed is een mapje temp of een andere map waar al je sensoren in staan met het commando cat kun je daar de waarden van aflezen. Met hdparm kun je de status van de schijven uitlezen. Ik heb dus een cron script die om het uur de temperaturen met cat uitleest en in een bestand propt en in een bestand zet waarna een andere cron job om de 24 uur met sendmail dat bestand naar mijn inbox mailt. Erg simpel en spaart een boel gekloot uit met software. Mocht je een kopietje van die scriptjes willen hebben dat stuur je maar even een mailtje naar [e-mail]

[Zwerver]

Tha_Lord schreef op dinsdag 22 augustus 2006 @ 06:56:
Ik heb het als volgt opgelost: In de /dev map staat als het goed is een mapje temp of een andere map waar al je sensoren in staan met het commando cat kun je daar de waarden van aflezen. Met hdparm kun je de status van de schijven uitlezen. Ik heb dus een cron script die om het uur de temperaturen met cat uitleest en in een bestand propt en in een bestand zet waarna een andere cron job om de 24 uur met sendmail dat bestand naar mijn inbox mailt. Erg simpel en spaart een boel gekloot uit met software. Mocht je een kopietje van die scriptjes willen hebben dat stuur je maar even een mailtje naar [e-mail]

Het lijkt me sterk dat jij die spullen uit /dev haalt? Lijkt me eerder /proc Maaruh, lijkt me handig als je niet die shit gaat mailen naar hem, maar voor het naslaggehalte van deze post het even hier post

[Chatslet]

Al goed daar gaan we:

Temperatuur lezen:

#!/bin/sh
echo ---------------------------------------------------- >> /var/log/temp.log
date >> /var/log/temp.log
cat /proc/acpi/thermal_zone/THRM/temperature >> /var/log/temp.log
hddtemp -q /dev/sda >> /var/log/temp.log
hddtemp -q /dev/sdb >> /var/log/temp.log

en het versturen van raporten:

#!/bin/sh
echo -end- >> /var/log/temp.log
mail -s"[server temperatuur]" [e-mail] < /var/log/temp.log
mail -s"[server temperatuur]" [e-mail] < /var/log/temp.log
rm /var/log/temp.log.eergisteren
mv /var/log/temp.log.gisteren /var/log/temp.log.eergisteren
mv /var/log/temp.log /var/log/temp.log.gisteren

En inderdaad je hebt gelijk, haal het uit proc. Was lang geleden dat ik met deze server bezig was heb heb geinstalleerd en in het datacenter gehangen verder nooit meer naar omgekeken linux blijft toch wel draaien
Anyways, ik denk dat je het idee wel vat van de scriptjes. Gewoon oersimpel zonder extra toeters en bellen maar het werkt

[moto-moi]

Dus ten eerste controlleer je maar 1 keer in de 24 uur of er iets mis is, en ongeacht of er iets mis is, mail je altijd?
Dan vind ik echte monitoring software toch wel even wat slimmer, die vallen je alleen maar lastig als er echt iets mis aan het gaan is, en hebben daar vaak maar maximaal 10 minuten worst-case voor nodig

[Seth4Chaos]

Als je veel dingen wilt monitoren gebruik dan nagios, gebruik het op werk om meerdere servers met meerdere services te monitoren en ook temperatuur en FS free space. Je kan ook zelf script toevoegen, ideaal. De config is even lastig om op te zetten maar als je het door hebt is het heel makkelijk eigenlijk.

Als je alleen de temperatuur van je HD's wilt weten (wat ik thuis gebruik) dan is het volgende script mischien wel wat. Deze staat bij mij in /etc/cron.hourly dus wordt elk uur gedraait maar als je het echt goed zou willen doen zou je hem elke 5 minuten ofzo willen draaien. Hij mailed toch alleen als er iets mis is dus kost alleen wat meer cpu-cycles.

code:

#!/bin/sh

# Most modern harddisks have a maximum operating temperature ranging from 55 to 65 C
MAXTEMP=50

HARDDISKS="hda hdc hdd hde hdf hdg"

## Get maximum tempature
max=0
for harddisk in ${HARDDISKS}; do
        temp=`hddtemp -n /dev/${harddisk}`
        /usr/bin/echo $temp | /bin/grep -v sleeping >/dev/null 2>&1
        [ $? -eq 0 ] && {
                [ $temp -gt $max ] && {
                        max=$temp
                }
        }
done

## Sent email
[ $max -ge ${MAXTEMP} ] && {
        for i in ${HARDDISKS} ; do hddtemp /dev/${i}; done |\
        mail -s "Warning: A harddisk is ${max}C" root
}

exit 0

[Zwerver]

Overigens kan nagios ook wel mooi zijn

En soms is zelfs nagios onoverzichtelijk:

[ Voor 45% gewijzigd door Zwerver op 24-08-2006 17:01 ]

[Aike]

Welke methode gebruiken jullie om plugins op andere machines uit te voeren? Hier heb je de keuze uit 2 manieren, NRPE en NSCA.

edit: beetje topic kapen, maar ook wel nuttig voor de TS lijkt me

[ Voor 16% gewijzigd door Aike op 25-08-2006 11:54 ]

[Creepy]

Ik gebruik op het moment check-by-ssh voor checks die lokaal op de andere machines moeten worden uitgevoerd.

[moto-moi]

Ik gebruik nrpe voor dat soort dingen.

[Aike]

Ik gebruik nu ook check-by-ssh. Was niet heel lastig op te zetten (2 uurtjes) en werkt prima zo te zien.

[Aetje]

Mwah, configureren, als je de basisconfig opgezet hebt kan je met NagiosQL eenvoudig de config enzo aanpassen. Hosts toevoegen ect... Zelf heb ik een install van Nagios 2.5 die met NagiosQL te configgen is, een custom map met een klein perl programmatje dat de statusfiles makkelijk kan bewerken (ben de naam ff kwijt), NagiosGrapher om met RRDTool performance trends te maken. Heerlijke interface, en de netwerkadmins op mn site zijn me dankbaar (heb het ooit zelf opgezet om mn mailservers te bewaken maar nu monitort 't ongeveer 300 netwerk devices).

[Editje] Gebruik nog geen NRPE/NSCA... Wat zijn jullie ervaringen hiermee? Ik zoek iets wat plugins op zowel Windows bakken als Ux bakken kan draaien... Primair Windows.

[ Voor 13% gewijzigd door Aetje op 06-09-2006 01:56 ]

[BrZ]

Zwerver schreef op donderdag 24 augustus 2006 @ 16:56:

En soms is zelfs nagios onoverzichtelijk:
[afbeelding]

Bij ons is dat overzicht 1 grote klont, staan echt teveel servers in voor zo'n overzicht

Wij gebruiken overigens nrpe.

[eppie]

Zwerver waar heb je die layout van nagios vandaan? Want standaard is het best wel lelijk

[MrBarBarian]

Oreon is een soort schil om Nagios met betere lay-out en meer overzicht

[eppie]

Thx die ziet er echt vet uit en de configuratie is ook een eitje!.

Alleen laat hij bij mij de aangemaakte hosts nog niet zien bij monitoring
ondanks dat ze enabled zijn.