Archiwa rrdtool - cancer's blog

Zastanawia?em si? ostatnio jak wyrysowa? sobie temperatur? jak? ma serwer lub jego otoczenie (zale?nie od zainstalowanych sensorów) w serwerowni, bez instalowania mysql i cacti (oraz pluginów poniewa? domy?lnie z snmp chyba temperatury zczyta? nie mo?na).

W NetBSD mamy mo?liwo?? sprawdzania danych z ACPI przy pomocy envstat. Trzeba przekompilowa? kernel aby zawiera? odpowiednie „hardware monitory”.

Dzia?anie envstat wygl?da nastepuj?co i ró?ni si? w zale?no?ci od maszyny, niemniej jednak ró?nego rodzaju temperatury powinny by? widoczne:

cancer@snort~/rrd[175]13:34#envstat

 Current  CritMax  CritMin  CritCap     Unit

[ipmi0]

 PS 2 Status:        OFF

 PS 1 Status:        OFF

 CPU Vtt:      1.250                                   V

 CPU 2 VCore:      1.040                                   V

 CPU 1 VCore:      1.260                                   V

 DASD Temp:     26.000                                degC

 VBAT:      3.184                                   V

 -12V Sense:    -11.412                                   V

 12VA Sense:     12.033                                   V

 5V Sense:      5.018                                   V

 12VC Sense:     12.600                                   V

 12VB Sense:     12.600                                   V

 2.5V Sense:      2.590                                   V

 1.8V Sense:      1.810                                   V

 1.5V Sense:      1.550                                   V

 1.3V Sense:      1.400                                   V

 1.25V Sense:      1.310                                   V

 CPU 2 Temp:     29.000                                degC

 CPU 1 Temp:     29.000                                degC

 Fan 12 Tach:       1740                                 RPM

 Fan 11 Tach:       1860                                 RPM

 Fan 10 Tach:       1830                                 RPM

 Fan 9 Tach:       1890                                 RPM

 Fan 8 Tach:       1680                                 RPM

 Fan 7 Tach:       1710                                 RPM

 Fan 6 Tach:       1710                                 RPM

 Fan 5 Tach:       1860                                 RPM

 Fan 4 Tach:       1800                                 RPM

 Fan 3 Tach:       1800                                 RPM

 Fan 2 Tach:       1710                                 RPM

 Fan 1 Tach:       1680                                 RPM

 Ambient Temp:     21.000                                degC

W moim przypadku na tym serwerze interesuj?ce jest oczywi?cie pole Ambient Temp:. Nie ma tu regu?y i ró?ni producenci stosuj? ró?ne oznaczenia. W IBM jest Ambient Temp, w HP Rear Ambient, gdzie? indziej mo?e by? np Aux Temp: itp. Przyjmujemy warto?? Ambient Temp, ?e to jest to co nam chodzi i przy pomocy grep i awk wycinamy reszt?:

envstat | grep "Ambient Temp" | awk '{print $3}'

W wyniku dostajemy sam? temperatur? czyli 21.000

Aby oznaczy? dane na wykresie trze je umie?ci? w czasie, do tego wystarczy nam systemowy date dzia?aj?cy tak aby pokazywa? „timestamp” czyli czas w sekundach od pocz?tku epoki. Za timestampem dostawimy dwukropek który b?dzie oddziela? znacznik czasu od warto?ci temperatury, czyli:

date +%s:

dostajemy 1272542448: Za pomoc? date -r 1272542448 mo?na odczyta? jak? dok?adnie dat? pokazuje timestamp: Thu Apr 29 14:00:48 CEST 2010

Potrzebne jeszcze jest jedno zewn?trzne narz?dzie do gromadzenia danych oraz rysowania wykresu – RRDTool

Po zainstalowaniu z databases/rrdtool w pkgsrc mo?emy przyst?pi? do tworzenia bazy:

rrdtool create /usr/home/cancer/rrd/temperatura.rrd -s 300 \ DS:temperatura:GAUGE:400:10:50 \ RRA:AVERAGE:0.5:1:210240 \ RRA:MAX:0.5:1:210240 \ RRA:MIN:0.5:1:210240 \ RRA:LAST:0.5:1:210240 \

Taka baza b?dzie aktualizowana co 5 minut (-s 300), oraz b?dzie gromadzi?a dane w zakresie od 10 stopni do 50 stopni Celsjusza (tak, po awarii klimatyzacji w serwerowni mo?e by? taka temperatura :).

W zasadzie mamy wszystko. Przy pomocy rrdtool update /usr/home/cancer/rrd/temperatura.rrd timestamp:temperatura mo?na ju? wype?nia? baz? danymi.

Teraz troch? automatyzacji, na pocz?tek skrypt:

#!/bin/ksh echo -n `date +%s:` >> /usr/home/cancer/rrd/temprrd.txt echo -n `envstat | grep "Ambient Temp" | awk '{print $3}'` >> /usr/home/cancer/rrd/temprrd.txt echo " " >> /usr/home/cancer/rrd/temprrd.txt temperatura=`cat /usr/home/cancer/rrd/temprrd.txt` /usr/pkg/bin/rrdtool update /usr/home/cancer/rrd/temperatura.rrd $temperatura /usr/pkg/bin/rrdtool graph /usr/home/cancer/public_html/temperatura.png --imgformat PNG --title="Tempertatura w serwerowni" --width 800 --height 300 --vertical-label="Stopnie Celsjusza .C" --end now --start end-2592000s DEF:temp=/usr/home/cancer/rrd/temperatura.rrd:temp:AVERAGE GPRINT:temp:LAST:"aktualna %2.2lf .C" GPRINT:temp:MIN:"minimalna %2.2lf .C" GPRINT:temp:MAX:"maksymalna %2.2lf .C" GPRINT:temp:AVERAGE:"srednia %2.2lf .C" AREA:temp#6060ef LINE1:temp#0000ff rm /usr/home/cancer/rrd/temprrd.txt

Wrzucamy go do dowolnego pliku oraz nadajemy mu prawa do wykonania. Co z czym tu si? je:

1. Pierwsza linia wy?wietla timestamp oraz dwukropek oraz zapisuje wszystko do pliku /usr/home/cancer/rrd/temprrd.txt. Opcja -n powoduje, ?e nie mamy znaku nowej lini i powrotu karetki.
2. Druga liniawycina nam temperature i wstawia j? w tym samym pliku zaraz za dwukropkiem
3. Trzecia linia dostawia spacje wraz ze znakiem ko?ca linii.
4. Przy pomocy polecenia cat podstawiamy nasz? dan? z pliku temprrd.txt pod zmienn? temperatura.
5. Aktualizujemy baz? danymi ze zmiennej temperatura.
6. Rysujemy wykres. WA?NE ! Ta linia a? do temp#0000ff musi by? w ca?o?ci !
7. Ostatnia linia usuwa plik z danymi tymczasowymi.

Taki skrypt dodajemy do crontaba aby by? uruchamiany co 5 miut:
*/5 * * * * /bin/ksh /usr/home/cancer/rrd/temprrd.sh >/dev/null 2>&1

Za kilkana?cie minut powinien pojawi? si? wykres mniej wi?cej taki jak ten poni?ej:

O tym, ?e protokó? snmp do monitoringu sieci jest fajny i przydatny ka?dy administrator wie, obserwuj?c wykresy utylizacji ??cza, wykorzystania przestrzeni na storage’u itp.

Mo?na tak?e podej?? do snmp bardziej od strony finansowo-ksi?gowej czy Business Intelligence.

Od jakiego? czas monitoruj? jak szybko drukarki zu?ywaj? toner co pozwoli?o na takie poprzerzucanie u?ytkowników, ?eby zu?ycie toneru rozk?ada?o si? mniej wi?cej równomiernie na 3 drukarki:

Czyli toner ?rednio oko?o 7 tygodni, screen z dziur? ma oko?o 8 tygodni, ale dziura oznacz offline z powodu awarii wi?c nie bierzemy pod uwag? ca?ego przedzia?u czasowego.

Drug? rzecz? któr? mo?na monitorowa? i wysuwa? jakie? wnioski (cho?by statystyczne) to np ilo?? u?ytkowników zalogowanych do AS400, czyli pracuj?cych w JDEdwards. Na prze?omie roku mo?na zaobserwowa? fajne rzeczy:

W tygodniu 51 zacz?? si? exodus pracowników, w tygodniu 52 mamy minimum i ostatnie dwa dni pracuj?ce nie ma prawie nikogo (?wi?ta), nast?pnie tydzie? 53 to powolne powroty, przerwa i od razu wracamy po sylwestrze w prawie pe?nym sk?adzie, aby od drugie dnia pracuj?cego nowego roku wej?? na pe?ne obroty :)

Wida?, te?, ?e praca zaczyna nam si? o 6 rano i trwa do 22 lub d?u?ej, godzina oko?o pó?nocna to czas backupu gdzie loguje si? systemowy user odpowiedzialny za niego.

Je?li kto? jest zainteresowany to soft u?yty do tego monitoringu to: net-snmpd, rrdtool, cacti, apache+php i standardowe agenty systemowe + kilka gotowych skryptów od spo?eczno?ci cacti (monitoring poziomu tonerów). Wszystko pod kontrol? (a jak?e!) NetBSD! :)

rrdtool

Wykres temperatury serwera w RRD (NetBSD)

SNMP prawde Ci powie.