Hardware and Network RRDTool Graphing Just Stopped!

Does this also affect other RRD graphs, or only those two you mentioned? Can you please check file modification times for /var/log/reporting/rrd/*.rrd ? If only those two graphs are affected, can you please also check if the sysmond process is running? ("ps aufx|grep sysmond")

Thank you,
 Andreas

Only those two graphs are affected. Sysmond is running. Here's the timestamps:

M> fw0:/var/log/reporting/rrd # ls -l *.rrd
-rw-r--r-- 1 root root  47840 May 21 13:50 cpuusage.rrd
-rw-r--r-- 1 root root  47840 May 21 13:50 ctnl.rrd
-rw-r--r-- 1 root root 281960 May 21 13:50 diskstat.rrd
-rw-r--r-- 1 root root 141488 May 23 13:45 ips.rrd
-rw-r--r-- 1 root root  94664 May 21 13:50 itfusage_eth0.rrd
-rw-r--r-- 1 root root  94664 May 21 13:50 itfusage_eth1.rrd
-rw-r--r-- 1 root root  94664 May 21 13:50 itfusage_eth2.rrd
-rw-r--r-- 1 root root 141488 May 21 13:50 loadavg.rrd
-rw-r--r-- 1 root root 141488 May 23 13:45 mailsec.rrd
-rw-r--r-- 1 root root 281960 May 21 13:50 mem_swap.rrd
-rw-r--r-- 1 root root 188312 May 23 13:45 pfilter.rrd
-rw-r--r-- 1 root root 188312 May 23 13:45 vpn.rrd
-rw-r--r-- 1 root root 141488 May 23 13:45 websec.rrd
 fw0:/var/log/reporting/rrd # date
Wed May 23 13:49:05 BST 2007

Those files should be updated in regular intervals. Can you please check if there is a hanging "system-reporter.pl" process? This process should be started every 15 minutes by the cron daemon, but it should not take more than a couple of seconds to complete it's work. Just check for this process (using "ps auxf"), and if the START time is way back just kill the process.

Cheers,
  andreas

Yep found this:

root     22916  0.0  0.3   6416  3744 ?        S    May21   0:00 /usr/bin/perl /usr/local/bin/reporter/system-reporter.pl

terminated with extreme prejudice!

And the rrd's are looking at lot happier:

 fw0:/var/log/reporting/rrd # ls -l *.rrd
-rw-r--r-- 1 root root  47840 May 23 17:20 cpuusage.rrd
-rw-r--r-- 1 root root  47840 May 23 17:20 ctnl.rrd
-rw-r--r-- 1 root root 281960 May 23 17:20 diskstat.rrd
-rw-r--r-- 1 root root 141488 May 23 17:20 ips.rrd
-rw-r--r-- 1 root root  94664 May 23 17:20 itfusage_eth0.rrd
-rw-r--r-- 1 root root  94664 May 23 17:20 itfusage_eth1.rrd
-rw-r--r-- 1 root root  94664 May 21 13:50 itfusage_eth2.rrd
-rw-r--r-- 1 root root 141488 May 23 17:20 loadavg.rrd
-rw-r--r-- 1 root root 141488 May 23 17:20 mailsec.rrd
-rw-r--r-- 1 root root 281960 May 23 17:20 mem_swap.rrd
-rw-r--r-- 1 root root 188312 May 23 17:20 pfilter.rrd
-rw-r--r-- 1 root root 188312 May 23 17:20 vpn.rrd
-rw-r--r-- 1 root root 141488 May 23 17:20 websec.rrd

And the rrd's are looking at lot happier:

 fw0:/var/log/reporting/rrd # ls -l *.rrd
-rw-r--r-- 1 root root  47840 May 23 17:20 cpuusage.rrd
-rw-r--r-- 1 root root  47840 May 23 17:20 ctnl.rrd
-rw-r--r-- 1 root root 281960 May 23 17:20 diskstat.rrd
-rw-r--r-- 1 root root 141488 May 23 17:20 ips.rrd
-rw-r--r-- 1 root root  94664 May 23 17:20 itfusage_eth0.rrd
-rw-r--r-- 1 root root  94664 May 23 17:20 itfusage_eth1.rrd
-rw-r--r-- 1 root root  94664 May 21 13:50 itfusage_eth2.rrd
-rw-r--r-- 1 root root 141488 May 23 17:20 loadavg.rrd
-rw-r--r-- 1 root root 141488 May 23 17:20 mailsec.rrd
-rw-r--r-- 1 root root 281960 May 23 17:20 mem_swap.rrd
-rw-r--r-- 1 root root 188312 May 23 17:20 pfilter.rrd
-rw-r--r-- 1 root root 188312 May 23 17:20 vpn.rrd
-rw-r--r-- 1 root root 141488 May 23 17:20 websec.rrd

Looks good now [:)]
This is due to a rare race condition which we already fixed a while ago but didn't make it into an up2date yet.