Система мониторинга, что это такое и как использовать. (Часть 1, Munin)

# dpkg -l | grep munin
ii  munin                                      1.4.5-3                          network-wide graphing framework (grapher/gatherer)
ii  munin-common                               1.4.5-3                          network-wide graphing framework (common)
ii  munin-node                                 1.4.5-3                          network-wide graphing framework (node)

# /etc/init.d/munin-node start
Starting Munin-Node: done.

# ls -l /etc/munin/
total 32
-rw-r--r-- 1 root root   847 Окт  5  2010 apache.conf
-rw-r--r-- 1 root root  6905 Дек 20 05:52 munin.conf
drwxr-xr-x 2 root root  4096 Окт  5  2010 munin-conf.d
-rw-r--r-- 1 root root  1229 Дек  7 07:11 munin-node.conf
drwxr-x--- 2 root munin 4096 Дек 14 11:47 plugin-conf.d #в этой директории лежит интересный файлик, #munin-node в котором можно подкорректировать директивы для работы плагинов, пользователи, порт, логи и #т.д.
drwxr-xr-x 2 root root  4096 Дек 14 14:03 plugins #здесь хранятся симольные ссылки на плагины, сами же #плагины лежат в /usr/share/munin/plugins/
drwxr-xr-x 3 root root  4096 Дек  7 07:09 templates

# Example configuration file for Munin, generated by 'make build'
 
# The next three variables specifies where the location of the RRD
# databases, the HTML output, logs and the lock/pid files.  They all
# must be writable by the user running munin-cron.  They are all
# defaulted to the values you see here.
#
# dbdir	/var/lib/munin
 htmldir /var/cache/munin/www/munin #директория, где будут храниться наши графики и html файлы
# logdir /var/log/munin
# rundir  /var/run/munin
#
# Where to look for the HTML templates
# tmpldir	/etc/munin/templates
 
# (Exactly one) directory to include all files from.
#
includedir /etc/munin/munin-conf.d
 
# Make graphs show values per minute instead of per second
#graph_period minute
 
# Graphics files are normaly generated by munin-graph, no matter if
# the graphs are used or not.  You can change this to
# on-demand-graphing by following the instructions in
# http://munin.projects.linpro.no/wiki/CgiHowto
#
#graph_strategy cgi
 
# munin-cgi-graph is invoked by the web server up to very many times at the
# same time.  This is not optimal since it results in high CPU and memory
# consumption to the degree that the system can thrash.  Again the default is
# 6.  Most likely the optimal number for max_cgi_graph_jobs is the same as
# max_graph_jobs.
#
#munin_cgi_graph_jobs 6
 
# If the automatic CGI url is wrong for your system override it here:
#
#cgiurl_graph /cgi-bin/munin-cgi-graph
 
# munin-graph runs in parallel, the number of concurrent processes is
# 6.  If you want munin-graph to not be parallel set to 0.  If set too
# high it will slow down munin-graph.  Some experiments are needed to
# determine how many are optimal on your system.  On a multi-core
# system with good SCSI disks the number can probably be quite high.
# 
#max_graph_jobs 6
 
# Drop somejuser@fnord.comm and anotheruser@blibb.comm an email everytime 
# something changes (OK -> WARNING, CRITICAL -> OK, etc)
#contact.someuser.command mail -s "Munin notification" somejuser@fnord.comm
#contact.anotheruser.command mail -s "Munin notification" anotheruser@blibb.comm
#
# For those with Nagios, the following might come in handy. In addition,
# the services must be defined in the Nagios server as well.
#contact.nagios.command /usr/bin/send_nsca nagios.host.comm -c /etc/nsca.conf
###Notification
#contact admin
#Определяем группу для уведомления о выявленных проблемах
#сообщения будут отправляться автоматически при достижении любого из триггеров порогового значения warning/critical
contact.admin.command mail -s "Munin notification ${var:host}" mail@gmail.com
contact.admin.always_send warning critical
# a simple host tree
[server 1] #Имя сервера/устройства которое будет отображаться на главной странице
    address 127.0.0.1 #так как, это наш главный сервер, то и адрес соответственно локальный, нам же нужно мониторить и этот сервер :-)
    use_node_name yes
#вот с этого момента, мы определяем пороговые значения триггеров, конструкция проста до безобразия <plugin_name>.<field_name>.<warning/critical>
#для того чтобы понять как работает плагин, достаточно запустить команду и указать интересующий нас плагин, например:
# munin-run df
_dev_md1.value 20.3917160180166 #дисковое пространство раздела занято на ~20 Gb
_lib_init_rw.value 0
_dev.value 0.00534102440848155
_dev_shm.value 0
_dev_md0.value 22.0106056377337 #дисковое пространство раздела занято на ~22 Gb
#отсюда можно понять, какую конструкцию нам указывать для считывания триггеров
    df._dev_md1.warning 80 # при достижении этого значения вызывается contact.admin.command и отправляется письмо на указанный адрес с пометкой WARNING
    df._dev_md1.critical 95 # при достижении этого значения вызывается contact.admin.command и отправляется письмо на указанный адрес с пометкой CRITICAl
#value может принимать значение 0:0, где 0: - минимальное значение, а :0 - максимальное, в случае с мониторингом uptime, мне необходимо отследить полное падение сервера, поэтому я хочу получать уведомление если аптайм сервера равен самому минимальному значению
    uptime.uptime.warning 0:
#можно проверить сервер на доступность с помощью пинга
    ping_server2.packetloss.warning 0 # 0 - полезно, если необходим тотальный контроль за сетевым каналом
    ping_server2.ping.warning 100 #
    ping_server3.packetloss.warning 0
    ping_server3.ping.warning 100
    hddtemp_smartctl.sda.warning 40 #мониторим температуру жесткого диска
    hddtemp_smartctl.sdb.warning 40
    postgres_xlog.segments.warning 0: #мониторим транзакцию xlog файлов, если транзакция оборвалась 0: - отправить сообщение администратору
    if_err_eth0.rcvd.warning 0: #появились ошибки на интерфейсе - шлем почту
    if_err_eth0.trans.warning 0:
    load.load.warning 5 #загрузка сервера превысила значение 5 - шлем почту 

# A list of addresses that are allowed to connect.  This must be a
# regular expression, since Net::Server does not understand CIDR-style
# network notation unless the perl module Net::CIDR is installed.  You
# may repeat the allow line as many times as you'd like
#добавляем ip-адрес нашего master-node сервера
allow ^127\.0\.0\.1$
#такая конструкция необходима, потому что Perl модуль не умеет CIDR, указываем с помощью регулярного выражения
allow ^aaa\.bbb\.ccc\.ddd$
 
#Далее в этом же файле, ниже:
# Which address to bind to;
host * #слушаем все интерфейсы
# host 127.0.0.1
 
# And which port
#стандартный порт
port 4949