#前三节基本把open-falcon上面的页面功能讲述了一遍，下面呢就要跟着官方文档了解一下一些常用应用的监控。

#链接地址：https://book.open-falcon.org/zh_0_2/usage/

一、MySQL监控实践

MySQL的数据采集可以通过mymon来做。

1.1 工作原理

       mymon是一个cron，每分钟跑一次，配置文件中配置了数据库连接地址，mymon连到该数据库，采集一些监控指标，比如global status, global variables, slave status等等，然后组装为open-falcon规定的格式的数据，post给本机的falcon-agent。falcon-agent提供了一个http接口，使用方法可以参考数据采集中的例子。比如我们有1000台机器都部署了MySQL实例，可以在这1000台机器上分别部署1000个cron，即：与数据库实例一一对应。

       远程监控mysql实例 如果希望通过hostA上的mymon、采集hostB上的mysql实例指标，你可以这样做：将hostA上mymon的配置文件中的"endpoint设置为hostB的机器名、同时将[mysql]配置项设置为hostB的mysql实例"。查看mysql指标、对mysql指标加策略时，需要找hostB机器名对应的指标。

1.2 跟着github介绍采集一波：

安装mymon：

#cd /opt/

#go get -u github.com/open-falcon/mymon

#cd $GOPATH/src/github.com/open-falcon/mymon

#make  #然后就有个报错

\033[92mRun gofmt on all source files ...\033[0m
gofmt -l -s -w ...
==> Checking that build is using go version >= 1.10...
requires go 1.10 to build; found 1.9.4.
make: *** [build] 错误 1

#上面的报错是说需要go 1.10版本而你的版本只有1.9.4

# vim Makefile   #稍微修改下Makefile文件

GO_VERSION_MIN=1.9.4
#GO_VERSION_MIN=1.10

#make  #再次make编译  #下面为编译成功的信息

\033[92mRun gofmt on all source files ...\033[0m
gofmt -l -s -w ...
==> Checking that build is using go version >= 1.9.4...
go build -o mymon

#cp -rf /opt/src/github.com/open-falcon/mymon /usr/local/open-falcon/

# vim /usr/local/open-falcon/mymon/etc/myMon.cfg 

[default]
# 工作目录
basedir = .
# 日志目录，默认日志文件为myMon.log,旧版本有log_file项，如果同时设置了，会优先采用log_file
log_dir = .
# 配置忽略的metric项
ignore_file = ./falconignore
# 保存快照(process, innodb status)的目录
snapshot_dir = ./snapshot
# 保存快照的时间(日)
snapshot_day = 10
# 日志级别[RFC5424]
# 0 Emergency
# 1 Alert
# 2 Critical
# 3 Error
# 4 Warning
# 5 Notice
# 6 Informational
# 7 Debug
log_level  = 5
# falcon agent连接地址
falcon_client=http://127.0.0.1:1988/v1/push
# 自定义endpoint
endpoint=mysql-test-00    #可以修改这里，不然就是用本地的hostname

[mysql]
# 数据库用户名
user=root
# 您的数据库密码
password=test123   #修改数据库的密码
# 数据库连接地址
host=127.0.0.1
# 数据库端口
port=3306

#crontab  -l

* * * * * cd /usr/local/open-falcon/mymon && ./mymon -c etc/myMon.cfg

查看一下测试结果：

Metric：

      采集的metric信息，请参考./metrics.txt。该文件仅供参考，实际采集信息会根据MySQL版本、配置的不同而变化。如：/usr/local/open-falcon/mymon/metrics.txt 

同步延迟：

      关于同步延迟检测的metric有两个: Seconds_Behind_Master、Heartbeats_Behind_Master。Seconds_Behind_Master是MySQLSHOW SLAVE STATUS输出的状态变量。由于低版本的MySQL还不支持HEARTBEAT_EVENT，在低版本的MySQL中该状态可能会由于IO线程假死导致测量不准确，因此mymon增加了Heartbeats_Behind_Master。它依赖于pt-heartbeat，统计基于pt-heartbeat生成的mysql.heartbeat表中的ts字段值与从库当前时间差。如果未配置pt-heartbeat，则该项上报-1值。

      关于pt-heartbeat的配置使用，链接如下： https://www.percona.com/doc/percona-toolkit/LATEST/pt-heartbeat.html。

博文来自：www.51niux.com

二、Redis监控

#Redis的数据采集可以通过采集脚本redis-monitor （https://github.com/iambocai/falcon-monit-scripts/tree/master/redis）或者 redismon来做。

2.1 工作原理

        redis-monitor是一个cron，每分钟跑一次采集脚本redis-monitor.py，其中配置了redis服务的地址，redis-monitor连到redis实例，采集一些监控指标，比如connected_clients、used_memory等等，然后组装为open-falcon规定的格式的数据，post给本机的falcon-agent。falcon-agent提供了一个http接口，使用方法可以参考数据采集中的例子。比如，我们有1000台机器都部署了Redis实例，可以在这1000台机器上分别部署1000个cron，即：与Redis实例一一对应。

2.2  redismon部署

#暂不支持哨兵模式。

# cd /opt/

# wget https://github.com/ZhuoRoger/redismon/archive/master.zip

# unzip master.zip 

# cp -rf redismon-master /usr/local/open-falcon/redismon

# vim /usr/local/open-falcon/redismon/conf/redismon.conf  # 配置当前服务器的Redis多实例信息每行记录一个实例: 集群名，密码，端口

items:
- {cluster_name: cluster_1, password: '', port: 6379}

#yum install python-yaml -y  #不安装的话执行脚本就要报ImportError: No module named yaml错误了

# pip uninstall pyyaml

#pip install requests

#pip install redis

# crontab  -l   #再来个定时任务

* * * * * cd /usr/local/open-falcon/redismon/bin/ && python redis_monitor.py > /dev/null

#这个脚本里面默认endpoint取的本地主机名，因为配置文件里面有句："endpoint":self.addr，你可以改掉这里

#查看日志文件/path/to/redismon/log/redismon.log, 如无异常信息，表示采集正常；几分钟后，可从open-falcon的dashboard中查看redis metric

查看一下：

#可以看到好多redis做tags标签然后记录是属于哪个端口哪个集群的一些指标。

redis的采集指标：

#redis采集的指标请参考这里：https://github.com/ZhuoRoger/redismon

建议设置监控告警项：

说明:系统级监控项由falcon agent提供；监控触发条件根据场景自行调整

三、MongoDB监控：

#MongoDB的部署方式跟Redis差不多这里就不详细记录了，就保存两个链接了。

官网介绍：https://book.open-falcon.org/zh_0_2/usage/MongoDB.html

github地址：https://github.com/ZhuoRoger/mongomon

四、Memcache监控：

4.1 先安装一个memcache服务

#yum install libevent libevent-devel -y

#wget memcached.org/files/memcached-1.5.12.tar.gz

#tar zxf memcached-1.5.12.tar.gz 

#cd memcached-1.5.12

#./configure --prefix=/usr/local/memcached

#make && make install

#/usr/local/memcached/bin/memcached -p 11211 -u work -m 64 &  #启动一下memcached要加-p指定端口哦

#脚本memcached-monitor.py通过ps -ef |grep memcached|grep -v grep |sed -n 's/.* *-p *\([0-9]\{1,5\}\).*/\1/p来自动发现Memcached端口的。如果Memcached启动时 没有通过 -p参数来指定端口，端口的自动发现将失败，这时需要手动修改脚本、指定端口。

4.2 安装open-falcon memcached监控脚本

# cd /home/work/scripts/

# git clone https://github.com/iambocai/falcon-monit-scripts

# vim falcon-monit-scripts/memcached/memcached-monitor.py  #找到83行修改一下IP，因为ip是个变量，默认是取得hostname(ip = socket.gethostname())，所以这里要修改成一下真正的监听IP

        try:
            # ATT: if your instance listened on 127.0.0.1, change "ip" to "127.0.0.1" in follow line
            conn = MemcachedStats("127.0.0.1", port)   #就是这里把ip改成你所需要的IP地址
            stats = conn.stats()
            conn.close()
        except:
            continue

# crontab  -l   #再来个定时任务

* * * * * cd /home/work/scripts/falcon-monit-scripts/memcached && python memcached-monitor.py > /dev/null

#然后你就默默的等，等了好久可能我擦没数据，虽然这个python脚本每次都是提示success，但是其实可能是传了个空列表上去了。

4.3 解决memcached监控脚本不采数问题

# vim falcon-monit-scripts/memcached/memcached-monitor.py   #还有一个地方要改，它这个取memcache端口的shell命令有点问题导致其实际没有取到想要的端口号而且一个错误的列表

    #insts_list = [ os.path.basename(i) for i in commands.getoutput(''' ps -ef |grep memcached|grep -v grep |sed -n 's/.* *-p *\([0-9]\{1,5\}\).*/\1/p' ''' ).split('\n') ]
    insts_list = [ os.path.basename(i) for i in commands.getoutput(''' ps -ef |grep memcached|grep -v grep|grep -o "\-p [0-9]\+"|grep -o "[0-9]\+" ''' ).split('\n') ]

#把他原来的命令注释掉改成新的shell命令就可以了。

所有memcached stats字段（pid，time除外）均汇报，除此之外，增加了以下原值：

五、RabbitMQ监控

5.1 RabbitMQ安装

安装依赖文件：

# yum -y install make gcc gcc-c++ kernel-devel m4 ncurses-devel openssl-devel unixODBC unixODBC-devel httpd python-simplejson

安装erlang语言环境：

#wget http://erlang.org/download/otp_src_19.2.tar.gz

# tar zxf otp_src_19.2.tar.gz 

# cd  otp_src_19.2

# ./configure --prefix=/usr/local/erlang

# make && make install

# vim /etc/profile

#set erlang environment
export ERL_HOME=/usr/local/erlang
export PATH=$ERL_HOME/bin:$PATH

# source /etc/profile

# erl   #如果进入erlang的shell则证明安装成功，退出即可。如下面的效果：

Erlang/OTP 19 [erts-8.2] [source] [64-bit] [async-threads:10] [hipe] [kernel-poll:false]

Eshell V8.2  (abort with ^G)
1>

下载安装RabbitMQ :

# wget http://www.rabbitmq.com/releases/rabbitmq-server/v3.6.15/rabbitmq-server-generic-unix-3.6.15.tar.xz

# xz -d rabbitmq-server-generic-unix-3.6.15.tar.xz

# tar -xvf rabbitmq-server-generic-unix-3.6.15.tar

# mv rabbitmq_server-3.6.15 /usr/local/

# ln -s /usr/local/rabbitmq-server-3.6.15 /usr/local/rabbitmq

# vim /etc/profile

#set rabbitmq environment
export PATH=$PATH:/usr/local/rabbitmq/sbin

# source /etc/profile

# /usr/local/rabbitmq/sbin/rabbitmq-server -detached   #启动rabbitmq，-detached代表后台守护进程方式启动。  #rabbitmqctl stop 关闭服务

# rabbitmqctl status   #查看状态  # rabbitmqctl list_users  列出角色

博文来自：www.51niux.com

启动Web管理插件：

# rabbitmq-plugins enable rabbitmq_management   #启动插件

# netstat  -lntup|egrep "epmd|beam"

tcp        0      0 0.0.0.0:25672           0.0.0.0:*               LISTEN      68179/beam          
tcp        0      0 0.0.0.0:4369            0.0.0.0:*               LISTEN      68136/epmd          
tcp        0      0 0.0.0.0:15672           0.0.0.0:*               LISTEN      68179/beam          
tcp6       0      0 :::5672                 :::*                    LISTEN      68179/beam          
tcp6       0      0 :::4369                 :::*                    LISTEN      68136/epmd

#4369端口是erlang发现端口，5672是client端通信口，15672是管理界面UI端口，25672是server间内部通信口。

配置访问账号密码和权限并删除匿名用户：

默认网页是不允许访问的，需要增加一个用户修改一下权限，命令如下：

# rabbitmqctl add_user admin admin123   #添加admin用户和设置密码为admin123

# rabbitmqctl set_permissions -p / admin ".*" ".*" ".*"    #添加权限

# rabbitmqctl set_user_tags admin administrator  #修改用户角色

#现在在浏览器输入服务器IP:15672就可以看到RabbitMQ的WEB管理界面了。

概念：

Broker：简单来说就是消息队列服务器实体。
Exchange：消息交换机，它指定消息按什么规则，路由到哪个队列。
Queue：消息队列载体，每个消息都会被投入到一个或多个队列。
Binding：绑定，它的作用就是把exchange和queue按照路由规则绑定起来。
Routing Key：路由关键字，exchange根据这个关键字进行消息投递。
vhost：虚拟主机，一个broker里可以开设多个vhost，用作不同用户的权限分离。
producer：消息生产者，就是投递消息的程序。
consumer：消息消费者，就是接受消息的程序。
channel：消息通道，在客户端的每个连接里，可建立多个channel，每个channel代表一个会话任务。

5.2 RMQ监控

RMQ监控脚本的部署：

#下载地址：https://github.com/iambocai/falcon-monit-scripts/tree/master/rabbitmq

#还是falcon-monit-scripts这个下面的脚本

# vim /home/work/scripts/falcon-monit-scripts/rabbitmq/rabbitmq-monitor.py

#request = urllib2.Request("http://%s:15672/api/queues" %ip)
request = urllib2.Request("http://%s:15672/api/queues" %"127.0.0.1")
#base64string = base64.b64encode('guest:guest')
base64string = base64.b64encode('admin:admin123')

# python /home/work/scripts/falcon-monit-scripts/rabbitmq/rabbitmq-monitor.py  #可以先执行以下

[]
success

#默认就是啥玩意没有，因为一个queues都没有所以data = json.loads(result.read()) 里面的data就是个空的。

#然后你可以手工或者通过web管理创建一个queues。

#crontab -l  #添加一条定时任务

* * * * * cd /home/work/scripts/falcon-monit-scripts/rabbitmq && python rabbitmq-monitor.py  > /dev/null

汇报字段：

falcon的界面查看：

#上图中的falcon_test就是创建的队列名称。