锐客网

  1. 首页 > 睿知 > it技术 > >

rrd数据库php re数据库( 二 )

IT技术配置


# the host who gather this cluster's monitoring data and send these datato gmetad node
host = ip1
port = 8649}
udp_recv_channel {
port = 8649}
tcp_accept_channel {
port = 8649}1234567891011121314151617
Hadoop配置
主节点：
# 修改/hadoop/etc/hadoop/hadoop-metrics2.propertiesnamenode.sink.ganglia.servers=ip1:8649resourcemanager.sink.ganglia.servers=ip1:8649mrappmaster.sink.ganglia.servers=ip1:8649jobhistoryserver.sink.ganglia.servers=ip1:8649*.sink.ganglia.class=org.apache.hadoop.metrics2.sink.ganglia.GangliaSink31
*.sink.ganglia.period=10*.sink.ganglia.supportsparse=true
*.sink.ganglia.slope=jvm.metrics.gcCount=zero,jvm.metrics.memHeapUsedM=both
*.sink.ganglia.dmax=jvm.metrics.threadsBlocked=70,jvm.metrics.memHeapUsedM=401234567891011
从节点
datanode.sink.ganglia.servers=ip1:8649nodemanager.sink.ganglia.servers=ip1:8649*.sink.ganglia.class=org.apache.hadoop.metrics2.sink.ganglia.GangliaSink31
*.sink.ganglia.period=10*.sink.ganglia.supportsparse=true
*.sink.ganglia.slope=jvm.metrics.gcCount=zero,jvm.metrics.memHeapUsedM=both
*.sink.ganglia.dmax=jvm.metrics.threadsBlocked=70,jvm.metrics.memHeapUsedM=401234567
成果
可以看到有datanode相关信息
注意问题
ganglia反应有点慢，每次重启后，数据得等一阵子才显示出来 。这个也跟设置的有关，10秒一次显示
我本来配置每个节点都有gmond，cluster的信息发送到本地的gmond，由gmond发送给gmetad，但是一直不成功 。我使用了telnet localhost 8649，能看到数据，但是gmetad就是不显示 。暂时也没找到什么原因 。
如何设计一个mysql性能监控的软件首先介绍下 pt-stalk，它是 Percona-Toolkit 工具包中的一个工具，说起 PT 工具包大家都不陌生，平时常用的 pt-query-digest、 pt-online-schema-change 等工具都是出自于这个工具包，这里就不多介绍了 。
pt-stalk 的主要功能是在出现问题时收集 OS 及 MySQL 的诊断信息，这其中包括：
1. OS 层面的 CPU、IO、内存、磁盘、网络等信息；
2. MySQL 层面的行锁等待、会话连接、主从复制，状态参数等信息 。
而且 pt-stalk 是一个 Shell脚本，对于我这种看不懂 perl 的人来说比较友好，脚本里面的监控逻辑与监控命令也可以拿来参考，用于构建自己的监控体系 。
三、使用
接着我们来看下如何使用这个工具 。
pt-stalk 通常以后台服务形式监控 MySQL 并等待触发条件，当触发条件时收集相关诊断数据 。
触发条件相关的参数有以下几个：
function：
° 默认为 status ， 代表监控 SHOW GLOBAL STATUS 的输出；
° 也可以设置为 processlist，代表监控 show processlist 的输出；
variable：
° 默认为 Threads_running，代表 监控参数，根据上述监控输出指定具体的监控项；
threshold：
° 默认为 25，代表 监控阈值，监控参数超过阈值，则满足触发条件；
° 监控参数的值非数字时 ， 需要配合 match 参数一起使用，如 processlist 的 state 列；
cycles：
° 默认为 5，表示连续观察到五次满足触发条件时，才触发收集；
连接参数：host、password、port、socket 。
其他一些重要参数：
iterations：该参数指定 pt-stalk 在触发收集几次后退出，默认会一直运行 。
run-time：触发收集后，该参数指定收集多长时间的数据，默认 30 秒 。
sleep：该参数指定在触发收集后，sleep 多久后继续监控，默认 300 秒 。
interval：指定状态参数的检查频率 ， 判断是否需要触发收集，默认 1 秒 。
dest：监控数据存放路径 ， 默认为 /var/lib/pt-stalk 。
retention-time ：监控数据保留时长，默认 30 天 。

推荐阅读


上一篇：小丑代理是什么平台直播，小丑全代

下一篇：jquery页面刷新1次，jquery 页面刷新