锐客网

  1. 首页 > 生活百科 > it技术 > >

BigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化

大数据学习bigdataBigData

前言 CLK虽然底层提供了自身状态的运行记录并记录到系统表中**(SYSTEM.*)**,但是对于运维人员来说,每次去查看这些数据会比较麻烦,现在 Prometheus + Grafana 的组合比较流行,达到监控+可视化的目的
安装Prometheus 上传并解压
BigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化
文章图片

修改配置文件,一定要和文件中的格式保持一致(哪怕是空格也要保持一致)

后台启动

nohup ./prometheus --config.file=prometheus.yml > ./prometheus.log 2>&1 &

网页访问9090,普罗米修斯显示绿色UP代表安装成功

安装Grafana Grafana比较简单,解压后直接启动就行了
nohup ./bin/grafana-server web > ./grafana.log 2>&1 &

页面3030,账号密码都是admin

Prometheus整合CLK 每个节点都修改如下配置
BigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化
文章图片

然后重启CLK
sudo clickhouse restart
访问没问题说明成功
http://xxx:9363/metrics
Grafana 整合Prometheus
  1. 打开GRF页面,点击 Data SourcesBigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化
    文章图片
  2. 点击添加按钮
BigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化
文章图片

  1. 找到 Prometheus选项,点击 Select
    BigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化
    文章图片
  2. 配置 Prometheus Server 地址：
    BigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化
    文章图片
  3. 点击下方的 Test,如果没问题Save保存即可
    BigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化
    文章图片

    BigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化
    文章图片
  4. 点击 Back 返回，可以看到 Data Sources 页面，出现了添加的 Prometheus
    BigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化
    文章图片
添加监控 Grafana 中所有的 Dashboard 通过 JSON 进行共享，下载并且导入这些 JSON 文件，就可以直接使用这些已经定义好的 Dashboard
【BigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化】https://grafana.com/grafana/dashboards/
  1. 点击左侧 ”+”号，选择 import：
    BigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化
    文章图片
  2. 上传 JSON 文件：
    BigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化
    文章图片
  3. 做个查询,可以看到曲线图BigData|[大数据学习之ClickHouse]14-ClickHouse监控/可视化
    文章图片

    推荐阅读


    上一篇：clickhouse|clickhouse join_HDFS+ClickHouse+Spark（从0到1实现一款轻量级大数据分析系统）

    下一篇：行业应用场景|敢不敢和佳信文本机器人PK，你和它哪个更高情商~