大数据集群监控配置操作指导(一)prometheus+grafana部署

芒果3年前技术文章1802

1.prometheus+grafana部署单独部署到一台服务器。4c8g。系统盘300G。操作系统建议7.67.9

1.1下载prometheus和grafana的二进制包

mkdir /opt/dtstack

cd /opt/dtstack

 

wget https://dl.grafana.com/enterprise/release/grafana-enterprise-8.3.6.linux-amd64.tar.gz

wget https://github.com/prometheus/prometheus/releases/download/v2.33.3/prometheus-2.33.3.linux-amd64.tar.gz

1.2解压prometheus和grafan,更改文件夹名称

tar -zxvf grafana-enterprise-8.3.6.linux-amd64.tar.gz

mv prometheus-2.33.3.linux-amd64 prometheus-2.33.3

 

tar -zxvf prometheus-2.33.3.linux-amd64.tar.gz

image.png


1.3创建用户

useradd prometheus

useradd grafana

1.4启动

手动执行命令不是很方便,可以将它配置成服务,用systemd来管理。

vim /etc/systemd/system/grafana.service

 

[Unit]

Description=Grafana Server

After=network.target

[Service]

User=grafana

Restart=on-failure

WorkingDirectory=/opt/dtstack/grafana-8.3.6

ExecStart=/opt/dtstack/grafana-8.3.6/bin/grafana-server

[Install]

WantedBy=multi-user.target

 

vim /etc/systemd/system/prometheus.service

 

[Unit]

Description=Prometheus Server

Documentation=https://prometheus.io/docs/introduction/overview/

After=network.target

[Service]

User=prometheus

Restart=on-failure

WorkingDirectory=/opt/dtstack/prometheus-2.33.3/

ExecStart=/opt/dtstack/prometheus-2.33.3/prometheus \

          --config.file=/opt/dtstack/prometheus-2.33.3/prometheus.yml \

          --storage.tsdb.retention=30d

[Install]

WantedBy=multi-user.target

1.5修改目录权限

chown -R prometheus:prometheus /opt/dtstack/prometheus-2.33.3

chown -R grafana:grafana /opt/dtstack/grafana-8.3.6


image.png

1.6重新载入systemd

systemctl daemon-reload

systemctl start prometheus

systemctl status prometheus

systemctl enable prometheus

 

systemctl start grafana

systemctl status grafana

systemctl enable grafana

image.png

image.png


1.7登录prometheus的web页面

http://ip:9090


image.png

1.8登录grafana的web页面,默认密码是admin/admin

建议修改管理员密码

http://ip:3000


image.png


1.9 grafana添加prometheus的数据源,找到左侧齿轮,点击data sources


image.png

1.10点击add data sources,选择prometheus


image.png

1.11配置添加一个url即可,如果grafana和prometheus不是部署在一起,localhost需要改成部署prometheus的服务器ip或者主机名


image.png

1.12点击save&test,看到data source is working,表示已经成功


相关文章

Hive 重新编译-解决Tez JobName的问题

Hive 重新编译-解决Tez JobName的问题

本文采用linux编译首先下载源码https://dlcdn.apache.org/hive/hive-3.1.2/apache-hive-3.1.2-src.tar.gz源码位置ql/src/jav...

 大数据集群监控配置操作指导(二)node_exporter+mysql_exporter部署

大数据集群监控配置操作指导(二)node_exporter+mysql_exporter部署

2.node_exporter监控集群服务器(所有集群服务器)wget https://github.com/prometheus/node_exporter/releases/download/v1...

EMR-java配置国密SM4加密

EMR-java配置国密SM4加密

首先找到bcprov-jdk15on-1.56.jar这个包<dependency>    <groupId>org.bouncycastle</groupId> ...

Haproxy配置负载均衡

yum安装haproxy如果后面要配置高可用,和keepalived配合使用更佳。yum install haproxy修改配置文件设置impala和ldap的负载均衡(Impala Daemon分布...

ranger对接metastore

ranger对接metastore

前提:本文前提是基于集群中已经安装部署了ranger组件、hive组件的情况下,增加ranger metastore插件的对接。安装部署1、ranger metastore插件编译插件下载 https...

hadoop集群集成Iceberg操作指导

hadoop集群集成Iceberg操作指导

hadoop集群集成Iceberg操作指导书一、    准备工作1.       大数据集群运行正常,完成hi...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。