CDH-集群节点下线

櫰木2年前技术文章1617

1、前期准备

  • 确认下线节点

  • 确认节点组件信息

  • 确认下线节点数据存储大小

  • 确定剩余节点存储大小

如果下线节点数据存储大小大于剩余节点存储大小,则不能进行下线,可能存在数据丢失的情况

2、操作

首先确认待下线节点中是否存在datanode,regionserver,kafka,kudu 等服务。

如果存在,则下线节点时,需要一个节点一个节点下线。不然可能丢失数据

以下以cdh为例

登录cdh的web页面


等待解除授权

3.png

4.png

在解除过程中,会出现缺少块的问题。等待块恢复完成后。就可以将此节点下线

5.png

等待****Number of Under-Replicated Blocks 为0

最后,在cdh页面下线掉对应节点

6.png

注意:****在节点下线后必须要重装对应节点。避免环境变量等其他因素影响。


相关文章

大数据组件--Hive与Impala的异同

大数据组件--Hive与Impala的异同

一、同数据存储:使用相同的存储数据池都支持把数据存储于HDFS, HBase。元数据:两者使用相同的元数据。SQL语法:基本类似。二、异1)、底层运行使用的技术hive底层默认使用mapreduce引...

ES运维(五)聚合分析流程及精准度

ES运维(五)聚合分析流程及精准度

1、 概述ES是一个近实时的搜索引擎,提供近实时海量数据的聚合分析功能,但这个海量数据聚合分析是会损失一定的精准度来满足实时性能需要的。 2、 分布式系统的近似统计算法如下图,在分布式数据分...

Docker镜像是有仓库

在Docker中,当我们执行 docker pull xxx 的时候 ,它实际上是从 hub.docker.com 这个地址去查找,这就是 Docker 公司为我们提供的公共仓库。在工作中,我们不可能...

开源大数据集群部署(十六)Hadoop集群部署(一)

按照上文中hadoop集群规划进行安装。1 HADOOP集群安装在hd1.dtstack.com主机root权限下安装hadoop集群Ø 解压[root@hd1.dtstack.com softwar...

PostgreSQL 锁等待排查

PostgreSQL 锁等待排查

说明在数据库中,常用 锁 和 MVCC 来保障事务的一致性及提高并发性。锁问题的定位和排查也是数据库运维人员必会的技能,本篇文章介绍 PostgreSQL 如何排查定位锁堵塞问题。1. Postgre...

 MySQL优化器特性(九)行数评估

MySQL优化器特性(九)行数评估

查询的行数在成本计算中起了很重要的作用:1、row_evaluate_cost和行数直接相关2、需要访问多少索引页面,和行数直接相关。根据页面大小和平均索引条目长度计算每个索引页面的记录数,根据记录数...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。