Elasticsearch数据生命周期如何规划
南墨1年前647
Elasticsearch中的open状态的索引都会占用堆内存来存储倒排索引，过多的索引会导致集群整体内存使用率多大，甚至引起内存溢出。所以需要根据自身业务管理历史数据的生命周期，如近3个月的数据op...
Flink sql 集成hive metastore对接s3存储
櫰木1年前1232
1、hive metastore使用s3如何适配1、在flink conf目录中添加core-site.xml和hive-site.xml<?xml version="1.0" encoding...
ChaosBlade介绍
南墨1年前767
ChaosBlade 是阿里巴巴开源的一款遵循混沌工程原理和混沌实验模型的实验注入工具，帮助企业提升分布式系统的容错能力，并且在企业上云或往云原生系统迁移过程中业务连续性保障。Chaosblade 是...
ElasticSearch shard&replica机制梳理和创建index图解
櫰木1年前714
1、shard&replica的机制梳理1个index包含多个shard。一个shard包含index的部分数据...
Ranger-usync用户同步-LDAP
櫰木1年前1272
1、修改配置**cd /opt/ranger-2.3.0-usersync/ **SYNC_SOURCE = ldap SYNC_LDAP_URL = lda...
hbase-auto balancer失效
櫰木1年前637
背景集群中，发现hbase 的compaction 队列一直增长，出现hang住的情况，排查发现，一些表的region集中在某些机器上，分布不均匀。但是排查发现auto balancer是默认开启的。...