MongoDB创建索引

太阳11个月前技术文章496

一、后台创建索引

默认情况下,当我们对一个比较热点的集合创建索引时,直到索引创建完毕,该集合都是无法读写的。

1、后台创建索引语法

db.collection.createIndex( { filed: 1 }, { background: true } )

2、后台创建索引行为以及资源消耗

1)当使用后台创建索引时,不会阻塞对该集合的读写操作,但是在索引创建完成之前,会阻塞对该集合别的创建索引操作。

2)在创建索引期间,查询不会使用到未创建完毕的索引

3)MongoDB后台创建索引使用一种增量创建的办法,相对前台创建索引是要慢的,特别是当创建索引所需内存超过RAM的时候,尽量选择一个业务低峰期的时间窗口来做创建索引的操作

4)在创建索引时,如果达到了内存的限制,MongoDB会使用磁盘临时表,mongodb默认对内存使用的限制为500MB,也可以通过参数maxIndexBuildMemoryUsageMegabytes进行设置

5)在创建索引时候,如果mongod意外宕机导致创建索引中断,mongod服务默认重新启动后会前台重新创建索引,若在创建索引时报错,mongod程序会报错退出,可设置storage.indexBuildRetry参数控制mongod重启后是否前台重试创建索引。


二、单机/副本集下如何创建索引

1、单机

1)使用前台创建索引,创建索引期间需要持有global DB lock,阻塞所有读写操作

2)使用后台创建索引,创建索引期间不需要持有global DB lock,不会阻塞读写操作

2、副本集

1)在primary节点使用前台创建索引,primary节点在创建索引期间需要一个global DB lock,阻塞所有读写操作;secodary节点的复制线程在复制创建索引操作时也会持有global DB lock,阻塞对secondary节点的所有读操作。

2)在primary节点使用后台创建索引,primary节点和secondary节点在创建索引期间不需要global DB lock,不会阻塞该节点正常操作。

3)在副本集中最大程度减少创建索引对业务的影响,我们可以使用以下方法创建索引:

1.停止其中一个secondary节点并以单机模式启动

2.在该secondary节点创建索引,

3.重新以副本集模式启动该secondary节点

4.重复以上步骤对其他的secondary节点进行创建索引

5.将primary节点退位为seconary节点并创建索引

    rs.stepDown()

4)在副本集模式创建索引的一些注意点

1.如果单机模式创建唯一索引,需要停止对该集合的写入操作;否则推荐使用 db.collection.createIndex()创建索引。

2.在副本集创建索引时,需要保证secondary节点的oplog足够大,以便在创建索引成功后追上primary节点的同步。


相关文章

CDH时钟同步问题

CDH时钟同步问题

首先执行如下命令:查看chronyd是否启动systemctl status chronyd如果没启动执行如下命令启动systemctl restart chronyd每台检查时间状态chronyc...

企业级大数据安全架构(六)

企业级大数据安全架构(六)

本节详细介绍企业级大数据架构中的第六部分,数据授权和审计管理1.Ranger简介Apache Ranger是一款被设计成全面掌管Hadoop生态系统的数据安全管理框架,为Hadoop生态系统...

Prometheus基于Alertmanager实现钉钉告警

Prometheus基于Alertmanager实现钉钉告警

一、安装prometheus-webhook-dingtalk插件wget https://github.com/timonwong/prometheus-webhook-dingtalk/relea...

开源大数据集群部署(十四)Ranger集成Hbase

开源大数据集群部署(十四)Ranger集成Hbase

在hd1.dtstack.com主机上执行在hmaster和back master上进行安装和执行Ø 解压ranger-2.3.0-hbase-plugin[root@hd1.dtstack.com ...

shell编程基础(二)

1、条件表达式1.1 文件判断常用文件测试操作符:-d文件,d的全拼为directory 文件存在且为目录则为真,即测试表达式成立-f文件,f的全拼为file 文件存在且为普通文件则为真,即测试表达式...

远程DEBUG HADOOP源码方法

远程DEBUG HADOOP源码方法

1. 安装IDEA2. 下载hadoop源码,必须与集群服务代码版本一致,否则会导致有的类无法找到3. 将源码导入IDEA工程并完成build4. 点击 菜单栏--运行--编辑配置 进行相关debug...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。