MongoDB性能篇 -创建索引,组合索引,唯一索引,删除索引和explain执行计划

MongoDB性能篇 -创建索引,组合索引,唯一索引,删除索引和explain执行计划

转载 2015年04月13日 13:02:54
  • 337
  • 编辑
  • 删除

MongoDB性能篇 -创建索引,组合索引,唯一索引,删除索引和explain执行计划

2014-08-15 14:44:17   来源:   评论:0 点击:1165

一、索引

MongoDB 提供了多样性的索引支持,索引信息被保存在system.indexes 中,且默认总是为_id创建索引,它的索引使用基本和MySQL 等关系型数据库一样。其实可以这样说说,索引是凌驾于数据存储系统之上的另一层系统,所以各种结构迥异的存储都有相同或相似的索引实现及使用接口并不足为 奇。

1.基础索引

在字段age 上创建索引,1(升序);-1(降序):

db.users.ensureIndex({age:1})

_id 是创建表的时候自动创建的索引,此索引是不能够删除的。当系统已有大量数据时,创建索引就是个非常耗时的活,我们可以在后台执行,只需指定“backgroud:true”即可。

db.t3.ensureIndex({age:1} , {backgroud:true})

2.文档索引

索引可以任何类型的字段,甚至文档:

 
db.factories.insert( { name: "wwl", addr: { city: "Beijing", state: "BJ" } } );
//在addr 列上创建索引
db.factories.ensureIndex( { addr : 1 } );
//下面这个查询将会用到我们刚刚建立的索引
db.factories.find( { addr: { city: "Beijing", state: "BJ" } } );
//但是下面这个查询将不会用到索引,因为查询的顺序跟索引建立的顺序不一样
db.factories.find( { addr: { state: "BJ" , city: "Beijing"} } );
 

3. 组合索引

跟其它数据库产品一样,MongoDB 也是有组合索引的,下面我们将在addr.city 和addr.state上建立组合索引。当创建组合索引时,字段后面的1 表示升序,-1 表示降序,是用1 还是用-1 主要是跟排序的时候或指定范围内查询 的时候有关的。

db.factories.ensureIndex( { "addr.city" : 1, "addr.state" : 1 } );
// 下面的查询都用到了这个索引
db.factories.find( { "addr.city" : "Beijing", "addr.state" : "BJ" } );
db.factories.find( { "addr.city" : "Beijing" } );
db.factories.find().sort( { "addr.city" : 1, "addr.state" : 1 } );
db.factories.find().sort( { "addr.city" : 1 } )

4. 唯一索引

只需在ensureIndex 命令中指定”unique:true”即可创建唯一索引。例如,往表t4 中插入2 条记录:

db.t4.ensureIndex({firstname: 1, lastname: 1}, {unique: true});

5.强制使用索引

hint 命令可以强制使用某个索引。

db.t5.find({age:{$lt:30}}).hint({name:1, age:1}).explain()

6.删除索引

//删除t3 表中的所有索引
db.t3.dropIndexes()
//删除t4 表中的firstname 索引
db.t4.dropIndex({firstname: 1})

二、explain执行计划

MongoDB 提供了一个 explain 命令让我们获知系统如何处理查询请求。利用 explain 命令,我们可以很好地观察系统如何使用索引来加快检索,同时可以针对性优化索引。

 
  db.t5.ensureIndex({name:1})
  db.t5.ensureIndex({age:1})
  db.t5.find({age:{$gt:45}}, {name:1}).explain()
  {
      "cursor" : "BtreeCursor age_1",
      "nscanned" : 0,
      "nscannedObjects" : 0,
      "n" : 0,
      "millis" : 0,
      "nYields" : 0,
      "nChunkSkips" : 0,
      "isMultiKey" : false,
      "indexOnly" : false,
      "indexBounds" : {
      "age" : [
                    [45,1.7976931348623157e+308]
                ]
       }
}
 

字段说明:

  • cursor: 返回游标类型(BasicCursor 或 BtreeCursor)
  • nscanned: 被扫描的文档数量
  • n: 返回的文档数量
  • millis: 耗时(毫秒)
  • indexBounds: 所使用的索引

 

三、优化器profile

在MySQL 中,慢查询日志是经常作为我们优化数据库的依据,那在MongoDB 中是否有类似的功能呢?答案是肯定的,那就是MongoDB Database Profiler。

1.开启profiling功能

有两种方式可以控制 Profiling 的开关和级别,第一种是直接在启动参数里直接进行设置。启动MongoDB 时加上–profile=级别 即可。也可以在客户端调用db.setProfilingLevel(级别) 命令来实时配置,Profiler 信息保存在system.profile 中。我们可以通过db.getProfilingLevel()命令来获取当前的Profile 级别,类似如下操作:

db.setProfilingLevel(2);

上面profile 的级别可以取0,1,2 三个值,他们表示的意义如下:

  1. 0 – 不开启
  2. 1 – 记录慢命令 (默认为>100ms)
  3. 2 – 记录所有命令

Profile 记录在级别1 时会记录慢命令,那么这个慢的定义是什么?上面我们说到其默认为100ms,当然有默认就有设置,其设置方法和级别一样有两种,一种是通过添加 –slowms 启动参数配置。第二种是调用db.setProfilingLevel 时加上第二个参数:

db.setProfilingLevel( level , slowms )
db.setProfilingLevel( 1 , 10 );

2.查询 Profiling 记录

与MySQL 的慢查询日志不同,MongoDB Profile 记录是直接存在系统db 里的,记录位置system.profile ,所以,我们只要查询这个Collection 的记录就可以获取到我们的 Profile 记录了。列出执行时间长于某一限度(5ms)的 Profile 记录:

db.system.profile.find( { millis : { $gt : 5 } } )

MongoDB Shell 还提供了一个比较简洁的命令show profile,可列出最近5 条执行时间超过1ms 的 Profile 记录。  

四、常用性能优化方案

  1. 创建索引
  2. 限定返回结果数
  3. 只查询使用到的字段
  4. 采用capped collection
  5. 采用Server Side Code Execution
  6. 使用Hint,强制使用索引
  7. 采用Profiling

 

五、性能监控工具

1. mongosniff

此工具可以从底层监控到底有哪些命令发送给了MongoDB 去执行,从中就可以进行分析:以root 身份执行:

$./mongosniff --source NET lo

然后其会监控位到本地以localhost 监听默认27017 端口的MongoDB 的所有包请求。

2.Mongostat

此工具可以快速的查看某组运行中的MongoDB 实例的统计信息 字段说明:

  • insert: 每秒插入量
  • query: 每秒查询量
  • update: 每秒更新量
  • delete: 每秒删除量
  • locked: 锁定量
  • qr | qw: 客户端查询排队长度(读|写)
  • ar | aw: 活跃客户端量(读|写)
  • conn: 连接数
  • time: 当前时间

它每秒钟刷新一次状态值,提供良好的可读性,通过这些参数可以观察到一个整体的性能情况。

3. db.serverStatus

这个命令是最常用也是最基础的查看实例运行状态的命令之一。

4.db.stats

db.stats 查看数据库状态信息。


from:http://blog.csdn.net/loveyunwt/article/details/8067480

阅读全文
  • 本文已收录于以下专栏:
3_hzw356255531.jpg
发表评论
HTML/XML objective-c Delphi Ruby PHP C# C++ JavaScript Visual Basic Python Java CSS SQL 其它

MongoDB性能篇 -创建索引,组合索引,唯一索引,删除索引和explain执行计划

一、索引MongoDB 提供了多样性的索引支持,索引信息被保存在system.indexes 中,且默认总是为_id创建索引,它的索引使用基本和MySQL 等关系型数据库一样。其实可以这样说说...
  • YABIGNSHI
  • YABIGNSHI
  • 2015年09月15日 15:18
  • 333

MongoDB性能篇 -创建索引,组合索引,唯一索引,删除索引和explain执行计划

一、索引MongoDB 提供了多样性的索引支持,索引信息被保存在system.indexes 中,且默认总是为_id创建索引,它的索引使用基本和MySQL 等关系型数据库一样。其实可以这样说说...
  • open_data
  • open_data
  • 2015年08月05日 16:34
  • 315
MongoDB性能篇 -创建索引,组合索引,唯一索引,删除索引和explain执行计划_第1张图片

做了这件事后,这位程序员月薪从15k变身30k!

闲下来的时候,程序员为了个人成长,和培养核心价值,该怎么规划和学习呢...

MongoDB性能篇 - 索引,explain执行计划,优化器profile,性能监控mongosniff

MongoDB性能篇 - 索引,explain执行计划,优化器profile,性能监控mongosniff一、索引MongoDB 提供了多样性的索引支持,索引信息被保存在system.index...
  • huwei2003
  • huwei2003
  • 2015年08月03日 14:59
  • 8565

mysql创建多列组合唯一索引,unique index

CREATE TABLE IF NOT EXISTS `ppserver`.`eventTable`( `userId` INT UNSIGNED NOT null,...
  • chenxun2009
  • chenxun2009
  • 2017年08月04日 15:46
  • 510

oracle创建表创建唯一索引

  • 2009年05月13日 16:28
  • 5KB
  • 下载
MongoDB性能篇 -创建索引,组合索引,唯一索引,删除索引和explain执行计划_第2张图片

程序员跨越式成长指南

完成第一次跨越,你会成为具有一技之长的开发者,月薪可能翻上几番; 完成第二次跨越,你将成为拥有局部优势或行业优势的专业人士,获得个人内在价值的有效提升和外在收入的大幅跃迁……

Mysql之执行计划 查看索引利用情况 explain

Mysql之执行计划 查看索引利用情况 explain查看表索引 show index from table使用explain select * from table where ...
  • devilzy2656
  • devilzy2656
  • 2012年11月28日 16:41
  • 343

SQL Server-执行计划如何创建索引?

程序员眼中的 SQL Server-执行计划教会我如何创建索引? 先说点废话以前有 DBA 在身边的时候,从来不曾考虑过...
  • sunnie_lby
  • sunnie_lby
  • 2016年12月21日 10:27
  • 137

主键、外键、唯一索引、单索引与组合索引

主键、外键、唯一索引、单索引与组合索引一 主键概念:主关键字(primary key)是表中的一个或多个字段,它的值用于唯一地标识表中的某一条记录。通过主键,可以标识表中的唯一字段。 例如,每个...
  • mupengfei6688
  • mupengfei6688
  • 2017年11月19日 16:18
  • 93

Mysql索引介绍及常见索引(主键索引、唯一索引、普通索引、全文索引、组合索引)的区别

Mysql索引介绍及常见索引(主键索引、唯一索引、普通索引、全文索引、组合索引)的区别Mysql索引概念:说说Mysql索引,看到一个很少比如:索引就好比一本书的目录,它会让你更快的找到内容,显然目...
  • qq_26291823
  • qq_26291823
  • 2016年07月18日 11:35
  • 406

Mysql学习-索引总结(B-tree和hash、主键索引、唯一索引、普通索引、全文索引和组合索引)

对最近学习的mysql中的索引经行总结。其主要内容包括唯一索引、B-tree、哈希索引(自定义哈希索引和Innodb自适应哈希索引)和全文索引(自然语言搜索和布尔搜索)。参考书籍和文章是《Mysql技...
  • V_victor
  • V_victor
  • 2016年08月17日 17:38
  • 4443

Mysql主键索引、唯一索引、普通索引、全文索引、组合索引的区别

Mysql主键索引、唯一索引、普通索引、全文索引、组合索引的区别
  • leyangjun
  • leyangjun
  • 2015年01月06日 17:26
  • 1264

Mysql索引介绍及常见索引类别(主键索引、唯一索引、普通索引、全文索引、组合索引)的区别

Mysql索引概念:说说Mysql索引,看到一个很少比如:索引就好比一本书的目录,它会让你更快的找到内容,显然目录(索引)并不是越多越好,假如这本书1000页,有500也是目录,它当然效率低,目录是...
  • kingmax54212008
  • kingmax54212008
  • 2015年11月14日 16:05
  • 1617

MongoDB 唯一索引

MongoDB支持的索引种类很多,诸如单键索引,复合索引,多键索引,TTL索引,文本索引,空间地理索引等。同时索引的属性可以具有唯一性,即唯一索引。唯一索引用于确保索引字段不存储重复的值,即强制索引字...
  • robinson_0612
  • robinson_0612
  • 2016年12月22日 17:02
  • 4696

在使用mongoDB 中Group时,分组字段不是唯一索引记录数不能大于2000

我在一次统计中,用mongoDB中的Group 对一张记录数100W表进行汇总。结果出现异常信息。Error in executing GroupByCommand 'group' fai...
  • h70614959
  • h70614959
  • 2013年05月09日 11:53
  • 2968

分析Oracle有时会用索引来查找数据的原因-oracle执行计划

http://www.webjx.com/database/oracle-140.html 问:为什么Oracle有时会用索引来查找数据? 答:在你运用SQL语言,向数据库发布一条查询语句...
  • caolaosanahnu
  • caolaosanahnu
  • 2012年01月09日 10:17
  • 383

MongoDB组合索引的优化

索引在查询中占的地位无疑是重中之重,因此建立一个好的索引对查询性能的影响也是立竿见影。来自10gen工程师A. Jesse JiryuDavis带来的MongoDB上索引的优化方法以及MongoD...
  • u010951300
  • u010951300
  • 2016年08月15日 15:00
  • 125

INFA技术超群_中文KB_00009_PWX_如何实现无主键和唯一索引目标表的数据同步

  • 2014年12月26日 08:59
  • 3.47MB
  • 下载

MongoDB组合索引的优化

A. Jesse Jiryu Davis —— 10gen工程师,从事MongoDB、Python及Tornado。在Dzone上分享了MongoDB中组合索引的最佳建立方法以及索引中字段的最优顺序。...
  • neutrojan
  • neutrojan
  • 2014年03月21日 11:31
  • 5335

10gen工程师谈MongoDB组合索引的优化

A. Jesse Jiryu Davis —— 10gen工程师,从事MongoDB、Python及Tornado。在Dzone上分享了MongoDB中组合索引的最佳建立方法以及索引中字段的最优顺序。...
  • shmnh
  • shmnh
  • 2014年12月14日 03:05
  • 387

执行计划索引查询被拆分为并行度问题

  • 2010年01月13日 16:29
  • 271KB
  • 下载

相关推荐

  • MongoDB性能篇 -创建索引,组合索引,唯一索引,删除索引和explain执行计划
  • MongoDB性能篇 -创建索引,组合索引,唯一索引,删除索引和explain执行计划
  • MongoDB性能篇 - 索引,explain执行计划,优化器profile,性能监控mongosniff
  • mysql创建多列组合唯一索引,unique index

在线课程

  • Python全栈工程师

    Python全栈工程师

    作者:韦玮

  • 人工智能工程师直通车

    人工智能工程师直通车

    作者:卿来云

  • Web前端工程师

    Web前端工程师

    作者:曾亮

他的热门文章

  • Hadoop Mapreduce优先级调度
    3245
  • hive 自定定义函数 从hdfs中加载jar
    2752
  • oozie 参数含义
    989
  • 各种格式化-JSTL中fmt标签详解
    954
  • 解决eclipse复制代码到word中没有颜色的难题
    925

你可能感兴趣的:(数据库,大数据)