写给MongoDB开发者的50条建议Tip22
admin
2023-04-14 05:01:38
0

本系列文章翻译自《50 Tips and Tricks for MongoDB Developers》,暂时没有找到中文版,反正自己最近也在深入学习mongodb,所以正好拿来翻译一下。一方面加强自己学习的效果,另一方面让大 家也一起来体验一下需要我们这些mongodb使用者需要注意的地方。

首先声明自己的英文水平不是太高,加之有些英文翻译成中文也找不到合适的词来表达,所以在文章中可能会出现英文原词,或者说有些地方的翻译会有些生 硬,也就是说会出现直译的地方。翻译该书的主要目的是为大家学习探讨用的,如果有翻译不精准的地方,或者说有更加精准的翻译,还请大家指出,我会及时的更 正的,在此先谢过各位了。

Tip#22.Use indexes to do more with less memory

通过索引实现用较少的内存做更多的事情

图22.1是一张查询请求的示意图。

 

写给MongoDB开发者的50条建议Tip22

图22.1 查询流程图

假设你有一台机器,有256G的数据,16G的内存。大部分数据在一个集合中,并且你正在查询这个集合。mongodb会怎么做呢?

假设每页包含4K的数据。

mongodb将第一页从磁盘加载到内存中,然后和你的查询比较。然后再加载一页,和你的查询比较,再加载一页。这样会加载整个256G的数据。没有什么捷径,不查看文档,它不知道那个文档是匹配查询请求的,因此它必须要查看所有的文档才会知道那些文档是符合查询条件的。因此,需要加载所有256G的数据到内存中(操作系统需要把旧的数据交换出内存,需要加载新的数据)。这样会花费很长的时间。

如何才能避免在一次查询中不加载所有256G数据到内存呢?我们可以告诉mongodb在字段x上建立索引,mongodb会建立一棵树,保存字段的值。mongodb会预处理这些数据,将集合中x字段的值都加到一个有序数中(如图22.2)。树的每个节点包含一个x的值,和指向包含x值的文档的指针。

 

写给MongoDB开发者的50条建议Tip22

图22.2 有序B树

树只包含一个执行文档的指针,而不是文档本身,意味着索引要比整个集合小很多。

当你的查询中包含x字段的时候,mongodb会注意到查询条件中包含一个索引字段x,会通过有序树来查询x。现在,不是查找每一个文档了。mongodb就回问,x是大于当前节点的值?还是小于当前节点的值?如果大于,就去右节点中继续找;如果小于,就去左节点中继续找。将会以这种方式继续查找,直到找到节点值是x的节点。如果找到了,就会根据节点指针找到对应的文档,返回文档(如图22.3)。

 

写给MongoDB开发者的50条建议Tip22

图22.3 一个包含值的索引指向一个文档

如果不使用索引,我们需要加载6400万页的数据到内存中。

 

  1. Pages of data: 256G/(4KB/page)=64 million pages 

 

假设我们的索引是80G。索引是2000万页。

 

  1. Numbers of pages in our index: 80G/(4KB/page)=20 million pages 

因为索引是有序的,意味着我们不用查找每一个。我们只需要加载特定的节点。那么是多少呢?

 

  1. Numbers of pages of the index that must be loaded into memory: len(20,000,000)=17 pages 

从6400万页下降到17页!

当然了,不只是17页。一旦我们在索引中找到结果,就需要将对应的文档加载到内存中,因此还需要加载文档大小的页。和之前的整个集合相比,还是小了很多。

希望你现在可以想象出索引对于加快查询的帮助有多么大了。

相关内容

热门资讯

还是谈不成,特朗普没招了 作者 | 谢奕秋 编辑 | 阿树美伊新一轮的和平提议交换,至5月10日宣告无果而终。伊朗对美国提案的...
网传“45岁独身男子病逝15万... 近日,南京一位老人照顾独身病侄,侄子离世后15万存款被转走的事件引发广泛关注。5月12日,针对网传“...
亚太经合组织电信工作组第72次... 来源:上海证券报·中国证券网 上证报中国证券网讯 据工业和信息化部5月12日消息,5月11日,亚太经...
银星能源获得实用新型专利授权:... 证券之星消息,根据天眼查APP数据显示银星能源(000862)新获得一项实用新型专利授权,专利名为“...
特朗普访华在即,随行商界大咖都... 美国总统特朗普将于5月13日至15日对中国进行国事访问。这是中美两国元首继去年10月釜山之后再次面对...
有线电视机顶盒安装问题求安装方... 有线电视安装说明: 一、将白色有线电视线一端连接有线电视终端盒另一端连接机顶盒后的射频输入口。 ...
60寸电视机尺寸画面长宽是多少...   60寸的液晶电视,60寸就是指电视屏幕对角线长度,因为长宽比有两种情况,经过寸转化为厘米计算之后...
长城电视机尺寸测量方法 长城电视机的尺寸测量方法与其他品牌的电视机测量方法基本相同。需要准备的工具有卷尺或直尺等测量工具,以...
伊朗学者:美伊能否达成协议,取... 伊朗5月10日就美国最新停战方案提交响应后,美国总统特朗普当天发文指出,伊方的响应“完全不可接受”。...
50英寸电视机尺寸是多少厘米 50 英寸电视机的尺寸通常是指屏幕对角线的长度,1 英寸约等于 2.54 厘米,因此 50 英寸电视...