MongoDB 计划缓存的影响
admin
2023-04-11 16:43:44
0

MongoDB 计划缓存的影响

 

MongoDB 2.6 复制集Primary创建索引后,发现Secondary的查询没有走最新的索引。

 

临时清理掉该集合的计划缓存后正常。笔者观察到出现性能问题时,语句并没有走最优的执行计划。

 

对于MongoDB 3.0.3及之前的版本,可以通过如下两种方法得到解决:  
1. 对于查询显式指定hints。    
2. 设置查询计划缓存索引过滤器来重写默认查询计划。

 

在3.0.4版本中修复了。

SERVER-15225,SERVER-20139  
https://jira.mongodb.org/browse/SERVER-15225

    执行计划cache的刷新问题,对同一种类查询,执行计划有cache就不去验证,同一种类查询但是条件不同可能的执行情况也不同。

    可以通过internalQueryCacheReplanningEnabled参数的设置来解决  
    The query optimizer caches plans for each query shape and reuses these plans for a time. In situations where the performance of the cached plan is poor for a particular instance of the query shape, the optimizer may select a the plan with poor performance and fail to evict the cache entry. This behavior may impact deployments where two queries with the same shape have different performance characteristics if they have different selectivity.    
    This improvement makes the query planner evaluate the cost of the cached query plan, and if the cost of this plan is too high, the query planner switches to a more efficient plan. This more efficient plan is then cached for future use.    
    This improvement is not enabled by default. To enable by default set the internalQueryCacheReplanningEnabled parameter totrue using the setParameter command on a running system, or at start time using the setParameter commandline option orsetParameter in the configuration file.    
    For example, to enable using setParameter:    
    db.runCommand({setParameter: 1, internalQueryCacheReplanningEnabled: true})    
    This improvement can be disabled as follows:    
    db.runCommand({setParameter: 1, internalQueryCacheReplanningEnabled: false})    
    3.0.4可以使用这个参数,默认是关闭

 

查询计划

在给定可用索引的情况下,MongoDB查询优化器处理查询并且选择出针对某查询而言最高效的查询计划。每次查询执行的时候,查询系统都会使用该查询计划。


查询优化器只会对那些看起来有多个可行计划的查询计划进行缓存。


集合内容发生改变的时候,查询优化器会重新评估查询计划,以保证最优的查询计划。您可以通过使用 索引过滤器 来指定优化器评估的索引。


针对一个给定查询,您可以使用 explain() 方法查看查询计划的统计。

 

查询计划修订

伴随着集合随着时间的变化而变化,在下面几种情形之一,查询优化器都会删除查询计划并且对其进行重新评估:  
    1. 集合接收1,000个写操作。    
    2. The reIndex rebuilds the index.    
    3. 您增加或者删除一个索引。    
    4. The mongod process restarts.

 

缓存查询计划接口

2.6新版功能


MongoDB提供了查询计划缓存命令和方法来查看和修改已缓存的查询计划。

db.runCommand( { planCacheListFilters: Product } )
db.runCommand(    
   {    
      planCacheListPlans: "Product",    
      query: { Path: /^9-1-6(-\d+)*$/, "Status": { $lt: 4 } }    
   }    
)
db.runCommand(    
   {    
      planCacheClear: "Product",    
      query: { Path: /^9-1-6(-\d+)*$/, "Status": { $lt: 4 } }    
   }    
)
db.runCommand(    
   {    
      planCacheClear: "Product"    
   }    
)

索引过滤器

2.6 新版功能.


索引过滤器会决定优化器评估哪一个索引作为一个 query shape 。一个查询形状由查询、排序以及映射说明组成。如果一个给定的查询形状存在一个索引过滤器,优化器将只会考虑过滤器中指定的这些索引。


当查询形状中存在一个索引过滤器时,MongoDB将会忽略 hint() 。如果您想了解MongoDB是否对一个查询使用了索引过滤器,您可以检查一下 explain() 输出的 explain.filterSet 字段。


索引过滤器只会影响到优化器评估的索引,优化器有可能会仍然选择集合扫描作为某给定查询形状的优胜方案。


索引过滤器只存在于服务器进程中,在关机之后并不会保存。MongoDB也提供了一个命令手动删除过滤器。


由于索引过滤器重写了优化器以及 hint() 方法预期的操作,请合理使用索引过滤器。

db.runCommand(  
   {    
      planCacheSetFilter: "orders",    
      query: { item: "ABC" },    
      projection: { quantity: 1, _id: 0 },    
      sort: { order_date: 1 },    
      indexes: [    
         { item: 1, order_date: 1 , quantity: 1 }    
      ]    
   }    
)


相关内容

热门资讯

魏平政出线几率高!国民党整合拼... 海峡导报综合报道 国民党迟未公布彰化县长人选,地方盛传,周三国民党中常可能会有答案,引发关注。对此,...
人均奖金600万,知道内存为什... 唯物的中国芯片产业深度观察AI带动存储狂飙,韩国存储大厂SK海力士也跟着起飞。近日,有投行预测其年终...
“洪迪厄斯”号邮轮最后一批转运... △当地时间5月11日,荷兰埃因霍温,身着防护服的人员在机场载有“洪迪厄斯”号乘客和船员的飞机旁工作当...
特朗普当场问:谁喜欢万斯?谁喜... 美国副总统万斯和国务卿鲁比奥谁会成为2028年共和党总统候选人备受关注,总统特朗普5月11日在白宫的...
实探杭州“被电商拉黑”街道:随... 据扬子晚报报道,5月6日,一名网友在社媒发帖称,自己在某电商平台看中了一款商品,商品界面却显示其地址...
大连女子烧烤店内用铁签喂狗,十... 5月11日,一段网传视频显示,女子让宠物狗坐在辽宁大连一家烧烤店的卡座上,并用铁签将肉串喂给宠物狗,...
沃尔核材获得实用新型专利授权:... 证券之星消息,根据天眼查APP数据显示沃尔核材(002130)新获得一项实用新型专利授权,专利名为“...
科技伦理审查助力人工智能产业高... 转自:证券日报     本报记者 郭冀川     随着AI(人工智能)技术迭代加速,相关伦理审查的重...
捷昌驱动获得实用新型专利授权:... 证券之星消息,根据天眼查APP数据显示捷昌驱动(603583)新获得一项实用新型专利授权,专利名为“...
2026云手机为什么这么火?这... 你是否也有过这样的念头:想试试云手机,但一看价格,月付几十甚至上百元,立马打了退堂鼓?又或者,你曾贪...