扫二维码与项目经理沟通
我们在微信上24小时期待你的声音
解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流
MongoDB 计划缓存的影响
创新互联主营卓资网站建设的网络公司,主营网站建设方案,重庆APP开发,卓资h5小程序开发搭建,卓资网站营销推广欢迎卓资等地区企业咨询MongoDB 2.6 复制集Primary创建索引后,发现Secondary的查询没有走最新的索引。
临时清理掉该集合的计划缓存后正常。笔者观察到出现性能问题时,语句并没有走最优的执行计划。
对于MongoDB 3.0.3及之前的版本,可以通过如下两种方法得到解决:
1. 对于查询显式指定hints。
2. 设置查询计划缓存索引过滤器来重写默认查询计划。
在3.0.4版本中修复了。
SERVER-15225,SERVER-20139
https://jira.mongodb.org/browse/SERVER-15225
执行计划cache的刷新问题,对同一种类查询,执行计划有cache就不去验证,同一种类查询但是条件不同可能的执行情况也不同。
可以通过internalQueryCacheReplanningEnabled参数的设置来解决
The query optimizer caches plans for each query shape and reuses these plans for a time. In situations where the performance of the cached plan is poor for a particular instance of the query shape, the optimizer may select a the plan with poor performance and fail to evict the cache entry. This behavior may impact deployments where two queries with the same shape have different performance characteristics if they have different selectivity.
This improvement makes the query planner evaluate the cost of the cached query plan, and if the cost of this plan is too high, the query planner switches to a more efficient plan. This more efficient plan is then cached for future use.
This improvement is not enabled by default. To enable by default set the internalQueryCacheReplanningEnabled parameter totrue using the setParameter command on a running system, or at start time using the setParameter commandline option orsetParameter in the configuration file.
For example, to enable using setParameter:
db.runCommand({setParameter: 1, internalQueryCacheReplanningEnabled: true})
This improvement can be disabled as follows:
db.runCommand({setParameter: 1, internalQueryCacheReplanningEnabled: false})
3.0.4可以使用这个参数,默认是关闭
查询计划
在给定可用索引的情况下,MongoDB查询优化器处理查询并且选择出针对某查询而言高效的查询计划。每次查询执行的时候,查询系统都会使用该查询计划。
查询优化器只会对那些看起来有多个可行计划的查询计划进行缓存。
集合内容发生改变的时候,查询优化器会重新评估查询计划,以保证最优的查询计划。您可以通过使用 索引过滤器 来指定优化器评估的索引。
针对一个给定查询,您可以使用 explain() 方法查看查询计划的统计。
查询计划修订
伴随着集合随着时间的变化而变化,在下面几种情形之一,查询优化器都会删除查询计划并且对其进行重新评估:
1. 集合接收1,000个写操作。
2. The reIndex rebuilds the index.
3. 您增加或者删除一个索引。
4. The mongod process restarts.
缓存查询计划接口
2.6新版功能
MongoDB提供了查询计划缓存命令和方法来查看和修改已缓存的查询计划。
db.runCommand( { planCacheListFilters: Product } ) db.runCommand( { planCacheListPlans: "Product", query: { Path: /^9-1-6(-\d+)*$/, "Status": { $lt: 4 } } } ) db.runCommand( { planCacheClear: "Product", query: { Path: /^9-1-6(-\d+)*$/, "Status": { $lt: 4 } } } ) db.runCommand( { planCacheClear: "Product" } )索引过滤器
2.6 新版功能.
索引过滤器会决定优化器评估哪一个索引作为一个 query shape 。一个查询形状由查询、排序以及映射说明组成。如果一个给定的查询形状存在一个索引过滤器,优化器将只会考虑过滤器中指定的这些索引。
当查询形状中存在一个索引过滤器时,MongoDB将会忽略 hint() 。如果您想了解MongoDB是否对一个查询使用了索引过滤器,您可以检查一下 explain() 输出的 explain.filterSet 字段。
索引过滤器只会影响到优化器评估的索引,优化器有可能会仍然选择集合扫描作为某给定查询形状的优胜方案。
索引过滤器只存在于服务器进程中,在关机之后并不会保存。MongoDB也提供了一个命令手动删除过滤器。
由于索引过滤器重写了优化器以及 hint() 方法预期的操作,请合理使用索引过滤器。
db.runCommand( { planCacheSetFilter: "orders", query: { item: "ABC" }, projection: { quantity: 1, _id: 0 }, sort: { order_date: 1 }, indexes: [ { item: 1, order_date: 1 , quantity: 1 } ] } )另外有需要云服务器可以了解下创新互联cdcxhl.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。
我们在微信上24小时期待你的声音
解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流