位置: 编程技术 - 正文
在一个(差)的PostgreSQL 查询中只要一个小小到改动(ANY(ARRAY[...])to ANY(VALUES(...)))就能把查询时间从s缩减到0.2s。从最简单的学习使用 EXPLAIN ANALYZE开始,到学习使用 Postgres community 大量学习时间的投入将有百倍时间到回报。
使用Postgres监测慢的Postgres查询
在这周早些时候,一个用于我们的图形编辑器上的小表(GB,万行)的主键查询,在我们的一个(多个)数据库上发生来大的查询性能问题。
.9%到查询都是非常迅速流畅的,但是在一些使用大量的枚举值的地方,这些查询会需要秒。花费如此多到时间在数据库上,意味着使用者必须在浏览器面前等待图形编辑器的响应。很明显只因为这0.%就会造成很不好到影响。 查询和查询计划
下面是这个出问题的查询
表X有几千行数据,表C有万条数据。两张表的主键值“key”都有适当的索引。这是一个非常简单清晰的主键查询。但有趣的是,当增加主键内容的数量,如在主键有,个值的时候,通过在查询语句上加上 EXPLAIN (ANALYZE, BUFFERS)我们得到如下的查询计划。
在结果的最底部你可以看到,这个查询总共花费秒。我们可以非常直观的通过下面的CPU使用率图观察到这秒的花费。大部分的时间花费在 Postgres和 OS 上, 只有很少部分用于I/O . 在最低的层面,这些查询看起来就像是这些CPU利用率的峰值。CPU图很少有用,但是在这种条件下它证实了关键的一点:数据库并没有等待磁盘去读取数据。它在做一些排序,哈希以及行比较之类的事情。 第二个有趣的度量,就是距离这些峰值很近的轨迹,它们是由Postgres“取得”的行数(本例中没有返回,就看看再忽略掉吧)。 显然有些动作在规则的有条不紊的浏览过许多行:我们的查询。 Postgres 的问题所在:位图扫描 下面是行匹配的查询计划 Postgres 使用位图扫描表C. 当主键的数据量小的时候,它能有效的使用索引在内存里建立位图。如果位图太大,最优查询计划就改变查询方式了。在我们这个查询中,因为主键包含的数据量很大,所以查询就使用最优(系统自己判断的)的方式去检索查询候选行,并且立即查询所有和主键匹配的数据。就是这些¨放入内存¨和¨立即查询¨花费太多的时间(查询计划中的Recheck Cond)。 幸好只有%的数据被导入到内存中,所以还不至于像从硬盘里读取那么坏。但它仍然对性能有非常明显的影响。记住,查询是非常简单的。这是一个主键查询所以没有很多明了的方式来确定它有没有戏剧性的重新架构数据库或应用程序。PGSQL-Performance mailing list给予了我们很大的帮助. 解决方案
这是我们喜欢开源和喜欢帮助用户的另外一个原因。Tom Lane是开源代码作者中最盛产的程序员之一,他建议我们做如下尝试:
把ARRAY改成VALUES,你能指出他们的不同点吗?
我们使用ARRAY[...]列举出所有的关键字以用来查询,但是这却欺骗了查询优化器。然而Values(...)却能够让优化器充分使用关键字索引。仅仅是一行代码的改变,并且没有产生任何语义的改变。
下面是新查询语句的写法,差别就在于第三和第十四行。
查询时间从ms下降到ms,仅仅一行代码的改变效率就提高了倍。
在生产中使用的新查询 即将发布的一段代码:
它使数据库看起来更美观轻松.
第三方工具 postgres慢查询不存在了。但是有谁乐意被0.1%不幸的少数折磨。要立即验证修改查询的影响,就需要Datadog来帮助我们判断修改是否是正确的。
如果你想要找出对Postgres查询改变的影响,可能需要几分钟来注册一个免费的Datadog账号。 英文原文:x faster Postgres performance by changing 1 line
推荐整理分享修改一行代码提升 Postgres 性能 100 倍(一行的代码),希望有所帮助,仅作参考,欢迎阅读内容。
文章相关热门搜索词:怎样修改代码,一行代码5个bug,怎样修改代码,怎样修改代码,代码更改,代码怎么改,运行时修改代码,代码更改,内容如对您有帮助,希望把文章链接给更多的朋友!
Windows下PostgreSQL安装图解 现在谈起免费数据库,大多数人首先想到的可能是MySQL,的确MySQL目前已经应用在国内很多领域,尤其是网站架设方面。但是,实际上功能最强大、特性
Postgre数据库Insert 、Query性能优化详解 一、前言以前的系统由于表设计比较复杂(多张表,表与表直接有主从关系),这个是业务逻辑决定的。插入效率简直实在无法忍受,必须优化。在了
PostgreSQL管理工具phpPgAdmin入门指南 一、安装phpPgAdmin将下载的压缩包解压对于tar.gz执行如下命令:gunzipphpPgAdmin-*.tar.gztar-xvfphpPgAdmin-*.tar对于tar.bz2执行如下命令:bunzip2phpPgAdmin-*.tar.bz2tar-xvfph
标签: 一行的代码
本文链接地址:https://www.jiuchutong.com/biancheng/319655.html 转载请保留说明!友情链接: 武汉网站建设