位置: 编程技术 - 正文

修改一行代码提升 Postgres 性能 100 倍(一行的代码)

编辑:rootadmin

在一个(差)的PostgreSQL 查询中只要一个小小到改动(ANY(ARRAY[...])to ANY(VALUES(...)))就能把查询时间从s缩减到0.2s。从最简单的学习使用 EXPLAIN ANALYZE开始,到学习使用 Postgres community 大量学习时间的投入将有百倍时间到回报。

使用Postgres监测慢的Postgres查询

在这周早些时候,一个用于我们的图形编辑器上的小表(GB,万行)的主键查询,在我们的一个(多个)数据库上发生来大的查询性能问题。

.9%到查询都是非常迅速流畅的,但是在一些使用大量的枚举值的地方,这些查询会需要秒。花费如此多到时间在数据库上,意味着使用者必须在浏览器面前等待图形编辑器的响应。很明显只因为这0.%就会造成很不好到影响。 查询和查询计划

下面是这个出问题的查询

表X有几千行数据,表C有万条数据。两张表的主键值“key”都有适当的索引。这是一个非常简单清晰的主键查询。但有趣的是,当增加主键内容的数量,如在主键有,个值的时候,通过在查询语句上加上 EXPLAIN (ANALYZE, BUFFERS)我们得到如下的查询计划。

在结果的最底部你可以看到,这个查询总共花费秒。我们可以非常直观的通过下面的CPU使用率图观察到这秒的花费。大部分的时间花费在 Postgres和 OS 上, 只有很少部分用于I/O . 在最低的层面,这些查询看起来就像是这些CPU利用率的峰值。CPU图很少有用,但是在这种条件下它证实了关键的一点:数据库并没有等待磁盘去读取数据。它在做一些排序,哈希以及行比较之类的事情。 第二个有趣的度量,就是距离这些峰值很近的轨迹,它们是由Postgres“取得”的行数(本例中没有返回,就看看再忽略掉吧)。 显然有些动作在规则的有条不紊的浏览过许多行:我们的查询。 Postgres 的问题所在:位图扫描 下面是行匹配的查询计划 Postgres 使用位图扫描表C. 当主键的数据量小的时候,它能有效的使用索引在内存里建立位图。如果位图太大,最优查询计划就改变查询方式了。在我们这个查询中,因为主键包含的数据量很大,所以查询就使用最优(系统自己判断的)的方式去检索查询候选行,并且立即查询所有和主键匹配的数据。就是这些¨放入内存¨和¨立即查询¨花费太多的时间(查询计划中的Recheck Cond)。 幸好只有%的数据被导入到内存中,所以还不至于像从硬盘里读取那么坏。但它仍然对性能有非常明显的影响。记住,查询是非常简单的。这是一个主键查询所以没有很多明了的方式来确定它有没有戏剧性的重新架构数据库或应用程序。PGSQL-Performance mailing list给予了我们很大的帮助. 解决方案

这是我们喜欢开源和喜欢帮助用户的另外一个原因。Tom Lane是开源代码作者中最盛产的程序员之一,他建议我们做如下尝试:

把ARRAY改成VALUES,你能指出他们的不同点吗?

我们使用ARRAY[...]列举出所有的关键字以用来查询,但是这却欺骗了查询优化器。然而Values(...)却能够让优化器充分使用关键字索引。仅仅是一行代码的改变,并且没有产生任何语义的改变。

下面是新查询语句的写法,差别就在于第三和第十四行。

查询时间从ms下降到ms,仅仅一行代码的改变效率就提高了倍。

在生产中使用的新查询 即将发布的一段代码:

它使数据库看起来更美观轻松.

第三方工具 postgres慢查询不存在了。但是有谁乐意被0.1%不幸的少数折磨。要立即验证修改查询的影响,就需要Datadog来帮助我们判断修改是否是正确的。

如果你想要找出对Postgres查询改变的影响,可能需要几分钟来注册一个免费的Datadog账号。 英文原文:x faster Postgres performance by changing 1 line

推荐整理分享修改一行代码提升 Postgres 性能 100 倍(一行的代码),希望有所帮助,仅作参考,欢迎阅读内容。

修改一行代码提升 Postgres 性能 100 倍(一行的代码)

文章相关热门搜索词:怎样修改代码,一行代码5个bug,怎样修改代码,怎样修改代码,代码更改,代码怎么改,运行时修改代码,代码更改,内容如对您有帮助,希望把文章链接给更多的朋友!

Windows下PostgreSQL安装图解 现在谈起免费数据库,大多数人首先想到的可能是MySQL,的确MySQL目前已经应用在国内很多领域,尤其是网站架设方面。但是,实际上功能最强大、特性

Postgre数据库Insert 、Query性能优化详解 一、前言以前的系统由于表设计比较复杂(多张表,表与表直接有主从关系),这个是业务逻辑决定的。插入效率简直实在无法忍受,必须优化。在了

PostgreSQL管理工具phpPgAdmin入门指南 一、安装phpPgAdmin将下载的压缩包解压对于tar.gz执行如下命令:gunzipphpPgAdmin-*.tar.gztar-xvfphpPgAdmin-*.tar对于tar.bz2执行如下命令:bunzip2phpPgAdmin-*.tar.bz2tar-xvfph

标签: 一行的代码

本文链接地址:https://www.jiuchutong.com/biancheng/319655.html 转载请保留说明!

上一篇:PostgreSQL 查看数据库,索引,表,表空间大小的示例代码

下一篇:Windows下PostgreSQL安装图解

  • 借款合同印花税减免优惠政策2023
  • 劳务报酬支出 怎么做账
  • 车辆固定资产的入账价值
  • 工程款按进度付款开票分录
  • 收到社保生育津贴摘要怎么写
  • 企业增资的分录怎么写
  • 汇算清缴退款怎么入账
  • 简易征收的老项目是指什么时候
  • 餐费补贴要交个人所得税吗
  • 本币原值是什么意思
  • 对方发票丢失怎么办理
  • 退税抵税申请表
  • 动产租赁和不动产哪个好
  • 营改增后电力行业非正常损失怎么做会计处理?
  • 银行贷款损失的认定标准
  • 报关单上金额要和合同上一样吗
  • 12万纳税
  • 支票收款
  • 外包食堂需要什么资质
  • 购买基金会计核算
  • 事业单位 年终
  • 政府与事业单位会计
  • linux如何安装
  • 重复确认收入是什么意思
  • 重置edge浏览器设置
  • 销货退回未按规则处理
  • swoole如何使用
  • 房产税的计税依据的形式包括
  • 审核凭证的操作步骤
  • 营业利润期末余额怎么算
  • 带息票据和不带息票据区别
  • 加载分页
  • thinkphp隐藏index.php
  • 地方各项基金费(工会经费)可以不申报吗
  • [JavaScript你真的以为这么简单吗]JavaScript高级
  • 如何设置长期有效的群二维码安卓手机
  • 债务重组收入属于什么科目
  • IDEA 2022专业版创建Java Web项目(保姆式小白讲义,强烈建议入手!)
  • 什么是资产减值准备计提
  • 劳务支出和应付职工薪酬
  • 自动执行python
  • 应纳税所得额中国债利息收入
  • 每个公司都要交五险一金吗
  • 工伤保险如何认定
  • 固定资产投资额是指什么
  • PostgreSQL教程(七):函数和操作符详解(3)
  • 车间机器设备修理费用计入什么科目
  • 出售无形资产属于资产处置损益吗
  • 购入货物的运费计入
  • 预提费用在汇算清缴时调整,会计分录怎么做
  • 计提的工会经费年底有余额咋处理
  • 信用卡什么情况下会降额度
  • 产成品和半成品需要结转嘛
  • 年化利率是什么意思
  • 新企业如何建帐
  • sql null替换
  • fedora31安装教程
  • windowsxp搜索不到文件
  • windows账户升级为管理员
  • linux系统ll
  • linux sleep命令有什么用
  • compress与uncompress参数使用
  • android.system.suspend@1.0-service耗电
  • ftp自动上传文件怎么关闭
  • opengl learn
  • bootstrap入门
  • android studio string函数
  • css滚动条设置
  • js的继承方式
  • node 微信公众号开发
  • Android Adapter 源码笔记(3)
  • 深入理解新发展理念,推进供给侧结构性改革心得体会
  • 工具类软件有哪些
  • js dom操作方法
  • 上海房屋出租交税
  • 徐州第三税务分局
  • 湖南省株洲市税务局
  • 预测收入遵循什么方法
  • 中国税务的核心价值观是什么
  • 税务局怎么知道房屋出租
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设