提高 SQL 视图加入多个表的速度,所有表都带有主键

如何解决提高 SQL 视图加入多个表的速度,所有表都带有主键

我有一个包含 300 万条记录的事实表。该视图需要大约 8 分钟才能运行并连接到大约 9 个其他表(所有表都有 PK 并且连接是在 PK 上完成的)并且还有一个小的日期排除。

SELECT k.Field,l.Field 
--...,z.field 
FROM dbo.Fact f
join DimRegion dr on dr.RegionKey = f.RegionKey AND dr.RegionName = 'UK' 
join DimDate dd on dd.DateKey = f.DateKey and dd.Date >= '2020-07-01'
join DimTable dt on dt.TKey = f.TKey and dt.isExcluded = 0
left join DimK dk on f.KKey = dk.KKey
--...
left join DimZ dz on f.ZKey = dz.ZKey

如果我注释掉所有 LEFT JOIN,查询需要 90 秒,并且每个增加大约 45 秒的运行时间。所有连接均使用整数值进行。

我重建了所有碎片化的索引,在日期上创建了索引,但这根本没有帮助。 这是数字最高的执行计划:

enter image description here

我还能做些什么来加快速度,或者数据量太大,这就是为什么需要这么长时间?

这是完整的计划(感谢@eshirvana): https://www.brentozar.com/pastetheplan/?id=S1tphqoEu

解决方法

您为什么要优化向客户端返回 230 万行的查询?

您应该在服务器上过滤和聚合结果。除了 1.5 分钟的 IO 等待和 1 分钟的 CPU 时间外,此查询仅花费 3 分钟将所有结果发送到客户端。

        <WaitStats>
          <Wait WaitType="ASYNC_NETWORK_IO" WaitTimeMs="171313" WaitCount="189426" />
          <Wait WaitType="IO_COMPLETION" WaitTimeMs="66082" WaitCount="16620" />
          <Wait WaitType="IO_QUEUE_LIMIT" WaitTimeMs="49006" WaitCount="3433" />
          <Wait WaitType="RESERVED_MEMORY_ALLOCATION_EXT" WaitTimeMs="889" WaitCount="496442" />
          <Wait WaitType="SOS_SCHEDULER_YIELD" WaitTimeMs="430" WaitCount="5574" />
          <Wait WaitType="RESOURCE_GOVERNOR_IDLE" WaitTimeMs="162" WaitCount="19" />
          <Wait WaitType="MEMORY_ALLOCATION_EXT" WaitTimeMs="80" WaitCount="44521" />
        </WaitStats>
        <QueryTimeStats CpuTime="75783" ElapsedTime="481785" />

为什么您的事实表是聚集索引表而不是 clustered columnstore?一旦停止将所有行和列返回给客户端,聚集列存储的性能应该会好得多。

,

感谢您的所有帮助和想法! 我重建了统计数据,并专注于索引——尤其是 DimDate 的索引。 有帮助的是改变这一点

...f.DateKey and dd.Date >= '2020-07-01'

...f.DateKey and f.DateKey >= 20200701

我意识到在@Stu 评论使用强制命令(我已经设法找出哪个索引使我失败)后,花了一分半的时间,但完全跳过该索引需要半场时间(少 3.5 分钟)和剩余时间,正如@David Browne 提到的,3 分钟用于向客户发送完整数据,我对此很满意,因为大部分时间它会被客户和日期过滤,所以现在实际上需要几秒钟。 再次感谢。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


依赖报错 idea导入项目后依赖报错,解决方案:https://blog.csdn.net/weixin_42420249/article/details/81191861 依赖版本报错:更换其他版本 无法下载依赖可参考:https://blog.csdn.net/weixin_42628809/a
错误1:代码生成器依赖和mybatis依赖冲突 启动项目时报错如下 2021-12-03 13:33:33.927 ERROR 7228 [ main] o.s.b.d.LoggingFailureAnalysisReporter : *************************** APPL
错误1:gradle项目控制台输出为乱码 # 解决方案:https://blog.csdn.net/weixin_43501566/article/details/112482302 # 在gradle-wrapper.properties 添加以下内容 org.gradle.jvmargs=-Df
错误还原:在查询的过程中,传入的workType为0时,该条件不起作用 &lt;select id=&quot;xxx&quot;&gt; SELECT di.id, di.name, di.work_type, di.updated... &lt;where&gt; &lt;if test=&qu
报错如下,gcc版本太低 ^ server.c:5346:31: 错误:‘struct redisServer’没有名为‘server_cpulist’的成员 redisSetCpuAffinity(server.server_cpulist); ^ server.c: 在函数‘hasActiveC
解决方案1 1、改项目中.idea/workspace.xml配置文件,增加dynamic.classpath参数 2、搜索PropertiesComponent,添加如下 &lt;property name=&quot;dynamic.classpath&quot; value=&quot;tru
删除根组件app.vue中的默认代码后报错:Module Error (from ./node_modules/eslint-loader/index.js): 解决方案:关闭ESlint代码检测,在项目根目录创建vue.config.js,在文件中添加 module.exports = { lin
查看spark默认的python版本 [root@master day27]# pyspark /home/software/spark-2.3.4-bin-hadoop2.7/conf/spark-env.sh: line 2: /usr/local/hadoop/bin/hadoop: No s
使用本地python环境可以成功执行 import pandas as pd import matplotlib.pyplot as plt # 设置字体 plt.rcParams[&#39;font.sans-serif&#39;] = [&#39;SimHei&#39;] # 能正确显示负号 p
错误1:Request method ‘DELETE‘ not supported 错误还原:controller层有一个接口,访问该接口时报错:Request method ‘DELETE‘ not supported 错误原因:没有接收到前端传入的参数,修改为如下 参考 错误2:cannot r
错误1:启动docker镜像时报错:Error response from daemon: driver failed programming external connectivity on endpoint quirky_allen 解决方法:重启docker -&gt; systemctl r
错误1:private field ‘xxx‘ is never assigned 按Altʾnter快捷键,选择第2项 参考:https://blog.csdn.net/shi_hong_fei_hei/article/details/88814070 错误2:启动时报错,不能找到主启动类 #
报错如下,通过源不能下载,最后警告pip需升级版本 Requirement already satisfied: pip in c:\users\ychen\appdata\local\programs\python\python310\lib\site-packages (22.0.4) Coll
错误1:maven打包报错 错误还原:使用maven打包项目时报错如下 [ERROR] Failed to execute goal org.apache.maven.plugins:maven-resources-plugin:3.2.0:resources (default-resources)
错误1:服务调用时报错 服务消费者模块assess通过openFeign调用服务提供者模块hires 如下为服务提供者模块hires的控制层接口 @RestController @RequestMapping(&quot;/hires&quot;) public class FeignControl
错误1:运行项目后报如下错误 解决方案 报错2:Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:3.8.1:compile (default-compile) on project sb 解决方案:在pom.
参考 错误原因 过滤器或拦截器在生效时,redisTemplate还没有注入 解决方案:在注入容器时就生效 @Component //项目运行时就注入Spring容器 public class RedisBean { @Resource private RedisTemplate&lt;String
使用vite构建项目报错 C:\Users\ychen\work&gt;npm init @vitejs/app @vitejs/create-app is deprecated, use npm init vite instead C:\Users\ychen\AppData\Local\npm-