第12/24周 并行执行计划
2015-06-17 20:21
162 查看
在这一期的[b]性能调优培训[/b]里,我想详细讲解下SQL Server里的[b]并行执行计划(Parallel Execution Plans)[/b] 。执行一个有并行执行计划的查询,意味着SQL Server从执行计划里进行必须的运算符需要使用多线程。首先我会介绍下并行执行计划里最常用的运算符,然后我们来分析下SQL Server是如何决定是否要使用并行执行计划。
很多传统的运算符可以使用多线程来进行它们的工作,它们是可并行(parallelism-aware)运算符:索引扫描(Index Scan),索引查找(Index Seek),嵌套循环(Nested Loop),哈希连接(Hash Join),排序(Sort)等。
[b]交换运算符(Exchange Operators)[/b]是在并行执行计划里,用来分发和合并多线程之间的行。
SQL Server使用下列3个交换运算符:
Distribute Streams: 在并行计划中,从一个单线程里区域转变为多线程区域(接收记录的单个输入流,并生成多个输出流。)。
Repartition Streams: 在线程间重新分配行(例如,当前一个运算符是并行哈希连接)(处理多个流并生成多个记录流。)。
Gather Streams:在并行计划中,从多线程区域转变为单线程区域(处理几个输入流并通过组合这几个输入流生成单个记录输出流。)。
当你阅读并行执行计划时,你总会看到2种运算符的结合。每个执行计划必须生成一个单线程的结果,因此在并行执行计划的结尾,你总能看到Gather Streams运算符。
查询优化器是否生成一个并行执行计划也取决于你使用的查询结构是否会阻止并行计划,例如:
T-SQL 语句和SQL公共语言运行库的自定义函数(SQLCLR UDFs);
内建函数,像OBJECT_ID(), ERROR_NUMBER(), @@TRANCOUNT等;
在并行计划里,也有很多查询结构会强制串行区域(这部分操作会使用并行计划):
系统表扫描(System Table Scans)
序列函数(Sequence Functions)
向后扫描(Backward Scans)
递归查询(Recursive Queries)
表值函数(TVFs)
TOP
在你的并行计划里,串行区域越少,你的查询越快。当你下次写你的查询时,好好考虑这点。
SQL Server有一个称为[b]并行开销阀值(cost threshold for parallelism)[/b]的配置选项,用来定义成本因素,在哪个点查询优化会考虑使用并行计划。默认这个配置选项是5,也就说查询高于这个成本值,只要并行计划可行,就会使用并行计划。
当并行计划被查询优化器编译好后,[b]最大并行度(Max Degree of parallelism[/b](MAXDOP))选项定义对执行计划中的每个并行运算符可用线程数。我刚才提过,并行执行计划里的每个运算符都可以用多线程运行,而不是整个执行计划。当然在并行执行计划里,线程可以被前一个运算符共享和重用。可以通过服务器属性->高级->并行配置这些属性:
默认最大并行度(MAXDOP)选项值是0,因此SQL Server会默认将并行查询穿过所有分配给SQL Server的CPU内核。当你使用NUMA(Non Uniform Memory Access)系统时,这个会导致性能问题。最佳实践是限制MAXDOP选项值,在NUMA节点里的核心数(包括超线程的核心数)范围内。这样就可以保证SQL Server的并行计划呆在NUMA节点内。
看完这篇文章,[b]性能调优培训[/b]的第3个月就已经结束了,在下一个月我会讲解下SQL Server里的统计信息。请继续关注!
并行运算符(Parallel Operators)
对于并行执行计划最常见的误解就是多线程只用于整个执行计划。这是错误的,因为SQL Server可以分配多个工作线程给所有可并行(parallelism-aware)运算符。这就意味者一个大型的并行计划可以消耗大量的线程。SQL Server在并行计划里区分2类运算符:可并行(parallelism-aware)运算符,和称为[b]交换运算符(Exchange Operators)[/b]:很多传统的运算符可以使用多线程来进行它们的工作,它们是可并行(parallelism-aware)运算符:索引扫描(Index Scan),索引查找(Index Seek),嵌套循环(Nested Loop),哈希连接(Hash Join),排序(Sort)等。
[b]交换运算符(Exchange Operators)[/b]是在并行执行计划里,用来分发和合并多线程之间的行。
SQL Server使用下列3个交换运算符:
Distribute Streams: 在并行计划中,从一个单线程里区域转变为多线程区域(接收记录的单个输入流,并生成多个输出流。)。
Repartition Streams: 在线程间重新分配行(例如,当前一个运算符是并行哈希连接)(处理多个流并生成多个记录流。)。
Gather Streams:在并行计划中,从多线程区域转变为单线程区域(处理几个输入流并通过组合这几个输入流生成单个记录输出流。)。
当你阅读并行执行计划时,你总会看到2种运算符的结合。每个执行计划必须生成一个单线程的结果,因此在并行执行计划的结尾,你总能看到Gather Streams运算符。
查询优化器是否生成一个并行执行计划也取决于你使用的查询结构是否会阻止并行计划,例如:
T-SQL 语句和SQL公共语言运行库的自定义函数(SQLCLR UDFs);
内建函数,像OBJECT_ID(), ERROR_NUMBER(), @@TRANCOUNT等;
在并行计划里,也有很多查询结构会强制串行区域(这部分操作会使用并行计划):
系统表扫描(System Table Scans)
序列函数(Sequence Functions)
向后扫描(Backward Scans)
递归查询(Recursive Queries)
表值函数(TVFs)
TOP
在你的并行计划里,串行区域越少,你的查询越快。当你下次写你的查询时,好好考虑这点。
什么时候使用并行(When to go parallel?)
每个执行计划都会被SQL Server分配一个[b]成本因素(Cost Factor)[/b] 。成本因素就是用来告诉SQL Server这个执行计划有多贵的简单数字。这个数字越大,执行计划运行的关联成本就越高。SQL Server有一个称为[b]并行开销阀值(cost threshold for parallelism)[/b]的配置选项,用来定义成本因素,在哪个点查询优化会考虑使用并行计划。默认这个配置选项是5,也就说查询高于这个成本值,只要并行计划可行,就会使用并行计划。
当并行计划被查询优化器编译好后,[b]最大并行度(Max Degree of parallelism[/b](MAXDOP))选项定义对执行计划中的每个并行运算符可用线程数。我刚才提过,并行执行计划里的每个运算符都可以用多线程运行,而不是整个执行计划。当然在并行执行计划里,线程可以被前一个运算符共享和重用。可以通过服务器属性->高级->并行配置这些属性:
默认最大并行度(MAXDOP)选项值是0,因此SQL Server会默认将并行查询穿过所有分配给SQL Server的CPU内核。当你使用NUMA(Non Uniform Memory Access)系统时,这个会导致性能问题。最佳实践是限制MAXDOP选项值,在NUMA节点里的核心数(包括超线程的核心数)范围内。这样就可以保证SQL Server的并行计划呆在NUMA节点内。
小结
这一期的[b]性能调优培训[/b]里我讲解了SQL Server里的并行执行计划,你学到了在并行执行计划里涉及到的各种运算符,还有在SQL Server里你如何配置并行度。如果你想对并行计划有更深入的了解,可以看下…………(此次内容待完善)。看完这篇文章,[b]性能调优培训[/b]的第3个月就已经结束了,在下一个月我会讲解下SQL Server里的统计信息。请继续关注!
围观PPT:
0812_12_并行执行计划.rar相关文章推荐
- BufferedInputStream和BufferedOutputStream详解
- 沃颜
- 好吧,开始高大上的QNX学习了
- sqlserver服务器常用的性能计数器
- 项目总结
- Android--中做到自定义的广播只能有指定的app接收
- 对于 A a = new A(); 的一些理解
- 关于android_common-master中下拉刷新和上拉加载的详解
- 初学java之jdk安装,基本概念,简单代码编写
- android代码混淆发布版本时关闭log输出
- STM32 IAP
- 每天一个linux命令(41):ps命令
- [LeetCode]Reverse Integer
- 用代理更新eclipse SDK for android
- C#关于XML文件的操作问题
- 高级php工程师需要掌握的知识点
- Oracle数据逻辑迁移综合实战篇
- sever2008r2活动目录(AD)的安装
- 第一次冲刺项目阶段总结
- 设置vim显示中文