[ 更换 ]
热门城市
北京上海广州深圳成都杭州南京武汉天津西安重庆青岛沈阳长沙大连厦门无锡福州济南宁波昆明苏州郑州长春合肥南昌哈尔滨常州烟台南宁温州石家庄太原珠海南通扬州贵阳东莞徐州大庆佛山威海洛阳淮安呼和浩特镇江潍坊桂林中山临沂咸阳包头嘉兴惠州泉州三亚赣州九江金华泰安榆林许昌新乡舟山慈溪南阳聊城海口东营淄博漳州保定沧州丹东宜兴绍兴唐山湖州揭阳江阴营口衡阳郴州鄂尔多斯泰州义乌汕头宜昌大同鞍山湘潭盐城马鞍山襄樊长治日照常熟安庆吉林乌鲁木齐兰州秦皇岛肇庆西宁介休滨州台州廊坊邢台株洲德阳绵阳双流平顶山龙岩银川芜湖晋江连云港张家港锦州岳阳长沙县济宁邯郸江门齐齐哈尔昆山柳州绍兴县运城齐河衢州太仓张家口湛江眉山常德盘锦枣庄资阳宜宾赤峰余姚清远蚌埠宁德德州宝鸡牡丹江阜阳莆田诸暨黄石吉安延安拉萨海宁通辽黄山长乐安阳增城桐乡上虞辽阳遵义韶关泸州南平滁州温岭南充景德镇抚顺乌海荆门阳江曲靖邵阳宿迁荆州焦作丹阳丽水延吉茂名梅州渭南葫芦岛娄底滕州上饶富阳内江三明淮南孝感溧阳乐山临汾攀枝花阳泉长葛汉中四平六盘水安顺新余晋城自贡三门峡本溪防城港铁岭随州广安广元天水遂宁萍乡西双版纳绥化鹤壁湘西松原阜新酒泉张家界黔西南保山昭通河池来宾玉溪梧州鹰潭钦州云浮佳木斯克拉玛依呼伦贝尔贺州通化朝阳百色毕节贵港丽江安康德宏朔州伊犁文山楚雄嘉峪关凉山雅安西藏四川广东河北山西辽宁黑龙江江苏浙江安徽福建江西山东河南湖北湖南海南贵州云南陕西甘肃青海台湾内蒙古广西宁夏香港澳门
培训资讯网 - 为兴趣爱好者提供专业的职业培训资讯知识

循规蹈矩:快速读懂SQL执行计划的套路与工具

工具 计划

作者介绍

梁敬彬,福富研究院副理事长、公司唯一四星级内训师,国内一线知名数据库专家,在数据库优化和培训领域有着丰富的经验。多次应邀担任国内外数据库大会的演讲嘉宾,在业界有着广泛的影响力。著有多本畅销书籍,代表作有《收获,不止SQL优化》等。

前两章给大家介绍了发现问题后的整体解决思路,接下来进入SQL优化的局部性思路,这一章我们将学习SQL优化的重要知识:执行计划。

执行计划是什么?如何读懂执行计划?读懂执行计划对我们又有什么用?面对这些疑问,我们从执行计划分析概述、读懂执行计划的关键、从案例中辨别低效SQL、总结思考这四部分入手开始本章的学习分享,如下图所示:

一、执行计划分析概述

1SQL执行计划是什么

关于SQL执行计划

执行计划是什么对我们来说其实还是比较好理解的,由于SQL语言是一种傻瓜式语言,一个条件就是一个需求,比如 select * from t1 , t2 where t1.id= t2.id and id=6这样的语句,开发人员实际上只关心能否通过访问t1、t2两个表得到两个表相关联的数据,他们并没有指定该SQL如何执行,也就是说他们不关心该SQL是先访问t1表再访问t2表呢,还是先访问t2表再访问t1表。

对SQL来说,这两种访问方式就是两个不同的执行计划,而且必须做出选择,一次只能有一种访问路径。

那到底选择哪一种呢?答案很简单,哪种执行开销更低,就意味着性能更好,速度更快,我们就选那一种。这种过程就叫作Oracle的解析过程,一般都在1s内即可完成。然后数据库把这个更好的执行计划保存下来放到SGA的Shared Pool里,后续如果再执行同样的SQL,只需要直接在Shared Pool里去获取就可以了,不需要再去分析了。

这就是SQL的执行计划!

SQL执行计划选定依据

等等,刚才好像说得有点偏简单了,数据库根据执行计划开销低不低来选择。可是问题来了,如何知道哪种最低呢?

有人说,让Oracle分别根据不同的执行计划执行一下,比较性能如何,不就成了。这听起来似乎有点道理,是先访问t1还是先访问t2也就是执行2次就知道谁代价更低了。

不过大家有没有注意到and id=6的条件,假如id列上有索引,Oracle就会面临两个选择,一个走id列的索引访问方式,另一个不走索引,走全表扫描方式,是不是感觉又复杂了。假设将语句从from t1 , t2 改成from t1 , t2, t3或者是from t1 , t2, t3, t4,甚至是更多的表呢?请你现在用学过的数学排列组合的方法来判断Oracle会有多少个执行计划,是不是多得有点头晕了,难道你真忍心让该SQL去尝试执行每个执行计划吗?

当然,要是出现某种执行计划极其低效的情况,该SQL可能一直运行着,根本就停不下来,你也别想看到结果。

因此Oracle的执行计划的选择是有套路的。这里有一个重要的关键字:统计信息。有了这个统计信息,Oracle就可以高效快速地完成SQL的解析过程(判断出代价更低的执行计划),还记得前面说过的话吗?一般解析都在1s内完成。

2统计信息用来做什么统计信息又是什么东西

统计信息是什么东西?别着急,我们回到之前的例子from t1 , t2语句。从原理上来说,先访问小表,其成为驱动表,性能更高,因此如果我们知道t1和t2表谁更小,问题就解决了,不需要根据这两个不同的写法分别执行了。

有人说,此时count(*)分别统计两个表就OK了,好简单啊。

真是如此吗?假如表的记录很大,查询不是很慢吗?你如何保障快速完成SQL解析从而选择代价低的执行计划呢?

所以这个大表和小表,是数据库直接告诉这条SQL的。统计信息就是这么来的。

数据库会对库里的每张表都做一个统计,记录每张表的记录数,比如可以通过如下语句来分析t1表和t2表的表及索引的统计信息:

脚本1 查看表和索引的统计信息

可以看出,t1表比t2表小很多,这时Oracle 就会选择让该SQL的执行计划先访问t1表,再访问t2表。不过问题来了,这Oracle 如何知道这个数据呢?难道也是count(*)一把吗?

嗯,这里又有学问了,其实Oracle做这事是很有套路的:

Step1:Oracle会在一个固定的时间将库里的表和索引的相关统计信息进行收集(默认选择周一到周五晚上10点和周六日早上6点),用户可以自己调整收集时间,主要是为了避开高峰期。这么一来,等于用空间换时间,执行计划通过了解数据字典中的这些num_rows和blocks即可知道表的大小。

Step2:大家可能注意到LAST_ANALYZED字段的取值,似乎时间有点早,不像每天都收集的样子,原来Oracle可以专门对表的记录变化量进行管理,当某表一天记录变化量没有超过指定的阈值时,Oracle就不会对该表进行统计信息收集,所以很多时候不少表被第一次收集统计信息后,由于一直很少更新,故很少再有针对该表收集信息的动作。

Step3:收集表和索引信息的动作非常灵活,比如可以只针对分区表的某个分区进行收集,可以在闲时使用并行机制来收集表和索引的统计信息,这可以极大提升性能等等。

如此一来,Oracle收集统计信息的本领真的强大了很多,也怪不得Oracle可以轻松地完成执行计划的解析工作了,原来Oracle有一套强大的处理机制来保障高效获取执行计划。

3数据库统计信息的收集

关于收集统计信息的方法比较多,可以是针对整个数据库的收集,可以是针对整个schema的收集,也可以是针对具体某个表和索引的收集。从操作实用性来看,主要的日常操作都是手动收集某表或者某索引的统计信息,方法如下:

脚本2 收集表和索引的统计信息

如果是针对分区表,则可以指定只收集某分区,具体如下:

exec dbms_stats.gather_table_stats(ownname => "LJB",tabname => "RANGE_PART_TAB",partname =>"p_201312", estimate_percent => 10,method_opt=> "for all indexed columns",cascade=> TRUE) ;

脚本3 针对某分区进行统计信息收集

可以看出,收集统计信息的方法其实非常灵活,具体细节可以多研究dbms_stats.gather_ table_stats的其他参数。从实际案例来看,本节展现的细节已经够用了。

4数据库的动态采样

善于动脑的同学可能会发现一个问题,比如Oracle是每天晚上10点收集统计信息,那此时如果是早上9点新建了一张表,Oracle该如何知道这个表的记录大小呢?

确实,这是一个问题,Oracle如何做呢?请看下面我们怎么做。

构造环境,新建一张T_SAMPLE表,发现统计信息果然没有被收集,对应的NUM_ROWS BLOCKS和LAST_ANALYZED都是空的。

脚本4 新建表统计信息收集情况

那咋办?我们用set autotrace on 的方式来跟踪SQL的执行计划,如下:

脚本5 未收集统计信息会进行动态采样

请注意看这个dynamic sampling used for this statement (level=2),这是啥呢?这就是动态采样,当一张表是新建表时,Oracle只好动态地收集这个表的相关信息。然后等到晚上10点,再将其收集到数据字典中。

我们可以继续做,比如手工收集统计信息:

此时我们再跟踪SQL的执行计划,情况就变化了:

脚本6 收集统计信息后动态采样消失

有什么新发现?没错,dynamic sampling关键字不见了!

5获取执行计划的方法(6种武器)

前面大家看到set autotrace on关键字,这是获取执行计划的方法。实际上,在Oracle里获取执行计划的方法有6种。这听起来是不是有些吓人?实际上这些方法各有侧重点,下面一一细看这些方法。

六脉神剑

(1)explain plan for获取

脚本7 explain plan for获取执行计划

(2)set autotrace on

脚本8 set autotrace on获取执行计划

(3)statistics_level=all

脚本9 statistics_level=all获取执行计划

(4)dbms_xplan.display_cursor获取

脚本10 dbms_xplan.display_cursor获取执行计划

(5)事件10046 trace跟踪

脚本11 10046 trace 获取执行计划

(6)awrsqrpt.sql

脚本12 awrsqrpt.sql调用获取执行计划

差异何在

  • 如果某SQL执行很长时间才出结果或返回不了结果,这时就只能用方法1。

  • 跟踪某条SQL最简单的方法是方法1,其次就是方法2。

  • 如果想观察某条SQL多个执行计划的情况,只能用方法4和方法6。

  • 如果SQL中含函数,函数中又套SQL等,即存在多层调用,想准确分析只能用方法5。

  • 要想确保看到真实的执行计划,不能用方法1和方法2。

  • 要想获取表被访问的次数,只能使用方法3。

续表

二、读懂SQL计划的关键

前面讲了关于执行计划和统计信息的一些基础知识,其实真正要读懂执行计划,并不是一件容易的事,首先要善于利用获取执行计划的工具。下面将介绍如何使用这些经典工具,如下图所示:

其次要了解执行计划中Oracle是如何一步一步执行的,我们要做到像Oracle一样去思考。这似乎很难,不过当你从最简单的单独型、联合型开始学习之后,你就会发现,其实这些都很容易。

1解释经典执行计划方法

关于执行计划,最重要的一点是要读懂执行的顺序,只有这样,才可以像Oracle一样思考问题。而执行的顺序到底是什么呢?是从远到近,还是从上到下呢?这里我们先定义两种类型:单独型、联合型。首先我们来看看单独型。

单独型

请看下面SQL执行计划Id=3处,通过索引定位JOB="CLERK",然后观察Id=2处,通过rowid回到表中得到sal等其它列,然后根据sal<3000的条件再过滤部分数据。最后完成了deptno动作,请看Id=1处。

脚本13 单独型执行计划的例子

我们把这种执行计划称之为单独型,有一种父子的关系,如下图所示。执行顺序为Id=3,Id=2,Id=1,由远到近地执行。注意看,执行计划中Id=1, Id=2, Id=3有一定的偏移哦,这就是单独型的特征。

联合型

联合型还分为非关联的联合型和关联的联合型,请看下列执行计划,Id=2, Id=3, Id=4三处的语句互相独立,没有谁是谁的孩子,这时执行的顺序就是Id=2, Id=3, Id=4依次进行。

(1)联合型的非关联型

脚本14 联合型的非关联型

下图是我们根据Id描绘的图,这就是典型的联合型。注意看,执行计划中,Id=2 Id=3, Id=4是对齐无偏移的,这就是联合型的特征。

这里顺序很显然是Id=1,Id=2,Id=3,Id=4。请大家注意,Id=2,Id=3,Id=4三处,互相之间毫无关系,这就是非关联的联合型。请注意看Id=2处的A-rows为14,可是Id=3处的Starts依然为1,表示只访问一次,和这个14的结果毫无关系。

(2)联合型的关联型

联合型的关联型(NL)

接下来的例子比较经典,请看Id=2和Id=3处,这里显然是联合型,不过我们再观察,Id=2处的A-Rows为10,Id=3处的Starts=10,说明EMP访问的结果集返回多少条,DEPT表就被访问多少次,这是有关联的,这就是联合型的关联型。请回头再看看联合型的非关联型,应该可以明白。

这里其实是联合型和单独型混合的执行计划,请看Id=3和Id=4处,这显然就是单独型,顺序是先Id=4,再Id=3。

脚本15 联合型的关联型

具体的示意图如下,顺序一目了然:Id=2,Id=4

相关内容

怎么学?如何干?西藏7市(地)委书记在西藏日报发表文章

启航新征程 开创新局面为全面建设社会主义现代化新拉萨努力奋斗自治区党委常委、拉萨市委书记 普布顿珠党的二十大大笔擘画坚持以中国式现代化全面推进中华民族伟大复兴的宏伟蓝图,区党委十届三次全会全面铺开建设美丽幸福西藏、共圆伟大复兴梦想的壮阔实践···

2023年全区智慧旅游专业人才培训班圆满结业

6月2日,自治区旅游发展厅主办的全区智慧旅游专业人才培训班在拉萨圆满结业。培训共历时三天,累计完成全区旅游行政管理部门工作人员及涉旅企业专业技术人员培训100人。本次培训是区旅发厅深入推进学习贯彻习近平新时代中国特色社会主义思想主题教育重要···

徐汇萨迦共同举办大美西藏首届口腔学习班

随着现代医学的发展,口腔健康越来越受到人们的关注,为提高西藏地区口腔技术水平和服务质量,近日,徐汇区牙病防治所和萨迦县中心医院远程连线共同举办首届口腔学习班开班仪式。徐汇区卫生健康委副主任胡强,上海援藏干部、萨迦县委常务副书记、常务副县长沈···

自觉抵制“一对一”“一对多”等学科类培训!哈尔滨中小学生暑期预警来了

17日,记者从哈尔滨市各区教育局获悉,2023年暑假将至,南岗区、道里区、香坊区教育局向家长发出预警,自觉抵制违规培训,各区义务教育阶段学科类培训机构已经全部注销,暑假期间以任何形式开展的学科类培训均属于违规培训。家长要自觉抵制任何机构或个···

哈尔滨市道里区企投局举办“招商大讲堂”专题培训

黑龙江网讯(记者 王惠婷)10月24日,哈尔滨市道里区企投局组织开展“招商大讲堂”专题培训班,全区各招商专班负责同志及业务骨干参加培训。本次培训从实际需求出发,紧紧围绕当前招商工作中的热点、难点,对“什么是招商引资”“道里区的产业结构和主导···

团黑龙江省委举办全省青年文明号青年岗位能手学习宣传贯彻党的二十大精神培训交流会

中国青年报客户端讯(李海涛)为深入学习贯彻党的二十大精神,充分发挥青年文明号、青年岗位能手示范引领作用,在全省职业青年中掀起学习党的二十大精神热潮,11月22日,团黑龙江省委举办全省青年文明号青年岗位能手学习宣传贯彻党的二十大精神培训交流会···

辽宁葫芦岛举办外贸政策培训会推动外贸保稳增量

辽宁省葫芦岛市外贸政策培训会4月3日举办。 辽宁省贸促会供图中新网葫芦岛4月3日电 (李晛)辽宁省葫芦岛市外贸政策培训会4月3日举办。本次活动由辽宁省贸促会支持、葫芦岛市商务局主办,葫芦岛市贸促会、葫芦岛海关、中国出口信用保险辽宁分公司和辽···

山西运城:严查无证校外培训机构 查封9家警告2家

新华社太原8月5日电(记者王飞航)记者从山西省运城市政府了解到,运城市教育局近日联合市公安局等多家单位,对中心城区无证校外培训机构进行了一次突击检查,共检查了13家校外培训机构,查封9家,警告2家,发放整改通知书4份。今年7月,运城市教育局···

山西开展培训筑牢森林“防火墙”

山西新闻网3月30日讯(记者 卢奕如)今日,记者从山西省应急管理厅获悉,全省举办森林草原防灭火业务培训,邀请专家以视频会议形式,围绕森林扑火指挥实操、森林草原火灾防控经验做法、火灾现场各级各类指挥员具体操作中遇到的问题等内容进行授课。培训内···

校外培训机构治理工作取得进展 山西停办近1300所

资料图:小学生排队等待进入校园。中新社记者 刘文华 摄中新网5月11日电 据教育部网站消息,按照校外培训机构专项治理工作整体安排,教育部、民政部、国家市场监管总局启动了校外培训机构治理专项督查工作。5月9日至10日,督查组率先在北京市开展华···

山西综改区举办省技术创新中心申报培训

  8月18日,山西综改区科技金融部举办2023年度省技术创新中心申报培训会,来自区内企业、科研院所及有关单位代表160余人参加了培训。  山西省技术创新中心是以产业前沿引领技术和关键共性技术研发为核心的产业技术创新平台,承担着为区域和产业···

山西汾阳医院开展健康教育与控烟知识培训

来源:【吕梁日报-吕梁新闻网】本报讯 (记者 刘少伟) 5月18日,在“世界无烟日”到来之际,山西汾阳医院组织开展健康教育与控烟知识培训。近年来,山西汾阳医院全面落实健康中国战略,根据国家卫健委《关于2011年起全国医疗卫生系统全面禁烟的决···

山西省文物局年度田野考古技术培训班开班

10月10日,山西省文物局在运城闻喜上郭城址、邱家庄墓群举办2023年度田野考古技术培训班开班仪式。该次培训为期三个月,通过理论和实践两部分教学,旨在推进山西考古工作高质量发展,提升考古业务人员专业技术水平。本次培训由山西省考古研究院和山西···

最低每课时9元!全省学科类校外培训课时长和收费标准出台

近日,山西省发改委、省教育厅下发《关于中小学学科类校外培训收费标准及有关事项的通知》,明确全省中小学学科类校外培训收费标准,从12月17日起执行。《通知》对全省线上线下学科类校外培训基准收费标准和浮动幅度制定了科学标准。其中,义务教育阶段线···

山西天镇 阳光职业培训学校培养乡村“新农人”乡村振兴添动能

(记者 贺文生) 山西天镇县阳光职业培训学校紧紧围绕乡村振兴战略,按照“政府引导、农民自愿、立足产业、突出重点”的原则,创新高素质农民技能培训方式方法,采取以“授人以渔”的方式,让人才振兴成为助推农业农村现代化的内生动力,以高素质农民引领现···

山西:建立全过程 全链条 无缝隙安全培训制度

黄河新闻网讯(记者杨江涛)日前,山西省应急管理厅下发了《山西省安全培训管理暂行办法》(以下简称《办法》)。我省将进一步抓好安全生产这个基本盘、基本面,推动全省安全培训工作制度化、规范化、科学化,促进安全培训工作高质量发展。山西省应急管理厅厅···

山西:艺考培训机构纳入全国监管平台管理

央广网太原10月6日消息(记者郎麒) 日前,山西省教育厅、省发改委、省公安厅等部门联合制定《加强面向高中阶段学生艺考培训规范管理工作方案》,针对艺考培训的突出特点和实际情况,全面规范艺考培训行为,将艺考培训机构统一纳入全国校外教育培训监管与···

太平财险阳泉中支开展消防安全教育和有限空间作业培训

为强化员工安全意识,进一步提升员工消防和有限空间突发事件应急处理能力,9月14日,太平财险阳泉中支邀请北京市卫民安消防教育咨询中心山西分中心讲师向全体员工开展了一次消防安全教育和有限空间作业课程培训。按照防消结合、预防为主的原则,本次讲座通···

山西省数字化转型贯标试点工作宣贯培训会在太原举行

  10月20日消息,山西省数字化转型贯标试点工作宣贯培训会在太原举行。省工信厅介绍,作为国家数字化转型贯标试点省份,试点启动后将引导企业加快数字化转型,助力制造业高端化、智能化、绿色化发展。  今年,工信部启动数字化转型贯标试点工作,我省···

山西马兰花创业培训讲师大赛收官 太原市获多个奖项

山西新闻网8月31日讯(记者 冯耿姝)8月29日,山西省第四届马兰花创业培训讲师大赛圆满收官,太原市代表队在比赛中分获多个二、三等奖和优秀奖。本届大赛以“启迪创新思维·激发创业梦想”为主题,全省共有56名教师晋级复赛,其中,太原市有7名选手···