百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 编程字典 > 正文

sql语句的执行顺序以及流程(详细掌握)

toyiye 2024-06-21 12:35 9 浏览 0 评论

程序员对sql语句的执行顺序的透彻掌握,是避免编程中各种bug和错误,歧义语句的不二法则。


  1. SELECT DISTINCT <select_list>
  2. FROM <left_table>
  3. <join_type> JOIN <right_table>
  4. ON <join_condition>
  5. WHERE <where_condition>
  6. GROUP BY <group_by_list>
  7. HAVING <having_condition>
  8. ORDER BY <order_by_condition>
  9. LIMIT <limit_number>

如果你知道每个关键字的意思,作用,如果你还用过的话,那再好不过了。但是,你知道这些语句,它们的执行顺序你清楚么?如果你非常清楚,你就没有必要再浪费时间继续阅读了;如果你不清楚,非常好,你应该庆幸你阅读到了这么好的一篇文章。

准备工作

  1. 新建一个测试数据库TestDB;
  2. create database TestDB;
  3. 创建测试表table1和table2;
  4. CREATE TABLE table1
  5. (
  6. customer_id VARCHAR(10) NOT NULL,
  7. city VARCHAR(10) NOT NULL,
  8. PRIMARY KEY(customer_id)
  9. )ENGINE=INNODB DEFAULT CHARSET=UTF8;
  10. CREATE TABLE table2
  11. (
  12. order_id INT NOT NULL auto_increment,
  13. customer_id VARCHAR(10),
  14. PRIMARY KEY(order_id)
  15. )ENGINE=INNODB DEFAULT CHARSET=UTF8;
  16. 插入测试数据;
  17. INSERT INTO table1(customer_id,city) VALUES('163','hangzhou');
  18. INSERT INTO table1(customer_id,city) VALUES('9you','shanghai');
  19. INSERT INTO table1(customer_id,city) VALUES('tx','hangzhou');
  20. INSERT INTO table1(customer_id,city) VALUES('baidu','hangzhou');
  21. INSERT INTO table2(customer_id) VALUES('163');
  22. INSERT INTO table2(customer_id) VALUES('163');
  23. INSERT INTO table2(customer_id) VALUES('9you');
  24. INSERT INTO table2(customer_id) VALUES('9you');
  25. INSERT INTO table2(customer_id) VALUES('9you');
  26. INSERT INTO table2(customer_id) VALUES('tx');
  27. INSERT INTO table2(customer_id) VALUES(NULL);
  28. 准备工作做完以后,table1和table2看起来应该像下面这样:
  29. mysql> select * from table1;
  30. +-------------+----------+
  31. | customer_id | city |
  32. +-------------+----------+
  33. | 163 | hangzhou |
  34. | 9you | shanghai |
  35. | baidu | hangzhou |
  36. | tx | hangzhou |
  37. +-------------+----------+
  38. 4 rows in set (0.00 sec)
  39. mysql> select * from table2;
  40. +----------+-------------+
  41. | order_id | customer_id |
  42. +----------+-------------+
  43. | 1 | 163 |
  44. | 2 | 163 |
  45. | 3 | 9you |
  46. | 4 | 9you |
  47. | 5 | 9you |
  48. | 6 | tx |
  49. | 7 | NULL |
  50. +----------+-------------+
  51. 7 rows in set (0.00 sec)
  52. 准备SQL逻辑查询测试语句
  53. SELECT a.customer_id, COUNT(b.order_id) as total_orders
  54. FROM table1 AS a
  55. LEFT JOIN table2 AS b
  56. ON a.customer_id = b.customer_id
  57. WHERE a.city = 'hangzhou'
  58. GROUP BY a.customer_id
  59. HAVING count(b.order_id) < 2
  60. ORDER BY total_orders DESC;
  61. 使用上述SQL查询语句来获得来自杭州,并且订单数少于2的客户。

好吧,这些测试表和测试数据均来自《MySQL技术内幕:SQL编程》,这应该不算抄袭吧,借鉴借鉴啊。

万事俱备,只欠东风。接下来开始这篇文章最正式的部分吧。

SQL逻辑查询语句执行顺序

还记得上面给出的那一长串的SQL逻辑查询规则么?那么,到底哪个先执行,哪个后执行呢?现在,我先给出一个查询语句的执行顺序:


  1. (7) SELECT
  2. (8) DISTINCT <select_list>
  3. (1) FROM <left_table>
  4. (3) <join_type> JOIN <right_table>
  5. (2) ON <join_condition>
  6. (4) WHERE <where_condition>
  7. (5) GROUP BY <group_by_list>
  8. (6) HAVING <having_condition>
  9. (9) ORDER BY <order_by_condition>
  10. (10) LIMIT <limit_number>

上面在每条语句的前面都标明了执行顺序号,不要问我怎么知道这个顺序的。我也是读各种“武林秘籍”才得知的,如果你有功夫,去阅读一下MySQL的源码,也会得出这个结果的。

好了,上面我标出了各条查询规则的执行先后顺序,那么各条查询语句是如何执行的呢?这就是我今天这篇博文的重点内容。Go on…

执行FROM语句

在这些SQL语句的执行过程中,都会产生一个虚拟表,用来保存SQL语句的执行结果(这是重点),我现在就来跟踪这个虚拟表的变化,得到最终的查询结果的过程,来分析整个SQL逻辑查询的执行顺序和过程。

第一步,执行FROM语句。我们首先需要知道最开始从哪个表开始的,这就是FROM告诉我们的。现在有了<left_table>和<right_table>两个表,我们到底从哪个表开始,还是从两个表进行某种联系以后再开始呢?它们之间如何产生联系呢?——笛卡尔积

关于什么是笛卡尔积,请自行Google补脑。经过FROM语句对两个表执行笛卡尔积,会得到一个虚拟表,暂且叫VT1(vitual table 1),内容如下:


  1. +-------------+----------+----------+-------------+
  2. | customer_id | city | order_id | customer_id |
  3. +-------------+----------+----------+-------------+
  4. | 163 | hangzhou | 1 | 163 |
  5. | 9you | shanghai | 1 | 163 |
  6. | baidu | hangzhou | 1 | 163 |
  7. | tx | hangzhou | 1 | 163 |
  8. | 163 | hangzhou | 2 | 163 |
  9. | 9you | shanghai | 2 | 163 |
  10. | baidu | hangzhou | 2 | 163 |
  11. | tx | hangzhou | 2 | 163 |
  12. | 163 | hangzhou | 3 | 9you |
  13. | 9you | shanghai | 3 | 9you |
  14. | baidu | hangzhou | 3 | 9you |
  15. | tx | hangzhou | 3 | 9you |
  16. | 163 | hangzhou | 4 | 9you |
  17. | 9you | shanghai | 4 | 9you |
  18. | baidu | hangzhou | 4 | 9you |
  19. | tx | hangzhou | 4 | 9you |
  20. | 163 | hangzhou | 5 | 9you |
  21. | 9you | shanghai | 5 | 9you |
  22. | baidu | hangzhou | 5 | 9you |
  23. | tx | hangzhou | 5 | 9you |
  24. | 163 | hangzhou | 6 | tx |
  25. | 9you | shanghai | 6 | tx |
  26. | baidu | hangzhou | 6 | tx |
  27. | tx | hangzhou | 6 | tx |
  28. | 163 | hangzhou | 7 | NULL |
  29. | 9you | shanghai | 7 | NULL |
  30. | baidu | hangzhou | 7 | NULL |
  31. | tx | hangzhou | 7 | NULL |
  32. +-------------+----------+----------+-------------+

总共有28(table1的记录条数 * table2的记录条数)条记录。这就是VT1的结果,接下来的操作就在VT1的基础上进行。

执行ON过滤

执行完笛卡尔积以后,接着就进行ON a.customer_id = b.customer_id条件过滤,根据ON中指定的条件,去掉那些不符合条件的数据,得到VT2表,内容如下:


  1. +-------------+----------+----------+-------------+
  2. | customer_id | city | order_id | customer_id |
  3. +-------------+----------+----------+-------------+
  4. | 163 | hangzhou | 1 | 163 |
  5. | 163 | hangzhou | 2 | 163 |
  6. | 9you | shanghai | 3 | 9you |
  7. | 9you | shanghai | 4 | 9you |
  8. | 9you | shanghai | 5 | 9you |
  9. | tx | hangzhou | 6 | tx |
  10. +-------------+----------+----------+-------------+

VT2就是经过ON条件筛选以后得到的有用数据,而接下来的操作将在VT2的基础上继续进行。

添加外部行

这一步只有在连接类型为OUTER JOIN时才发生,如LEFT OUTER JOIN、RIGHT OUTER JOIN和FULL OUTER JOIN。在大多数的时候,我们都是会省略掉OUTER关键字的,但OUTER表示的就是外部行的概念。

LEFT OUTER JOIN把左表记为保留表,得到的结果为:


  1. +-------------+----------+----------+-------------+
  2. | customer_id | city | order_id | customer_id |
  3. +-------------+----------+----------+-------------+
  4. | 163 | hangzhou | 1 | 163 |
  5. | 163 | hangzhou | 2 | 163 |
  6. | 9you | shanghai | 3 | 9you |
  7. | 9you | shanghai | 4 | 9you |
  8. | 9you | shanghai | 5 | 9you |
  9. | tx | hangzhou | 6 | tx |
  10. | baidu | hangzhou | NULL | NULL |
  11. +-------------+----------+----------+-------------+

RIGHT OUTER JOIN把右表记为保留表,得到的结果为:


  1. +-------------+----------+----------+-------------+
  2. | customer_id | city | order_id | customer_id |
  3. +-------------+----------+----------+-------------+
  4. | 163 | hangzhou | 1 | 163 |
  5. | 163 | hangzhou | 2 | 163 |
  6. | 9you | shanghai | 3 | 9you |
  7. | 9you | shanghai | 4 | 9you |
  8. | 9you | shanghai | 5 | 9you |
  9. | tx | hangzhou | 6 | tx |
  10. | NULL | NULL | 7 | NULL |
  11. +-------------+----------+----------+-------------+

FULL OUTER JOIN把左右表都作为保留表,得到的结果为:


  1. +-------------+----------+----------+-------------+
  2. | customer_id | city | order_id | customer_id |
  3. +-------------+----------+----------+-------------+
  4. | 163 | hangzhou | 1 | 163 |
  5. | 163 | hangzhou | 2 | 163 |
  6. | 9you | shanghai | 3 | 9you |
  7. | 9you | shanghai | 4 | 9you |
  8. | 9you | shanghai | 5 | 9you |
  9. | tx | hangzhou | 6 | tx |
  10. | baidu | hangzhou | NULL | NULL |
  11. | NULL | NULL | 7 | NULL |
  12. +-------------+----------+----------+-------------+

添加外部行的工作就是在VT2表的基础上添加保留表中被过滤条件过滤掉的数据,非保留表中的数据被赋予NULL值,最后生成虚拟表VT3。

由于我在准备的测试SQL查询逻辑语句中使用的是LEFT JOIN,过滤掉了以下这条数据:

| baidu | hangzhou | NULL | NULL |

现在就把这条数据添加到VT2表中,得到的VT3表如下:


  1. +-------------+----------+----------+-------------+
  2. | customer_id | city | order_id | customer_id |
  3. +-------------+----------+----------+-------------+
  4. | 163 | hangzhou | 1 | 163 |
  5. | 163 | hangzhou | 2 | 163 |
  6. | 9you | shanghai | 3 | 9you |
  7. | 9you | shanghai | 4 | 9you |
  8. | 9you | shanghai | 5 | 9you |
  9. | tx | hangzhou | 6 | tx |
  10. | baidu | hangzhou | NULL | NULL |
  11. +-------------+----------+----------+-------------+

接下来的操作都会在该VT3表上进行。

执行WHERE过滤

对添加外部行得到的VT3进行WHERE过滤,只有符合<where_condition>的记录才会输出到虚拟表VT4中。当我们执行WHERE a.city = 'hangzhou'的时候,就会得到以下内容,并存在虚拟表VT4中:


  1. +-------------+----------+----------+-------------+
  2. | customer_id | city | order_id | customer_id |
  3. +-------------+----------+----------+-------------+
  4. | 163 | hangzhou | 1 | 163 |
  5. | 163 | hangzhou | 2 | 163 |
  6. | tx | hangzhou | 6 | tx |
  7. | baidu | hangzhou | NULL | NULL |
  8. +-------------+----------+----------+-------------+

但是在使用WHERE子句时,需要注意以下两点:

  1. 由于数据还没有分组,因此现在还不能在WHERE过滤器中使用where_condition=MIN(col)这类对分组统计的过滤;
  2. 由于还没有进行列的选取操作,因此在SELECT中使用列的别名也是不被允许的,如:SELECT city as c FROM t WHERE c='shanghai';是不允许出现的。

执行GROUP BY分组

GROU BY子句主要是对使用WHERE子句得到的虚拟表进行分组操作。我们执行测试语句中的GROUP BY a.customer_id,就会得到以下内容:


  1. +-------------+----------+----------+-------------+
  2. | customer_id | city | order_id | customer_id |
  3. +-------------+----------+----------+-------------+
  4. | 163 | hangzhou | 1 | 163 |
  5. | baidu | hangzhou | NULL | NULL |
  6. | tx | hangzhou | 6 | tx |
  7. +-------------+----------+----------+-------------+

得到的内容会存入虚拟表VT5中,此时,我们就得到了一个VT5虚拟表,接下来的操作都会在该表上完成。

执行HAVING过滤

HAVING子句主要和GROUP BY子句配合使用,对分组得到的VT5虚拟表进行条件过滤。当我执行测试语句中的HAVING count(b.order_id) < 2时,将得到以下内容:


  1. +-------------+----------+----------+-------------+
  2. | customer_id | city | order_id | customer_id |
  3. +-------------+----------+----------+-------------+
  4. | baidu | hangzhou | NULL | NULL |
  5. | tx | hangzhou | 6 | tx |
  6. +-------------+----------+----------+-------------+

这就是虚拟表VT6。

SELECT列表

现在才会执行到SELECT子句,不要以为SELECT子句被写在第一行,就是第一个被执行的。

我们执行测试语句中的SELECT a.customer_id, COUNT(b.order_id) as total_orders,从虚拟表VT6中选择出我们需要的内容。我们将得到以下内容:


  1. +-------------+--------------+
  2. | customer_id | total_orders |
  3. +-------------+--------------+
  4. | baidu | 0 |
  5. | tx | 1 |
  6. +-------------+--------------+

不,还没有完,这只是虚拟表VT7。

执行DISTINCT子句

如果在查询中指定了DISTINCT子句,则会创建一张内存临时表(如果内存放不下,就需要存放在硬盘了)。这张临时表的表结构和上一步产生的虚拟表VT7是一样的,不同的是对进行DISTINCT操作的列增加了一个唯一索引,以此来除重复数据。

由于我的测试SQL语句中并没有使用DISTINCT,所以,在该查询中,这一步不会生成一个虚拟表。

执行ORDER BY子句

对虚拟表中的内容按照指定的列进行排序,然后返回一个新的虚拟表,我们执行测试SQL语句中的ORDER BY total_orders DESC,就会得到以下内容:


  1. +-------------+--------------+
  2. | customer_id | total_orders |
  3. +-------------+--------------+
  4. | tx | 1 |
  5. | baidu | 0 |
  6. +-------------+--------------+

可以看到这是对total_orders列进行降序排列的。上述结果会存储在VT8中。

执行LIMIT子句

LIMIT子句从上一步得到的VT8虚拟表中选出从指定位置开始的指定行数据。对于没有应用ORDER BY的LIMIT子句,得到的结果同样是无序的,所以,很多时候,我们都会看到LIMIT子句会和ORDER BY子句一起使用。

MySQL数据库的LIMIT支持如下形式的选择:

LIMIT n, m

表示从第n条记录开始选择m条记录。而很多开发人员喜欢使用该语句来解决分页问题。对于小数据,使用LIMIT子句没有任何问题,当数据量非常大的时候,使用LIMIT n, m是非常低效的。因为LIMIT的机制是每次都是从头开始扫描,如果需要从第60万行开始,读取3条数据,就需要先扫描定位到60万行,然后再进行读取,而扫描的过程是一个非常低效的过程。所以,对于大数据处理时,是非常有必要在应用层建立一定的缓存机制。

相关推荐

python数据预处理技术(python 数据预处理)

在真实世界中,经常需要处理大量的原始数据,这些原始数据是机器学习算法无法理解的。为了让机器学习算法理解原始数据,需要对数据进行预处理。我们运行anaconda集成环境下的“jupyternotebo...

【Python可视化系列】一文教你绘制不同类型散点图(理论+源码)

这是...

OpenCV-Python 特征匹配 | 四十四

目标在本章中,我们将看到如何将一个图像中的特征与其他图像进行匹配。我们将在OpenCV中使用Brute-Force匹配器和FLANN匹配器Brute-Force匹配器的基础蛮力匹配器很简单。它使用第一...

实战python中Random模块使用(python中的random模块)

一、random模块简介Python标准库中的random函数,可以生成随机浮点数、整数、字符串,甚至帮助你随机选择列表序列中的一个元素,打乱一组数据等。要在Python中使用random模块,只需要...

Python随机模块22个函数详解(python随机函数的应用)

随机数可以用于数学,游戏,安全等领域中,还经常被嵌入到算法中,用以提高算法效率,并提高程序的安全性。平时数据分析各种分布的数据构造也会用到。random模块,用于生成伪随机数,之所以称之为伪随机数,是...

说冲A就冲A,这个宝藏男孩冯俊杰我pick了

爱奇艺新上架了一部网剧叫《最后一个女神》。有个惊人的发现,剧里男三居然是《青春有你》的训练生冯俊杰。剧组穷,戏服没几件,冯俊杰几乎靠一件背背佳撑起了整部剧。冯俊杰快速了解一下。四川人,来自觉醒东方,人...

唐山打人嫌犯陈继志去医院就医的背后,隐藏着三个精心设计的步骤

种种迹象表明,陈继志这帮人对处理打人之后的善后工作是轻车驾熟的,他们想实施的计划应该是这样的:首先第一步与伤者进同一家医院做伤情鉴定,鉴定级别最好要比对方严重,于是两位女伤者被鉴定为轻伤,他们就要求医...

熬夜会造成神经衰弱,别再熬夜了(熬夜会加重神经衰弱吗)

长时间熬夜会出现神经衰弱,皮肤受损,超重肥胖,记忆力下降等现象……熬夜了能补回来吗?每天少睡一两个小时算熬夜吗?必须上夜班怎么办?如何减少熬夜伤害?戳图转给爱熬夜的TA!via央视新闻来源:河北省文...

落叶知秋的图片爬取(落叶知秋的图片有哪些?)

importrequestsfrombs4importBeautifulSoupimporttimeimportjsonpathimportjsonfromurllib.parsei...

小心有毒!长沙海关查获藏匿在“巧克力威化涂层”中的大麻

来源:海关发布近日,长沙黄花机场海关对一票申报为“巧克力威化涂层”的进境快件进行机检查验时,在包裹内查获封装于各独立威化饼干包装袋中的大麻230克。另从其他申报为“巧克力、儿童早餐谷物”的快件中查获藏...

钧正平:编造传播这种谣言,荒谬(钧正公司)

来源:钧正平工作室官方微博【钧评编造传播这种谣言,荒谬!】目前,乌克兰安全形势还在迅速变化之中,各方面安全风险上升。相关事件网上热度极高,倍受瞩目。然而,有一些人却借机大肆制造散播一些低级谣言,比如...

幸运角色过去了,谈一谈DNF起源的元素

总的来说伤害比上个版本强太多了,打卢克每日和团本明显能感觉的到。目前打团B套+圣耀稍微打造下应该都能随便二拖了。组队基本上都是秒秒秒(以前得强力辅助,现在随便带个毒奶都行)。单刷除了王座和顶能源阿斯兰...

DNF元素超大凉打桩测试(把括号的伤害加起来好像比较正常)

最近修练场的二觉老是很奇怪,发现以前都是习惯性先减抗然后丢二觉,结果伤害。。。直接丢二觉就正常了下面是其他技能伤害,没达到BUG线,估计问题不大。装备打造方面:全身红字加起来353(41*5+74*2...

ANSYS接触和出图技巧(ansys rough接触)

1.ANSYS后处理时如何按灰度输出云图?1)你可以到utilitymenu-plotctrls-style-colors-windowcolors试试2)直接utilitymenu-plotctr...

ANSYS有限元使用经验总结-后处理(4)

28.求塑性极限荷载时,结构的变形应该较大,建议把大变形打开。...

取消回复欢迎 发表评论:

请填写验证码