行业新闻

Mysql查询优化器浅析(上)

?
Mysql 查询优化器浅析(上)
译者:杨万富
?
1 定义
?Mysql 查询优化器的工作是为查询语句选择合适的执行路径。查询优化器的代码一般是经常变动的,这和存储引擎不太一样。因此,需要理解最新版本的查询优化器是如何组织的,请参考相应的源代码。整体而言,优化器有很多相同性,对 mysql 一个版本的优化器做到整体掌握,理解起 mysql 新版本以及其他数据库的优化器都是类似的。
优化器会对查询语句进行转化,转化等价的查询语句。举个例子,优化器会将下面语句进行转化:
SELECT … WHERE 5=a;
转化后的等价语句为:
SELECT … WHERE a=5;
因为这两个语句的结果集是一致的,所以这两个语句是等价的。
这里我需要提出一点需要注意的,如果查询语句没带 order by 。查询语句 1 出现的结果为 (1,1),(2,2) ,查询语句 2 出现的结果为 (2,2),(1,1) ,我们会认为这是等价的,因为不带 order by 的查询语句是无序的,怎么排序都行。
?
2 代码组织
? 在内核当中 handle_select() 函数是处理查询语句的顶层函数,里面有两个分支,一个是处理带 union 的情况,另外一个是处理不带 union 的情况,这里我们只是列出一个简单的路径便于说明,调用层次见下图。
handle_select()
mysql_select()
JOIN::prepare()
setup_fields()
JOIN::optimize()?
optimize_cond()
opt_sum_query()
make_join_statistics()
? ?get_quick_record_count()
choose_plan()
optimize_straight_join()
best_access_path()
greedy_search()
best_extension_by_limited_search()
best_access_path()
find_best()
make_join_select()?
JOIN::exec()
? 上面的缩进表示函数的相互调用关系,因此可以看出 handle_select() 调用函数 mysql_select(),mysql_select() 调用 JOIN
mysql_select() 首先调用函数 JOIN
尽管出现了单词“ JOIN ”,这些优化函数是为所有的查询语句服务的,不管你是什么查询类型。
函数 optimize_cond() 和函数 opt_sum_query() 是执行一些转化操作。函数 make_join_statistics() 对所有可用索引统计信息进行分析。
?
3 常量转化
? 对类似下面的表达式可以进行转化:
WHERE column1 = column2 AND column2 = 'x';
? 因为我们知道:如果 A=B and B=C ,那么 A=C 。所以上面的表达式可以转化为:
WHERE column1 = 'x' ?AND column2 = 'x';
? 对于 column1 column2 ,只要 <operator> 是属于下面的操作符之一就可以进行类似的转化:
=,<,>,<=,>=,<>,<=>,LIKE
? 从中我们也可以看出,对于 BETWEEN 的情况是不进行转换的。
?
4 无效代码的排除
? 见如下表达式:
WHERE 0=0 AND column1='y'
? 因为第一个条件是始终为 true 的,所以可以移除该条件,变为:
WHERE?column1='y'
?
? 再见如下表达式:
WHERE (0=1 AND s1=5) OR s1=7
? 因为前一个括号内的表达式始终为 false ,因此可以移除该表达式,变为:
WHERE s1=7
?
? 一些情况下甚至可以将整个 WHERE 子句去掉,见下面的表达式:
WHERE (0=1 AND s1=5)
? 我们可以看到, WHERE 子句始终为 FALASE ,那么 WHERE 条件是不可能发生的。当然我们也可以讲, WHERE 条件被优化掉了。
?
如果一个列的定义是不允许为 NULL ,那么:
WHERE not_null_column IS NULL
? 该条件是始终为 false 的,再看:
WHERE not_null_column IS NOT NULL
? 该条件是始终为 true 的,因此这样的表达式也是可以从条件表达式中删除的。
? 当然,也是有特殊情况的,比如在 out join 中,被定义为 NOT NULL 的列也可能包含 NULL 值。在这种情况下, IS NULL 条件是被保留的。
?
? 当然优化器没有对所有的情况进行检测,因为这实在太复杂了。举个例子:
CREATE TABLE Table1(column1 CHAR(1));
SELECT * FROM Table1 WHERE column1 = 'Canada';
? 尽管该条件是无效条件,优化器也不会将它移除。
?
5 常量计算
? 如下表达式:
WHERE columb1 = 1 + 2
? 转化为:
WHERE columb1 = 3
?
?
6 常量以及常量表
? 常量表的定义如下:
1)? 一个表只有 0 行或者 1 行数据。
2)? WHERE 子句中包含条件 column = constant ,并且这些列是 primary key ,或者这些列是 UNIQUE (假设该 UNIQUE 同时被定义为 NOT NULL )。这样生成的查询结果也可以成为常量表。
?
? 如果表 Table0 定义中包含:
… PRIMARY?KEY(column1,column2)
再看下面的语法:
FROM?Table0 … WHERE column1=5 AND column2=7 …
? 那么该语句返回的就是常量表。
? 举个更简单的情况,建设 Table1 定义中包含 :
… unique_not_null_column INT NOT NULL UNIQUE
? 再看下面的语法:
FROM Table1 ... WHERE unique_not_null_column=5
? 该语句返回的也是常量表。
?
? 从例子中我们可以看出常量表最多只有 1 个行值。 MySQL 会预先评估常量表,找出这个值,然后将这个值引入到查询语句中进行优化,举例如下:
SELECT Table1.unique_not_null_column, Table2.any_column
? FROM Table1, Table2
? WHERE Table1.unique_not_null_column = Table2.any_column
? AND Table1.unique_not_null_column = 5;
? 在评估这个查询语句时, MySQL 首先发现通过 Table1.unique_not_null_column 条件的限制, Table1 会变成一个常量表。然后,取回该值。
? 如果取回操作失败( Table1 中没有行满足条件 unique_not_null_column = 5 ),那么该常量表就包含 0 行,那么如果对该语句执行 EXPLAIN 操作,会得到提示信息:
Impossible WHERE noticed after reading const tables
? 另外一种情况是取回操作成功( Table1 中严格只有一行满足条件 unique_not_null_column = 5 ),那么常量表中包含一条数据,并且 MySQL 会将查询语句转化为:
SELECT 5, Table2.any_column
? FROM Table1, Table2
? WHERE 5 = Table2.any_column
? AND 5 = 5;
? 实际上,这个例子是个复杂的例子,这里面也用到了上文所说的常量转化。
?
?

平台注册入口