[转载]Mysql 工作原理 | Still water run deep

更新:2018年08月27日 11:52 PHP 阅读(0)
刚开始接触一个新的事物的时候,我觉得很有必要从其工作原理入手。
弄清楚这个东西的来龙去脉,为接下来的继续深入学习做好铺垫。
掌握好其原理有助于我们从整体上来把握这个东西,并且帮助我们在排错过程中理清思路。
刚开始接触一个新的事物的时候,我觉得很有必要从其工作原理入手,弄清楚这个东西的来龙去脉,为接下来的继续深入学习做好铺垫,掌握好其原理有助于我们从整体上来把握这个东西,并且帮助我们在排错过程中理清思路。接下来,还是从mysql的工作原理开始入手,下面先来一张经典的图:

上面的图就是mysql的内部架构,可以清楚的看到Mysql是由SQL接口,解析器,优化器,缓存,存储引擎组成的。

-+-----------------------------------------------------------------------------------+-

下面是关于上述部件的介绍:

1. connectors
与其他编程语言中的sql 语句进行交互,如php、java等。

2. Management Serveices & Utilities
系统管理和控制工具

3. Connection Pool (连接池)
管理缓冲用户连接,线程处理等需要缓存的需求

4. SQL Interface (SQL接口)
接受用户的SQL命令,并且返回用户需要查询的结果。比如select from就是调用SQL Interface

5. Parser (解析器)
SQL命令传递到解析器的时候会被解析器验证和解析。
主要功能:
a . 将SQL语句分解成数据结构,并将这个结构传递到后续步骤,后面SQL语句的传递和处理就是基于这个结构的
b.  如果在分解构成中遇到错误,那么就说明这个sql语句是不合理的,语句将不会继续执行下去

6. Optimizer (查询优化器)
SQL语句在查询之前会使用查询优化器对查询进行优化(产生多种执行计划,最终数据库会选择最优化的方案去执行,尽快返会结果) 他使用的是“选取-投影-联接”策略进行查询。
用一个例子就可以理解: select uid,name from user where gender = 1;
这个select 查询先根据where 语句进行选取,而不是先将表全部查询出来以后再进行gender过滤
这个select查询先根据uid和name进行属性投影,而不是将属性全部取出以后再进行过滤
将这两个查询条件联接起来生成最终查询结果.

7. Cache和Buffer (查询缓存)
如果查询缓存有命中的查询结果,查询语句就可以直接去查询缓存中取数据。
这个缓存机制是由一系列小缓存组成的。比如表缓存,记录缓存,key缓存,权限缓存等

8.Engine (存储引擎)
存储引擎是MySql中具体的与文件打交道的子系统。也是Mysql最具有特色的一个地方。
Mysql的存储引擎是插件式的。它根据MySql AB公司提供的文件访问层的一个抽象接口来定制一种文件访问机制(这种访问机制就叫存储引擎)
-+-----------------------------------------------------------------------------------+-

SQL 语句执行过程
数据库通常不会被直接使用,而是由其他编程语言通过SQL语句调用mysql,由mysql处理并返回执行结果。那么Mysql接受到SQL语句后,又是如何处理的呢?
首先程序的请求会通过mysql的connectors与其进行交互,请求到处后,会暂时存放在连接池(connection pool)中并由处理器(Management Serveices & Utilities)管理。当该请求从等待队列进入到处理队列,管理器会将该请求丢给SQL接口(SQL Interface)。SQL接口接收到请求后,它会将请求进行hash处理并与缓存中的结果进行对比,如果完全匹配则通过缓存直接返回处理结果;否则,需要完整的走一趟流程:
(1)由SQL接口丢给后面的解释器(Parser),上面已经说到,解释器会判断SQL语句正确与否,若正确则将其转化为数据结构。
(2)解释器处理完,便来到后面的优化器(Optimizer),它会产生多种执行计划,最终数据库会选择最优化的方案去执行,尽快返会结果。
(3)确定最优执行计划后,SQL语句此时便可以交由存储引擎(Engine)处理,存储引擎将会到后端的存储设备中取得相应的数据,并原路返回给程序。

这里有几点需要注意:

(1)如何缓存查询数据?
存储引擎处理完数据,并将其返回给程序的同时,它还会将一份数据保留在缓存中,以便更快速的处理下一次相同的请求。具体情况是,mysql会将查询的语句、执行结果等进行hash,并保留在cache中,等待下次查询。

(2)buffer与cache的区别?
从上面的图可以看到,缓存那里实际上有buffer和cache两个,那它们之间是否有什么不同呢?简单的说就是,buffer是写缓存,cache是读缓存。

(3)如何判断缓存中是否已缓存需要的数据
这里可能有一个误区,觉得处理SQL语句的时候,为了判断是否已缓存查询结果,会将整个流程走一遍,取得执行结果后再与需要的进行对比,看看是否命中,并以此说,既然不管缓存中有没有缓存到查询内容,都要整个流程走一遍,那么缓存的优势又在哪里??

实际上,并非如此,在第一次查询后,mysql便将查询语句以及查询结果进行hash处理并保留在缓存中,SQL查询到达之后,对其进行同样的hash处理后,将两个hash值进行对照,如果一样,则命中,从缓存中返回查询结果;否则,需要整个流程走一遍。
感谢阅读本文,若本文对你有所帮助,不妨将其推荐给好友,与好友一起分享。
文章仅做学习交流使用,若您认为文章存在侵权或不合法行为等,请及时联系我们。
文章之版权归其合法拥者所有。转载原创内容无需联系本站站长,请注明原文出处及链接。
#原文:[博客园] https://www.cnblogs.com/xiaotengyi/articles/3641983.html
更新:2018年08月27日 11:52 PHP 阅读(0)

阅读延伸

CentOS7系统安装Redis5.0.5并安装PHP-redis扩展 | 暮云归

VM虚拟机,CentOS7系统,已安装完整的LAMP。PHP版本为7.3.25(PHP7+)。
现在的目的是为该系统安装Redis服务(Redis5.0.5),该版本在当下是比较新的稳定版。
还有就是为我们的PHP安装redis扩展(可通过phpinfo()函数看到redis扩展的具体信息)

[原创]Centos7系统为php7安装memcache扩展 | 十年铸剑

这篇文章主要记录本人安装的历程,若有需要,希望能对大家起到一点作用,哈哈。
这是在虚拟机中安装memcache扩展,虚拟机安装的系统是CentOS7,已正常安装了PHP7.3.25.

[转载]Mysql 工作原理 | Still water run deep

刚开始接触一个新的事物的时候,我觉得很有必要从其工作原理入手。
弄清楚这个东西的来龙去脉,为接下来的继续深入学习做好铺垫。
掌握好其原理有助于我们从整体上来把握这个东西,并且帮助我们在排错过程中理清思路。

[原创]ThinkPHP3.1快速入门 多语言 | 十年铸剑

ThinkPHP支持多语言,采用的是语言文件的方式。
如果你的应用涉及到多个语言版本和国际化的支持,那么可以定义相关的语言包文件。任何字符串形式的输出,都可以定义语言常量。

[原创]PHPCMS 调用自定义幻灯片广告 | 十年铸剑

phpcms的广告位管理功能非常强大,一般情况下调用广告位只需要引进一个js文件就可以了,但若要实现点击切换的广告位(幻灯片广告,或者叫做轮播广告)就有些困难(主要是默认没有切换的滑动点,或滑动点的样式不能自定义),于是就不能直接应用phpcms给出的引用js文件的方式来实现了。
标签: @PHPCMS @幻灯片 PHP 十年铸剑 05月02日 20:08 继续阅读

[转载]php对文件的操作

创立文件夹
循环建立文件夹
检测文件类型
上传文件
标签: @PHP @文件 @文件夹 PHP 未知 05月02日 20:08 继续阅读

[转载]php通过正则表达式匹配url

php通过正则表达式匹配url
标签: @PHP @正则 @匹配URL PHP 未知 05月02日 20:08 继续阅读

[转载]Linux环境下如何使用PHP处理图像

利用PHP创建图像是相当容易的一件事情。只要安装一些第三方的库文件并具有一定的几何知识,就可以利用PHP来创建和处理图像了。目前PHP使用GD库处理图像。在PHP中一些图像函数是可以直接使用的,但是大多数函数需要安装GD函数库。GD库提供一系列函数进行画图、使用颜色、处理预存的图像和填充操作。GD库是ThomasBoutell设计的ANSIC语言编写,同时支持在perl、Tcl语言中作图。由于GD是一个可以被建立成共享或静态的库,所以在PHP使用GD库进行图像操作是非常容易的。
标签: @Linux @PHP @处理图像 PHP 未知 05月02日 20:08 继续阅读

[转载]Linux环境下如何使用PHP处理图像(4)

利用PHP创建图像是相当容易的一件事情。只要安装一些第三方的库文件并具有一定的几何知识,就可以利用PHP来创建和处理图像了。目前PHP使用GD库处理图像。在PHP中一些图像函数是可以直接使用的,但是大多数函数需要安装GD函数库。GD库提供一系列函数进行画图、使用颜色、处理预存的图像和填充操作。GD库是ThomasBoutell设计的ANSIC语言编写,同时支持在perl、Tcl语言中作图。由于GD是一个可以被建立成共享或静态的库,所以在PHP使用GD库进行图像操作是非常容易的。
标签: @Linux @PHP @处理图像 PHP 未知 05月02日 20:08 继续阅读

[转载]Php部分常见问题总结(1) | hdm58

1:为什么我得不到变量
我在一网页向另一网页POST数据name,为什么输出$name时却得不到任何值?在PHP4.2以后的版本中register_global默认为off若想取得从另一页面提交的变量:
方法一:在PHP.ini中找到register_global,并把它设置为on.
方法二:在接收网页最前面放上这个extract($_POST);extract($_GET);(注意extract($_SESSION)前必须要有Session_Start()).
方法三:一个一个读取变量$a=$_GET["a"];$b=$_POST["b"]等,这种方法虽然麻烦,但比较安全.
标签: @PHP @常见问题 PHP hdm58 05月02日 20:08 继续阅读