如何更好的优化MySQL数据库

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
简介:

1、选取最适用的字段属性

MySQL可以很好的支持大数据量的存取,但是一般说来,数据库中的表越小,在它上面执行的查询也就会越快

因此,在创建表的时候,为了获得更好的性能,我们可以将表中字段的宽度设得尽可能小。


例如,在定义邮政编码这个字段时,如果将其设置为CHAR(255),显然给数据库增加了不必要的空间

甚至使用VARCHAR这种类型也是多余的,因为CHAR(6)就可以很好的完成任务了

同样的,如果可以的话,我们应该使用MEDIUMINT而不是BIGIN来定义整型字段


另外一个提高效率的方法是在可能的情况下,应该尽量把字段设置为NOTNULL,这样在将来执行查询的时候,数据库不用去比较NULL值。对于某些文本字段,例如“省份”或者“性别”,我们可以将它们定义为ENUM类型。因为在MySQL中,ENUM类型被当作数值型数据来处理,而数值型数据被处理起来的速度要比文本类型快得多

这样,我们又可以提高数据库的性能。

2、使用连接(JOIN)来代替子查询(Sub-Queries)

MySQL从4.1开始支持SQL的子查询。这个技术可以使用SELECT语句来创建一个单列的查询结果,然后把这个结果作为过滤条件用在另一个查询中。例如,我们要将客户基本信息表中没有任何订单的客户删除掉,就可以利用子查询先从销售信息表中将所有发出订单的客户ID取出来,然后将结果传递给主查询,如下所示:


DELETEFROMcustomerinfo

WHERECustomerIDNOTin(SELECTCustomerIDFROMsalesinfo)


使用子查询可以一次性的完成很多逻辑上需要多个步骤才能完成的SQL操作,同时也可以避免事务或者表锁死

并且写起来也很容易。但是,有些情况下,子查询可以被更有效率的连接(JOIN)..替代

例如,假设我们要将所有没有订单记录的用户取出来,可以用下面这个查询完成:


SELECT*FROMcustomerinfo

WHERECustomerIDNOTin(SELECTCustomerIDFROMsalesinfo)


如果使用连接(JOIN)..来完成这个查询工作,速度将会快很多

尤其是当salesinfo表中对CustomerID建有索引的话,性能将会更好,查询如下:


SELECT*FROMcustomerinfo

LEFTJOINsalesinfoONcustomerinfo.CustomerID=salesinfo.CustomerID

WHEREsalesinfo.CustomerIDISNULL


连接(JOIN)..之所以更有效率一些

是因为MySQL不需要在内存中创建临时表来完成这个逻辑上的需要两个步骤的查询工作。

3、使用联合(UNION)来代替手动创建的临时表

MySQL从4.0的版本开始支持union查询,它可以把需要使用临时表的两条或更多的select查询合并的一个查询中。在客户端的查询会话结束的时候,临时表会被自动删除,从而保证数据库整齐、高效。使用union来创建查询的时候,我们只需要用UNION作为关键字把多个select语句连接起来就可以了,要注意的是所有select语句中的字段数目要想同

下面的例子就演示了一个使用UNION的查询


SELECTName,PhoneFROMclientUNION

SELECTName,BirthDateFROMauthorUNION

SELECTName,SupplierFROMproduct

4、事务

尽管我们可以使用子查询(Sub-Queries)、连接(JOIN)和联合(UNION)来创建各种各样的查询,但不是所有的数据库操作都可以只用一条或少数几条SQL语句就可以完成的。更多的时候是需要用到一系列的语句来完成某种工作。但是在这种情况下,当这个语句块中的某一条语句运行出错的时候,整个语句块的操作就会变得不确定起来。设想一下,要把某个数据同时插入两个相关联的表中,可能会出现这样的情况:第一个表中成功更新后,数据库突然出现意外状况,造成第二个表中的操作没有完成,这样,就会造成数据的不完整,甚至会破坏数据库中的数据。要避免这种情况,就应该使用事务,它的作用是:要么语句块中每条语句都操作成功,要么都失败。换句话说,就是可以保持数据库中数据的一致性和完整性。事物以BEGIN关键字开始,COMMIT关键字结束。在这之间的一条SQL操作失败

那么,ROLLBACK命令就可以把数据库恢复到BEGIN开始之前的状态


BEGIN; INSERTINTOsalesinfoSETCustomerID=14;UPDATEinventorySETQuantity=11WHEREitem='book';COMMIT;

事务的另一个重要作用是当多个用户同时使用相同的数据源时

它可以利用锁定数据库的方法来为用户提供一种安全的访问方式,这样可以保证用户的操作不被其它的用户所干扰。

5、锁定表

尽管事务是维护数据库完整性的一个非常好的方法,但却因为它的独占性,有时会影响数据库的性能,尤其是在很大的应用系统中。由于在事务执行的过程中,数据库将会被锁定,因此其它的用户请求只能暂时等待直到该事务结束。如果一个数据库系统只有少数几个用户来使用,事务造成的影响不会成为一个太大的问题;但假设有成千上万的用户同时访问一个数据库系统,例如访问一个电子商务网站,就会产生比较严重的响应延迟。


其实,有些情况下我们可以通过锁定表的方法来获得更好的性能

下面的例子就用锁定表的方法来完成前面一个例子中事务的功能

LOCKTABLEinventoryWRITESELECTQuantityFROMinventoryWHEREItem='book';

...

UPDATEinventorySETQuantity=11WHEREItem='book';UNLOCKTABLES

这里,我们用一个select语句取出初始数据,通过一些计算,用update语句将新值更新到表中

包含有WRITE关键字的LOCKTABLE语句可以保证在UNLOCKTABLES命令被执行之前

不会有其它的访问来对inventory进行插入、更新或者删除的操作

6、使用外键

锁定表的方法可以维护数据的完整性,但是它却不能保证数据的关联性。这个时候我们就可以使用外键。

例如,外键可以保证每一条销售记录都指向某一个存在的客户

在这里,外键可以把customerinfo表中的CustomerID映射到salesinfo表中CustomerID

任何一条没有合法CustomerID的记录都不会被更新或插入到salesinfo中


CREATETABLEcustomerinfo( CustomerIDINTNOTNULL,PRIMARYKEY(CustomerID))TYPE=INNODB;CREATETABLEsalesinfo( SalesIDINTNOTNULL,CustomerIDINTNOTNULL,

PRIMARYKEY(CustomerID,SalesID),

FOREIGNKEY(CustomerID)REFERENCEScustomerinfo(CustomerID)ONDELETECASCADE)TYPE=INNODB;


注意例子中的参数“ONDELETECASCADE”。该参数保证当customerinfo表中的一条客户记录被删除的时候

salesinfo表中所有与该客户相关的记录也会被自动删除。如果要在MySQL中使用外键

一定要记住在创建表的时候将表的类型定义为事务安全表InnoDB类型

该类型不是MySQL表的默认类型

定义的方法是在CREATETABLE语句中加上TYPE=INNODB

7、使用索引

索引是提高数据库性能的常用方法,它可以令数据库服务器以比没有索引快得多的速度检索特定的行

尤其是在查询语句当中包含有MAX(),MIN()和ORDERBY这些命令的时候,性能提高更为明显。


那该对哪些字段建立索引呢?

一般说来,索引应建立在那些将用于JOIN,WHERE判断和ORDERBY排序的字段上

尽量不要对数据库中某个含有大量重复的值的字段建立索引

对于一个ENUM类型的字段来说,出现大量重复值是很有可能的情况


例如customerinfo中的“province”..字段,在这样的字段上建立索引将不会有什么帮助;相反,还有可能降低数据库的性能。我们在创建表的时候可以同时创建合适的索引,也可以使用ALTERTABLE或CREATEINDEX在以后创建索引。此外,MySQL从版本3.23.23开始支持全文索引和搜索。全文索引在MySQL中是一个FULLTEXT类型索引,但仅能用于MyISAM类型的表。对于一个大的数据库,将数据装载到一个没有FULLTEXT索引的表中,然后再使用ALTERTABLE或CREATEINDEX创建索引,将是非常快的。如果将数据装载到一个已经有FULLTEXT索引的表中,执行过程将会非常慢

8、优化的查询语句

绝大多数情况下,使用索引可以提高查询的速度

但如果SQL语句使用不恰当的话,索引将无法发挥它应有的作用。

下面是应该注意的几个方面。


首先,最好是在相同类型的字段间进行比较的操作

在MySQL3.23版之前,这甚至是一个必须的条件

例如不能将一个建有索引的INT字段和BIGINT字段进行比较,但是作为特殊的情况

在CHAR类型的字段和VARCHAR类型字段的字段大小相同的时候,可以将它们进行比较


其次,在建有索引的字段上尽量不要使用函数进行操作。

例如,在一个DATE类型的字段上使用YEAE()函数时,将会使索引不能发挥应有的作用

所以,下面的两个查询虽然返回的结果一样,但后者要比前者快得多。


第三,在搜索字符型字段时,我们有时会使用LIKE关键字和通配符

这种做法虽然简单,但却也是以牺牲系统性能为代价的


例如下面的查询将会比较表中的每一条记录。

SELECT*FROMbooks

WHEREnamelike"MySQL%"


但是如果换用下面的查询,返回的结果一样,但速度就要快上很多:

SELECT*FROMbooks

WHEREname>="MySQL"andname<"MySQM"


最后,应该注意避免在查询中让MySQL进行自动类型转换,因为转换过程也会使索引变得不起作用。


1. 优化你的MySQL查询缓存


在MySQL服务器上进行查询,可以启用高速查询缓存。让数据库引擎在后台悄悄的处理是提高性能的最有效方法之一

当同一个查询被执行多次时,如果结果是从缓存中提取,那是相当快的。但主要的问题是,它是那么容易被隐藏起来

以至于我们大多数程序员会忽略它。在有些处理任务中,我们实际上是可以阻止查询缓存工作的


1. // query cache does NOT work
2. $r = mysql_query("SELECT username FROM user WHERE signup_date >= CURDATE()");
3.
4. // query cache works!
5. $today = date("Y-m-d");
6. $r = mysql_query("SELECT username FROM user WHERE signup_date >= '$today'");
7.
8. // query cache does NOT work
9. $r = mysql_query("SELECT username FROM user WHERE signup_date >= CURDATE()");
10.
11. // query cache works!
12. $today = date("Y-m-d");
13. $r = mysql_query("SELECT username FROM user WHERE signup_date >= '$today'");


2. 用EXPLAIN使你的SELECT查询更加清晰


使用EXPLAIN关键字是另一个MySQL优化技巧,可以让你了解MySQL正在进行什么样的查询操作

这可以帮助你发现瓶颈的所在,并显示出查询或表结构在哪里出了问题。
EXPLAIN查询的结果,可以告诉你那些索引正在被引用,表是如何被扫描和排序的等等。
实现一个SELECT查询(最好是比较复杂的一个,带joins方式的),在里面添加上你的关键词解释

在这里我们可以使用phpMyAdmin,他会告诉你表中的结果。举例来说,假如当我在执行joins时

正忘记往一个索引中添加列,EXPLAIN能帮助我找到问题的所在

添加索引到group_id field后


wKiom1lLJzig-ch8AAO6fRAFGNE404.png-wh_50


3. 利用LIMIT 1取得唯一行


有时,当你要查询一张表是,你知道自己只需要看一行。你可能会去的一条十分独特的记录

或者只是刚好检查了任何存在的记录数,他们都满足了你的WHERE子句。
在这种情况下,增加一个LIMIT 1会令你的查询更加有效

这样数据库引擎发现只有1后将停止扫描,而不是去扫描整个表或索引。


1. // do I have any users from Alabama? 
2. // what NOT to do: 
3. $r = mysql_query("SELECT * FROM user WHERE state = 'Alabama'"); 
4. if (mysql_num_rows($r) > 0) { 
5. // ... 
6. } 
7. // much better: 
8. $r = mysql_query("SELECT 1 FROM user WHERE state = 'Alabama' LIMIT 1"); 
9. if (mysql_num_rows($r) > 0) { 
10. // ... 
11. } 


4. 索引中的检索字段


索引不仅是主键或唯一键。如果你想搜索表中的任何列,你应该一直指向索引

wKioL1lLJ32Sm8IeAAEFxacwfsk316.png-wh_50


5. 保证连接的索引是相同的类型


如果应用程序中包含多个连接查询,你需要确保你链接的列在两边的表上都被索引

这会影响MySQL如何优化内部联接操作。此外,加入的列,必须是同一类型

例如,你加入一个DECIMAL列,而同时加入另一个表中的int列

MySQL将无法使用其中至少一个指标。即使字符编码必须同为字符串类型。


1. // looking for companies in my state 
2. $r = mysql_query("SELECT company_name FROM users 
3. LEFT JOIN companies ON (users.state = companies.state) 
4. WHERE users.id = $user_id"); 
5. 
6. // both state columns should be indexed 
7. // and they both should be the same type and character encoding 
8. // or MySQL might do full table scans


6. 不要使用BY RAND()命令


这是一个令很多新手程序员会掉进去的陷阱。你可能不知不觉中制造了一个可怕的平静

这个陷阱在你是用BY RAND()命令时就开始创建了。
如果您真的需要随机显示你的结果,有很多更好的途径去实现

诚然这需要写更多的代码,但是能避免性能瓶颈的出现

问题在于,MySQL可能会为表中每一个独立的行执行BY RAND()命令

(这会消耗处理器的处理能力),然后给你仅仅返回一行。


1. // what NOT to do: 
2. $r = mysql_query("SELECT username FROM user ORDER BY RAND() LIMIT 1"); 
3. // much better: 
4. $r = mysql_query("SELECT count(*) FROM user"); 
5. $d = mysql_fetch_row($r); 
6. $rand = mt_rand(0,$d[0] - 1); 
7. 
8. $r = mysql_query("SELECT username FROM user LIMIT $rand, 1"); 


7. 尽量避免SELECT *命令


从表中读取越多的数据,查询会变得更慢。他增加了磁盘需要操作的时间

还是在数据库服务器与WEB服务器是独立分开的情况下

你将会经历非常漫长的网络延迟,仅仅是因为数据不必要的在服务器之间传输。
始终指定你需要的列,这是一个非常良好的习惯。


1. // not preferred 
2. $r = mysql_query("SELECT * FROM user WHERE user_id = 1"); 
3. $d = mysql_fetch_assoc($r); 
4. echo "Welcome {$d['username']}"; 
5. // better: 
6. $r = mysql_query("SELECT username FROM user WHERE user_id = 1"); 
7. $d = mysql_fetch_assoc($r); 
8. echo "Welcome {$d['username']}"; 
9. // the differences are more significant with bigger result sets 


8. 从PROCEDURE ANALYSE()中获得建议


PROCEDURE ANALYSE()可让MySQL的柱结构分析和表中的实际数据来给你一些建议

如果你的表中已经存在实际数据了,能为你的重大决策服务。
wKioL1lLJ8LCpO93AAE6cjk9SBQ566.png-wh_50


9. 准备好的语句


准备好的语句,可以从性能优化和安全两方面对大家有所帮助。
准备好的语句在过滤已经绑定的变量默认情况下,能给应用程序以有效的保护,防止SQL注入攻击

当然你也可以手动过滤,不过由于大多数程序员健忘的性格,很难达到效果。


1. // create a prepared statement 
2. if ($stmt = $mysqli->prepare("SELECT username FROM user WHERE state=?")) { 
3. // bind parameters 
4. $stmt->bind_param("s", $state); 
5. // execute 
6. $stmt->execute(); 
7. // bind result variables 
8. $stmt->bind_result($username); 
9. // fetch value 
10. $stmt->fetch(); 
11. printf("%s is from %s\n", $username, $state); 
12. $stmt->close(); 
13. } 


10. 将IP地址存储为无符号整型


许多程序员在创建一个VARCHAR(15)时并没有意识到他们可以将IP地址以整数形式来存储

当你有一个INT类型时,你只占用4个字节的空间,这是一个固定大小的领域。


你必须确定你所操作的列是一个UNSIGNED INT类型的,因为IP地址将使用32位unsigned integer

$r = "UPDATE users SET ip = INET_ATON('{$_SERVER['REMOTE_ADDR']}') WHERE user_id = $user_id"; 


本文转自 2012hjtwyf 51CTO博客,原文链接:http://blog.51cto.com/hujiangtao/1940758,如需转载请自行联系原作者

相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
8天前
|
关系型数据库 MySQL 索引
mysql 分析5语句的优化--索引添加删除
mysql 分析5语句的优化--索引添加删除
11 0
|
14天前
|
存储 关系型数据库 MySQL
轻松入门MySQL:数据库设计之范式规范,优化企业管理系统效率(21)
轻松入门MySQL:数据库设计之范式规范,优化企业管理系统效率(21)
|
14天前
|
存储 SQL 关系型数据库
轻松入门MySQL:加速进销存!利用MySQL存储过程轻松优化每日销售统计(15)
轻松入门MySQL:加速进销存!利用MySQL存储过程轻松优化每日销售统计(15)
|
14天前
|
存储 关系型数据库 MySQL
轻松入门MySQL:优化进销存管理,掌握MySQL索引,提升系统效率(11)
轻松入门MySQL:优化进销存管理,掌握MySQL索引,提升系统效率(11)
|
8天前
|
SQL 缓存 关系型数据库
mysql性能优化-慢查询分析、优化索引和配置
mysql性能优化-慢查询分析、优化索引和配置
75 0
|
14天前
|
存储 关系型数据库 MySQL
MySQL数据库性能大揭秘:表设计优化的高效策略(优化数据类型、增加冗余字段、拆分表以及使用非空约束)
MySQL数据库性能大揭秘:表设计优化的高效策略(优化数据类型、增加冗余字段、拆分表以及使用非空约束)
|
14天前
|
缓存 关系型数据库 MySQL
MySQL查询优化:提速查询效率的13大秘籍(合理使用索引合并、优化配置参数、使用分区优化性能、避免不必要的排序和group by操作)(下)
MySQL查询优化:提速查询效率的13大秘籍(合理使用索引合并、优化配置参数、使用分区优化性能、避免不必要的排序和group by操作)(下)
|
14天前
|
缓存 关系型数据库 MySQL
MySQL 查询优化:提速查询效率的13大秘籍(索引设计、查询优化、缓存策略、子查询优化以及定期表分析和优化)(中)
MySQL 查询优化:提速查询效率的13大秘籍(索引设计、查询优化、缓存策略、子查询优化以及定期表分析和优化)(中)
|
2天前
|
SQL 缓存 Java
Java数据库连接池:优化数据库访问性能
【4月更文挑战第16天】本文探讨了Java数据库连接池的重要性和优势,它能减少延迟、提高效率并增强系统的可伸缩性和稳定性。通过选择如Apache DBCP、C3P0或HikariCP等连接池技术,并进行正确配置和集成,开发者可以优化数据库访问性能。此外,批处理、缓存、索引优化和SQL调整也是提升性能的有效手段。掌握数据库连接池的使用是优化Java企业级应用的关键。
|
3天前
|
SQL 关系型数据库 数据库
【后端面经】【数据库与MySQL】SQL优化:如何发现SQL中的问题?
【4月更文挑战第12天】数据库优化涉及硬件升级、操作系统调整、服务器/引擎优化和SQL优化。SQL优化目标是减少磁盘IO和内存/CPU消耗。`EXPLAIN`命令用于检查SQL执行计划,关注`type`、`possible_keys`、`key`、`rows`和`filtered`字段。设计索引时考虑外键、频繁出现在`where`、`order by`和关联查询中的列,以及区分度高的列。大数据表改结构需谨慎,可能需要停机、低峰期变更或新建表。面试中应准备SQL优化案例,如覆盖索引、优化`order by`、`count`和索引提示。优化分页查询时避免大偏移量,可利用上一批的最大ID进行限制。
17 3

推荐镜像

更多