MySQL性能优化 - 快车库

MySQL性能优化可从如下几个方面着手

SQL优化
索引优化
数据库(表)结构优化
系统配置优化
服务器硬件优化

SQL优化

开启慢查询记录日志，查找症状(很多时候都是一些慢查询拖累了整个数据库的性能)

在配置文件中配置(my.cnf),配置完毕需要重启，不适合线上数据库

#path可修改为绝对或者相对路径
log-slow-queries=slow-log-path 
#l查询时间超过2s记录
long_query_time=2 
#没有使用索引的查询记录
log-queries-not-using-indexes

mysql命令行下配置

sql#查看log_query_time变量的值
show variables like "%long%";
#如果long_query_time的值不是期望值，重新设定
set global long_query_time=2;
#查询 slow_query_log 和 slow_query_log_file的值
show variables like "%slow%";
#开启慢查询日志 on或者ON都可以，不区分大小写
set global slow_query_log='on';
#慢查询日志文件路径可修改
set global slow_query_log='/data/mysql/slow.log'

慢查询日志分析工具有官方的mysqldumpslow 和pt-query-digest,后者更加精确详细

explain 分析sql的执行
- table 查询的数据表
- type (可能的值 const, eq_reg, ref, range, index,all)
  主键或者唯一索引一般是const，性能最好
  eq_reg 是一种范围查找，唯一索引，主键可能是此种查找
  ref常见于连接查询，一个表基于另外一个索引的查找
  range 基于索引的范围查找
  index通常是对index的扫描
  All 是表扫描
- possible_keys 查询中可以使用的索引
- key 查询中实际使用到的索引，为null表示没有使用索引
- key_len 索引长度，越小越好
- ref 显示索引的那一列被使用了，最好是一个常数
- rows 扫描的行数
- extra
  出现using filesort 查询需要优化(group by)，出现using temporary需要优化(order by 时容易出现)
掌握一些sql的优化方法
max, count,子查询，group by，limit

索引优化

选择合适的列建立索引（在where中经常出现的查询条件的列应当创建索引,group by ，order by，on)
- 索引字段越小越好
- 离散度大的列放在联合索引的前面（离散度越大，过滤的数据越多)
  判断列的离散度可以根据select count(distinct col1), count(distinct col2) from table
索引优化SQL的方法
增加索引会影响写入效率(insert,update,delete)
删除重复和冗余的索引
使用工具pt-duplicate-key-checker分析
使用pt-index-usage 工具配合慢查询日志来分析不再使用的索引(注意主从库的时候无法使用此工具精确判断)

数据库(表)结构优化

选择合适的（列)数据类型
- 选择可以存下数据的最小的数据类型
- 选择尽量简单的数据类型
- 尽可能对列加上not null（Innodb特性),给出default
- 尽快能不使用text等大的数据类型，如果要用，尽量和其他字段分离，单独成表
表的范式和反范式
表的垂直拆分
把原来有很多列的表拆分成多个表，降低表的宽度
拆分原则：不经常使用的字段放在一个表,很大的字段放在一个表,常用的字段放在一个表
表的水平拆分
水平拆分解决单表数据量过大的问题，水平拆分之后的每一张表结构相同
常用拆分方法：取模，hash等
分表带来的挑战：跨分区表数据查询；统计及后台操作。使用汇总表,前后台业务分开

系统配置的优化

修改/etc/sysctl.conf，优化系统网络参数
修改/etc/security/limits.conf 优化打开文件数量
硬件防火墙代替软件防火墙防止网络性能消耗
mysql配置文件
- innodb_buffer_pool_size
- innodb_buffer_pool_instances
  mysql 5.5引入，默认一个
- ... 参数不在一一列举
第三方工具优化mysql配置
http://tools.percona.com/wizard

硬件优化

cpu选择
核数不能超过32,mysql对多核的支持并不是特别优秀
磁盘IO(RAID，常用RAID1+RAID0)