韩顺平 Mysql数据库优化(一) 优化概述

第 1 章 Mysql优化概述网站的瓶颈在web层(web吞吐量),程序对mysql的操作. 我们前面讲的页面静态化技术和memcached技术目的减少对mysql访问，但是总是访问数据库，所以我们需要对数据库本身进行优化. 在 PHP和Java开发中，主要从7个方面优化① 数据库(表)本身设计要规范(至少要求满足3NF) 3范式② 创建适当索引(主键索引,普通索引，唯一索引,全文索引 sphinx->coreseek,空间索引)③ 优化SQL语句->如何定位慢查询④ 使用分表技术[思路: 大->小], 水平分割, 垂直分割⑤ 创建适当存储过程,触发器,自定义函数,视图 (1,模块化编程,2提高数据库的访问速度)⑥ 优化my.ini 文件(调整mysql的各级缓存.)⑦ 升级mysql硬件和软件 ， 操作系统64, mysql就使用 64
点击观看本章节视频讲解: http://www.tudou.com/programs/view/W5lTxFELv04/未完待续...第 2 章Mysql数据库(表)设计我们的表要满足1NF 基础上，才可以谈满足2NF, 目前最高级6NF,对PHP网站说，我们只要满足3NF。1.1数据库的分类1.1.1关系型数据库比如mysql, oracle, sql server ,postgresql,informix,DB21.1.2非关系型数据库面向对象和集合数据库.1.1.3介于关系型和非关系型数据库间mongodb数据库面向文档
2.2 1NF所谓1NF:属性(列)具有原子性，不可在分割, 还有就是把同一张表不可以有两个相同列.2.3 2NF所谓2NF: 说表的记录具有唯一性., 即不能出现完全相同的两条记录.一般说，通过设置主键即可.注意;主键最好是非业务逻辑主键，使用自增长.2.4 3NF3NF要保证数据没有冗余.即如果数据可能通过显示或者隐式的推导出，就不要单独设计一列.

比如下图就是满足3NF:

但是说明；　有时我们设计表的时候，可能会使用反3NF.,举例:


上面的相册表的设计就使用到了反3NF,但是他提高了效率
点击观看本章节视频讲解: http://www.tudou.com/programs/view/0Kj4sBsR3eI/第 3 章如何定位慢查询使用 showstatus 可以参考到mysql的各个参数，我们需要掌握的是以下参数, 其它请参考手册.3.1 com_xxx比如 com_select com_update com_insert com_delete , 比如我们在选择表究竟时候用MyISAM 还是 InnoDB ,可以看看该网站是以读和写操作为主，则可以使用MyISAM.这里注意当我们使用 showstatus 来查询参数时，默认是当前会话.show session status like xxxx如果你要查看从数据库启动到现在状态show global status like xxx3.2 Connectionsshow status like ‘connections’ 可以查看当前连接的数量.3.3 UPtime表示数据库启动时间3.4 Slow_queriesshow status like ‘slow_queries’显示慢查询次数, 默认情况下mysql认为慢查询时间是10s
3.5构建一个海量表我们使用两个方法，蠕虫复制,可以构建大表，但是测试效果不好.使用存储过程来创建海量表
模拟一个雇员管理系统#模拟一个雇员管理系统CREATE TABLE dept( /*部门表*/deptno MEDIUMINT UNSIGNED NOT NULL DEFAULT 0,dname VARCHAR(20) NOT NULL DEFAULT "",loc VARCHAR(13) NOT NULL DEFAULT "") ENGINE=MyISAM DEFAULT CHARSET=utf8 ;

#创建表EMP雇员CREATE TABLE emp(empno MEDIUMINT UNSIGNED NOT NULL DEFAULT 0, /*编号*/ename VARCHAR(20) NOT NULL DEFAULT "", /*名字*/job VARCHAR(9) NOT NULL DEFAULT "",/*工作*/mgr MEDIUMINT UNSIGNED NOT NULL DEFAULT 0,/*上级编号*/hiredate DATE NOT NULL,/*入职时间*/sal DECIMAL(7,2) NOT NULL,/*薪水*/comm DECIMAL(7,2) NOT NULL,/*红利*/deptno MEDIUMINT UNSIGNED NOT NULLDEFAULT 0 /*部门编号*/)ENGINE=MyISAM DEFAULT CHARSET=utf8 ;
CREATE TABLE salgrade(grade MEDIUMINT UNSIGNED NOT NULL DEFAULT 0,losal DECIMAL(17,2) NOT NULL,hisal DECIMAL(17,2) NOT NULL)ENGINE=MyISAM DEFAULT CHARSET=utf8;
#测试数据INSERT INTO salgrade VALUES (1,700,1200);INSERT INTO salgrade VALUES (2,1201,1400);INSERT INTO salgrade VALUES (3,1401,2000);INSERT INTO salgrade VALUES (4,2001,3000);INSERT INTO salgrade VALUES (5,3001,9999);
delimiter $$
#创建一个函数，可以返回一个随机的字符串
create function rand_string(n INT)returns varchar(255) #该函数会返回一个字符串begin#定义了一个变量 chars_str，类型 varchar(100)#默认给 chars_str 初始值 'abcdefghijklmnopqrstuvwxyzABCDEFJHIJKLMNOPQRSTUVWXYZ'declare chars_str varchar(100)default 'abcdefghijklmnopqrstuvwxyzABCDEFJHIJKLMNOPQRSTUVWXYZ';declare return_str varchar(255)default '';declare i int default 0;while i < n do set return_str=concat(return_str,substring(chars_str,floor(1+rand()*52),1)); set i = i + 1; end while; return return_str; end $$
#这里我们又自定了一个函数,返回一个随机的部门号create function rand_num( )returns int(5)begindeclare i int default 0;set i = floor(10+rand()*500);return i; end $$
#随即添加雇员[光标] 400w,Mysql开发中，可以在存储过程中调用你自己#编写的函数create procedure insert_emp(in start int(10),in max_num int(10))begindeclare i int default 0;#set autocommit =0 把autocommit设置成0#autocommit = 0 含义: 不要自动提交set autocommit = 0; repeatset i = i + 1;insert into emp values ((start+i),rand_string(6),'SALESMAN',0001,curdate(),2000,400,rand_num()); until i = max_numend repeat; commit;end $$
调用存储过程添加400w数据call insert_emp(100001,4000000);
3.6如何把慢查询记录到日志文件中步骤①在默认情况下，mysql是不会记录慢查询, 所以我们要使用另外一种方式启动mysql,指令: cmd>bin\mysqld.exe – safe-mode –slow-query-log这样就会在mysql 的 data目录，生成一个日志文件，该文件可以把慢查询语句记录到文件.②为了测试我们修改默认的慢查询时间show variables like ‘long_query_time’ 【查询当前慢查询时间】set long_query_time=1③当执行一个时间超过1秒的sql语句，就会被记录下来.# Query_time: 1.500000 Lock_time: 0.000000 Rows_sent: 1 Rows_examined: 4000000use temp100;SET timestamp=1371870578;select * from emp whereempno=456784;④分析慢查询时如何导致explain 工具基本语法: explain sql \G可以来分析mysql是如何执行你的sql语句

细致的说明请参考优化.ppt⑤解决问题: 我们发现目前这个语句没有使用到索引，因此我们先考虑使用索引解决.创建普通索引: CREATE INDEX 索引名 ON 表名(列)
⑥看看此时速度怎样
3.7索引的工作原理图:


3.8补充知识点①当一个表的存储引擎是MyISAM 时，对应三个文件表名.frm 【表的结构】表名.myd 【表的数据】表名.myi 【索引的数据】 点击观看本章节视频讲解: http://www.tudou.com/programs/view/GEmdvfAhGvU/ 未完待续...

本文出自 “韩顺平的技术专栏” 博客，请务必保留此出处http://hanshunping.blog.51cto.com/7532264/1246329