第一篇:屌炸天实战 MySQL 系列教程(一) 生产标准线上环境安装配置案例及棘手问题解决
第二篇:屌炸天实战 MySQL 系列教程(二) 史上最屌、你不知道的数据库操作
第三篇:屌炸天实战 MySQL 系列教程(三)你不知道的 视图、触发器、存储过程、函数、事务、索引、语句
前天有一个五年java开发经验工程师,问我存储过程怎么写?
我的天呐!你这个也太 low 了!
你给我点赞,我教你实战!
本章内容:
视图是查询命令结果构成的一个虚拟表(非真实存在),其本质是【根据SQL语句获取动态的数据集,并为其命名】,用户使用时只需使用【名称】即可获取结果集合,并可以当作表来查询使用。
- --格式:CREATE VIEW 视图名称 AS SQL语句
- CREATE VIEW v1 AS
- SELET nid,
- name
- FROM
- A
- WHERE
- nid > 4
- --格式:DROP VIEW 视图名称
- DROP VIEW v1
- -- 格式:ALTER VIEW 视图名称 AS SQL语句
- ALTER VIEW v1 AS
- SELET A.nid,
- B. NAME
- FROM
- A
- LEFT JOIN B ON A.id = B.nid
- LEFT JOIN C ON A.id = C.nid
- WHERE
- A.id > 2
- AND C.nid < 5
视图的使用和普通表一样,由于视图是虚拟表,所以无法对其真实表进行创建、更新和删除操作,仅做查询用。
- select * from v1
对某个表进行【增/删/改】操作的前后触发一些操作即为触发器,如果希望触发增删改的行为之前或之后做操作时,可以使用触发器,触发器用于自定义用户对表的行进行【增/删/改】前后的行为。
- # 插入前
- CREATE TRIGGER tri_before_insert_tb1 BEFORE INSERT ON tb1 FOR EACH ROW
- BEGIN
- ...
- END
- # 插入后
- CREATE TRIGGER tri_after_insert_tb1 AFTER INSERT ON tb1 FOR EACH ROW
- BEGIN
- ...
- END
- # 删除前
- CREATE TRIGGER tri_before_delete_tb1 BEFORE DELETE ON tb1 FOR EACH ROW
- BEGIN
- ...
- END
- # 删除后
- CREATE TRIGGER tri_after_delete_tb1 AFTER DELETE ON tb1 FOR EACH ROW
- BEGIN
- ...
- END
- # 更新前
- CREATE TRIGGER tri_before_update_tb1 BEFORE UPDATE ON tb1 FOR EACH ROW
- BEGIN
- ...
- END
- # 更新后
- CREATE TRIGGER tri_after_update_tb1 AFTER UPDATE ON tb1 FOR EACH ROW
- BEGIN
- ...
- END
创建触发器基本语法是以下code:
但有一点要注意,触发器内关键字NEW表示即将插入的数据行,OLD表示即将删除的数据行。
- # 插入前触发器
- delimiter //
- CREATE TRIGGER tri_before_insert_tb1 BEFORE INSERT ON tb1 FOR EACH ROW
- BEGIN
- IF NEW. NAME == 'nick' THEN
- INSERT INTO tb2 (NAME)
- VALUES
- ('aa')
- END
- END//
- delimiter ;
- # 插入后触发器
- delimiter //
- CREATE TRIGGER tri_after_insert_tb1 AFTER INSERT ON tb1 FOR EACH ROW
- BEGIN
- IF NEW. num = 666 THEN
- INSERT INTO tb2 (NAME)
- VALUES
- ('666'),
- ('666') ;
- ELSEIF NEW. num = 555 THEN
- INSERT INTO tb2 (NAME)
- VALUES
- ('555'),
- ('555') ;
- END IF;
- END//
- delimiter ;
- DROP TRIGGER tri_after_insert_tb1;
触发器是由于对表的增、删、改操作时被动执行的
- insert into tb1(num) values(666)
存储过程是一个SQL语句集合,类似函数,需要主动调用。
- # 无参数存储过程
- # 创建存储过程
- delimiter //
- create procedure p1()
- BEGIN
- select * from t1;
- END//
- delimiter ;
- # 执行存储过程
- call p1()
都说了类似函数,那必须得可以接收参数,且参数有三类:
- # 有参数存储过程
- # 创建存储过程
- delimiter \\ # 结尾分号改为\\
- create procedure p1(
- in i1 int,
- in i2 int,
- inout i3 int,
- out r1 int
- )
- BEGIN
- DECLARE temp1 int; # 创建申明局部变量
- DECLARE temp2 int default 0;
- set temp1 = 1;
- set r1 = i1 + i2 + temp1 + temp2;
- set i3 = i3 + 100;
- end\\
- delimiter ;
- # 执行存储过程
- DECLARE @t1 INT default 3;
- DECLARE @t2 INT;
- CALL p1 (1, 2 ,@t1, @t2);
- SELECT @t1,@t2;
- drop procedure proc_name;
执行为函数名加括号;
DECLARE代表创建一个局部变量
- # 无参数
- call proc_name()
- # 有参数,全in
- call proc_name(1,2)
- # 有参数,有in,out,inout
- DECLARE @t1 INT;
- DECLARE @t2 INT default 3;
- call proc_name(1,2,@t1,@t2)
- #!/usr/bin/env python
- # -*- coding:utf-8 -*-
- import pymysql
- conn = pymysql.connect(host='127.0.0.1', port=3306, user='root', passwd='123', db='t1')
- cursor = conn.cursor(cursor=pymysql.cursors.DictCursor)
- # 执行存储过程
- cursor.callproc('p1', args=(1, 22, 3, 4))
- # 获取执行完存储的参数
- cursor.execute("select @_p1_0,@_p1_1,@_p1_2,@_p1_3")
- result = cursor.fetchall()
- conn.commit()
- cursor.close()
- conn.close()
- print(result)
该讲讲真正的函数了,与存储过程不同的是有return值
- delimiter \\
- create function f1(
- i1 int,
- i2 int)
- returns int
- BEGIN
- declare num int;
- set num = i1 + i2;
- return(num);
- END \\
- delimiter ;
- drop function func_name;
- # 获取返回值
- declare @i VARCHAR(32);
- select UPPER('nick') into @i;
- SELECT @i;
- # 在查询中使用
- select f1(11,nid) ,name from tb2;
当然MySQL也不例外,有着非常好用的内置函数
- CHAR_LENGTH(str)
- 返回值为字符串str 的长度,长度的单位为字符。一个多字节字符算作一个单字符。
- 对于一个包含五个二字节字符集, LENGTH()返回值为 10, 而CHAR_LENGTH()的返回值为5。
- CONCAT(str1,str2,...)
- 字符串拼接
- 如有任何一个参数为NULL ,则返回值为 NULL。
- CONCAT_WS(separator,str1,str2,...)
- 字符串拼接(自定义连接符)
- CONCAT_WS()不会忽略任何空字符串。 (然而会忽略所有的 NULL)。
- CONV(N,from_base,to_base)
- 进制转换
- 例如:
- SELECT CONV('a',16,2); 表示将 a 由16进制转换为2进制字符串表示
- FORMAT(X,D)
- 将数字X 的格式写为'#,###,###.##',以四舍五入的方式保留小数点后 D 位, 并将结果以字符串的形式返回。若 D 为 0, 则返回结果不带有小数点,或不含小数部分。
- 例如:
- SELECT FORMAT(12332.1,4); 结果为: '12,332.1000'
- INSERT(str,pos,len,newstr)
- 在str的指定位置插入字符串
- pos:要替换位置其实位置
- len:替换的长度
- newstr:新字符串
- 特别的:
- 如果pos超过原字符串长度,则返回原字符串
- 如果len超过原字符串长度,则由新字符串完全替换
- INSTR(str,substr)
- 返回字符串 str 中子字符串的第一个出现位置。
- LEFT(str,len)
- 返回字符串str 从开始的len位置的子序列字符。
- LOWER(str)
- 变小写
- UPPER(str)
- 变大写
- LTRIM(str)
- 返回字符串 str ,其引导空格字符被删除。
- RTRIM(str)
- 返回字符串 str ,结尾空格字符被删去。
- SUBSTRING(str,pos,len)
- 获取字符串子序列
- LOCATE(substr,str,pos)
- 获取子序列索引位置
- REPEAT(str,count)
- 返回一个由重复的字符串str 组成的字符串,字符串str的数目等于count 。
- 若 count <= 0,则返回一个空字符串。
- 若str 或 count 为 NULL,则返回 NULL 。
- REPLACE(str,from_str,to_str)
- 返回字符串str 以及所有被字符串to_str替代的字符串from_str 。
- REVERSE(str)
- 返回字符串 str ,顺序和字符顺序相反。
- RIGHT(str,len)
- 从字符串str 开始,返回从后边开始len个字符组成的子序列
- SPACE(N)
- 返回一个由N空格组成的字符串。
- SUBSTRING(str,pos) , SUBSTRING(str FROM pos) SUBSTRING(str,pos,len) , SUBSTRING(str FROM pos FOR len)
- 不带有len 参数的格式从字符串str返回一个子字符串,起始于位置 pos。带有len参数的格式从字符串str返回一个长度同len字符相同的子字符串,起始于位置 pos。 使用 FROM的格式为标准 SQL 语法。也可能对pos使用一个负值。假若这样,则子字符串的位置起始于字符串结尾的pos 字符,而不是字符串的开头位置。在以下格式的函数中可以对pos 使用一个负值。
- mysql> SELECT SUBSTRING('Quadratically',5);
- -> 'ratically'
- mysql> SELECT SUBSTRING('foobarbar' FROM 4);
- -> 'barbar'
- mysql> SELECT SUBSTRING('Quadratically',5,6);
- -> 'ratica'
- mysql> SELECT SUBSTRING('Sakila', -3);
- -> 'ila'
- mysql> SELECT SUBSTRING('Sakila', -5, 3);
- -> 'aki'
- mysql> SELECT SUBSTRING('Sakila' FROM -4 FOR 2);
- -> 'ki'
- TRIM([{BOTH | LEADING | TRAILING} [remstr] FROM] str) TRIM(remstr FROM] str)
- 返回字符串 str , 其中所有remstr 前缀和/或后缀都已被删除。若分类符BOTH、LEADIN或TRAILING中没有一个是给定的,则假设为BOTH 。 remstr 为可选项,在未指定情况下,可删除空格。
- mysql> SELECT TRIM(' bar ');
- -> 'bar'
- mysql> SELECT TRIM(LEADING 'x' FROM 'xxxbarxxx');
- -> 'barxxx'
- mysql> SELECT TRIM(BOTH 'x' FROM 'xxxbarxxx');
- -> 'bar'
- mysql> SELECT TRIM(TRAILING 'xyz' FROM 'barxxyz');
- -> 'barx'
更多函数:猛击这里 OR 猛击这里
事务用于将某些操作的多个SQL语句作为原子性操作,只有出现错误,即可回滚到原来的状态,从而保证数据库数据完整性。
delimiter 为改变结束符号,默认";"
- # 支持事务的存储过程
- delimiter \\
- create PROCEDURE p1(
- OUT p_return_code tinyint
- )
- BEGIN
- DECLARE exit handler for sqlexception
- BEGIN
- -- ERROR
- set p_return_code = 1;
- rollback;
- END;
- DECLARE exit handler for sqlwarning
- BEGIN
- -- WARNING
- set p_return_code = 2;
- rollback;
- END;
- START TRANSACTION;
- DELETE from tb1;
- insert into tb2(name)values('seven');
- COMMIT;
- -- SUCCESS
- set p_return_code = 0;
- END\\
- delimiter ;
- # 执行存储过程
- DECLARE @i TINYINT;
- call p1(@i);
- select @i;
索引是表的索引目录,在查找内容之前先查目录中查找索引位置,从而快速定位查询数据;
可以理解成新华字典中的索引;
索引会保存在额外的文件中。
一般的索引种类及功能:
索引合并:使用多个单列索引组合查询搜索
覆盖索引:select的数据列只用从索引中就能够取得,不必读取数据行,换句话说查询列要被所建的索引覆盖
- # 创建表 + 索引
- create table in1(
- nid int not null auto_increment primary key,
- name varchar(32) not null,
- email varchar(64) not null,
- extra text,
- index ix_name (name)
- )
- # 创建索引
- create index index_name on table_name(column_name)
- # 删除索引
- drop index_name on table_name;
- # 查看索引
- show index from table_name;
- #注意:对于创建索引时如果是BLOB 和 TEXT 类型,必须指定length。
- create index ix_extra on in1(extra(32));
- # 创建表 + 唯一索引
- create table in1(
- nid int not null auto_increment primary key,
- name varchar(32) not null,
- email varchar(64) not null,
- extra text,
- unique ix_name (name)
- )
- # 创建唯一索引
- create unique index 索引名 on 表名(列名)
- # 删除唯一索引
- drop unique index 索引名 on 表名
- # 创建表 + 创建主键
- create table in1(
- nid int not null auto_increment primary key,
- name varchar(32) not null,
- email varchar(64) not null,
- extra text,
- index ix_name (name)
- )
- OR
- create table in1(
- nid int not null auto_increment,
- name varchar(32) not null,
- email varchar(64) not null,
- extra text,
- primary key(ni1),
- index ix_name (name)
- )
- # 创建主键
- alter table 表名 add primary key(列名);
- # 删除主键
- alter table 表名 drop primary key;
- alter table 表名 modify 列名 int, drop primary key;
组合索引是多个列组合成一个索引来查询
应用场景:频繁的同时使用多列来进行查询,如:where name = 'nick' and age = 18。
- # 创建表
- create table mess(
- nid int not null auto_increment primary key,
- name varchar(32) not null,
- age int not null
- )
- # 创建组合索引
- create index ix_name_age on mess(name,age);
如上创建组合索引之后,查询一定要注意:
注意:同时搜索多个条件时,组合索引的性能效率好过于多个单一索引合并。
- # 查看索引
- show index from 表名
- # 查看执行时间
- set profiling = 1; # 开启profiling
- SQL... # 执行SQL语句
- show profiles; # 查看结果
- # like '%xx',避免%_写在开头
- select * from tb1 where name like '%n';
- # 使用函数
- select * from tb1 where reverse(name) = 'nick';
- # or
- select * from tb1 where nid = 1 or email = '630571017@qq.com';
- 注:当or条件中有未建立索引的列才失效,否则会走索引
- # 类型不一致
- 如果列是字符串类型,传入条件是必须用引号引起来。
- select * from tb1 where name = 999;
- # !=,不等于
- select * from tb1 where name != 'nick'
- 注:如果是主键,则还是会走索引
- select * from tb1 where nid != 123
- # >,大于
- select * from tb1 where name > 'nick'
- 注:如果是主键或索引是整数类型,则还是会走索引
- select * from tb1 where nid > 123
- select * from tb1 where num > 123
- # order by
- select email from tb1 order by name desc;
- 当根据索引排序时候,选择的映射如果不是索引,则不走索引
- 注:如果对主键排序,则还是走索引:
- select * from tb1 order by nid desc;
- # 组合索引最左前缀
- 如果组合索引为:(name,email),查询使用:
- name and email -- 使用索引
- name -- 使用索引
- email -- 不使用索引
- # 避免使用select *
- # count(1)或count(列) 代替 count(*)
- # 创建表时尽量时 char 代替 varchar
- # 表的字段顺序固定长度的字段优先
- # 组合索引代替多个单列索引(经常使用多个条件查询时)
- # 尽量使用短索引
- # 使用连接(JOIN)来代替子查询(Sub-Queries)
- # 连表时注意条件类型需一致
- # 索引散列值(重复少)不适合建索引,例:性别不适合
explain + 查询SQL
用于显示SQL执行信息参数,根据参考信息可以进行SQL优化
- mysql> explain select * from suoning;
- +----+-------------+---------+------+---------------+------+---------+------+------+-------+
- | id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
- +----+-------------+---------+------+---------------+------+---------+------+------+-------+
- | 1 | SIMPLE | suoning | ALL | NULL | NULL | NULL | NULL | 4 | |
- +----+-------------+---------+------+---------------+------+---------+------+------+-------+
- 1 row in set (1.67 sec)
- id
- 查询顺序标识
- 如:mysql> explain select * from (select nid,name from tb1 where nid < 10) as B;
- +----+-------------+------------+-------+---------------+---------+---------+------+------+-------------+
- | id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
- +----+-------------+------------+-------+---------------+---------+---------+------+------+-------------+
- | 1 | PRIMARY | <derived2> | ALL | NULL | NULL | NULL | NULL | 9 | NULL |
- | 2 | DERIVED | tb1 | range | PRIMARY | PRIMARY | 8 | NULL | 9 | Using where |
- +----+-------------+------------+-------+---------------+---------+---------+------+------+-------------+
- 特别的:如果使用union连接气值可能为null
- select_type
- 查询类型
- SIMPLE 简单查询
- PRIMARY 最外层查询
- SUBQUERY 映射为子查询
- DERIVED 子查询
- UNION 联合
- UNION RESULT 使用联合的结果
- ...
- table
- 正在访问的表名
- type
- 查询时的访问方式,性能:all < index < range < index_merge < ref_or_null < ref < eq_ref < system/const
- ALL 全表扫描,对于数据表从头到尾找一遍
- select * from tb1;
- 特别的:如果有limit限制,则找到之后就不在继续向下扫描
- select * from tb1 where email = 'seven@live.com'
- select * from tb1 where email = 'seven@live.com' limit 1;
- 虽然上述两个语句都会进行全表扫描,第二句使用了limit,则找到一个后就不再继续扫描。
- INDEX 全索引扫描,对索引从头到尾找一遍
- select nid from tb1;
- RANGE 对索引列进行范围查找
- select * from tb1 where name < 'alex';
- PS:
- between and
- in
- > >= < <= 操作
- 注意:!= 和 > 符号
- INDEX_MERGE 合并索引,使用多个单列索引搜索
- select * from tb1 where name = 'alex' or nid in (11,22,33);
- REF 根据索引查找一个或多个值
- select * from tb1 where name = 'seven';
- EQ_REF 连接时使用primary key 或 unique类型
- select tb2.nid,tb1.name from tb2 left join tb1 on tb2.nid = tb1.nid;
- CONST 常量
- 表最多有一个匹配行,因为仅有一行,在这行的列值可被优化器剩余部分认为是常数,const表很快,因为它们只读取一次。
- select nid from tb1 where nid = 2 ;
- SYSTEM 系统
- 表仅有一行(=系统表)。这是const联接类型的一个特例。
- select * from (select nid from tb1 where nid = 1) as A;
- possible_keys
- 可能使用的索引
- key
- 真实使用的
- key_len
- MySQL中使用索引字节长度
- rows
- mysql估计为了找到所需的行而要读取的行数 ------ 只是预估值
- extra
- 该列包含MySQL解决查询的详细信息
- “Using index”
- 此值表示mysql将使用覆盖索引,以避免访问表。不要把覆盖索引和index访问类型弄混了。
- “Using where”
- 这意味着mysql服务器将在存储引擎检索行后再进行过滤,许多where条件里涉及索引中的列,当(并且如果)它读取索引时,就能被存储引擎检验,因此不是所有带where子句的查询都会显示“Using where”。有时“Using where”的出现就是一个暗示:查询可受益于不同的索引。
- “Using temporary”
- 这意味着mysql在对查询结果排序时会使用一个临时表。
- “Using filesort”
- 这意味着mysql会对结果使用一个外部索引排序,而不是按索引次序从表里读取行。mysql有两种文件排序算法,这两种排序方式都可以在内存或者磁盘上完成,explain不会告诉你mysql将使用哪一种文件排序,也不会告诉你排序会在内存里还是磁盘上完成。
- “Range checked for each record(index map: N)”
- 这个意味着没有好用的索引,新的索引将在联接的每一行上重新估算,N是显示在possible_keys列中索引的位图,并且是冗余的。
- 详细
日志可以记录哪些查询语句慢,没有走索引,用户发现问题,从而解决优化
a、配置MySQL自动记录慢日志
修改配置文件 my.ini,没有则添加
- slow_query_log = OFF # 是否开启慢日志记录
- long_query_time = 2 # 时间限制,超过此时间,则记录
- slow_query_log_file = /usr/slow.log # 日志文件
- log_queries_not_using_indexes = OFF # 为使用索引的搜索是否记录
- # 查看当前配置信息:
- show variables like '%query%'
- # 修改当前配置:
- set global 变量名 = 值
b、查看MySQL慢日志
mysqldumpslow -s at -a /usr/local/var/mysql/MacBook-Pro-3-slow.log
- --verbose 版本
- --debug 调试
- --help 帮助
- -v 版本
- -d 调试模式
- -s ORDER 排序方式
- what to sort by (al, at, ar, c, l, r, t), 'at' is default
- al: average lock time
- ar: average rows sent
- at: average query time
- c: count
- l: lock time
- r: rows sent
- t: query time
- -r 反转顺序,默认文件倒序拍。reverse the sort order (largest last instead of first)
- -t NUM 显示前N条just show the top n queries
- -a 不要将SQL中数字转换成N,字符串转换成S。don't abstract all numbers to N and strings to 'S'
- -n NUM abstract numbers with at least n digits within names
- -g PATTERN 正则匹配;grep: only consider stmts that include this string
- -h HOSTNAME mysql机器名或者IP;hostname of db server for *-slow.log filename (can be wildcard),
- default is '*', i.e. match all
- -i NAME name of server instance (if using mysql.server startup script)
- -l 总时间中不减去锁定时间;don't subtract lock time from total time
自然所有的东西都离不开基本的语法语句啦,循环语句与判断语句
if then\ elseif then\ else\ end if
- # if条件语句
- delimiter \\
- CREATE PROCEDURE proc_if ()
- BEGIN
- declare i int default 0;
- if i = 1 THEN
- SELECT 1;
- ELSEIF i = 2 THEN
- SELECT 2;
- ELSE
- SELECT 7;
- END IF;
- END\\
- delimiter ;
分为三种循环语句:while循环、repeat循环、loop循环
- # while循环
- delimiter \\
- CREATE PROCEDURE proc_while ()
- BEGIN
- DECLARE num INT ;
- SET num = 0 ;
- WHILE num < 10 DO
- SELECT
- num ;
- SET num = num + 1 ;
- END WHILE ;
- END\\
- delimiter ;
- # repeat循环,相当于 do while
- delimiter \\
- CREATE PROCEDURE proc_repeat ()
- BEGIN
- DECLARE i INT ;
- SET i = 0 ;
- repeat
- select i;
- set i = i + 1;
- until i >= 5
- end repeat;
- END\\
- delimiter ;
- # loop
- delimiter \\
- CREATE PROCEDURE proc_loop ()
- BEGIN
- declare i int default 0;
- loop_label: loop
- select i;
- set i=i+1;
- if i>=5 then
- leave loop_label;
- end if;
- end loop;
- END\\
- delimiter ;
- # 动态执行SQL
- delimiter \\
- DROP PROCEDURE IF EXISTS proc_sql \\
- CREATE PROCEDURE proc_sql ()
- BEGIN
- declare p1 int;
- set p1 = 11;
- set @p1 = p1;
- PREPARE prod FROM 'select * from tb2 where nid > ?';
- EXECUTE prod USING @p1;
- DEALLOCATE prepare prod;
- END\\
- delimiter ;
- # 方式二
- delimiter \\
- DROP PROCEDURE IF EXISTS proc_sql \\ # 如果不存在则添加,否则不做操作
- CREATE PROCEDURE proc_sql (
- in strSQL char(128),
- in nidd int
- )
- BEGIN
- set @sqll = strSQL;
- set @p1 = nidd;
- PREPARE prod FROM @sqll;
- EXECUTE prod USING @p1;
- DEALLOCATE prepare prod;
- END\\
- delimiter ;
- call proc_sql('select * from suoning2 where id > ?','2');