MySQL 笔记整理

基础操作

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
-- 显示所有的库
SHOW DATABASES;
-- 创建数据库
CREATE DATABASE MANAGEMENT;
-- 选择库
USE [数据库名];
-- 显示所有的表
SHOW TABLES;
-- 显示建表语句
SHOW CREATE TABLE [表名];
-- 显示表的定义信息 表结构
DESC [表名];
-- 显示表的定义信息
DESCRIBE TABLENAME;
-- 修改表名
ALTER TABLE OLD_TABLE_NAME RENAME TO NEW_TABLE_NAME;
-- 显示版本信息
SELECT VERSION();
-- 当前选中的库
SELECT DATABASE();
-- 显示当前登录用户
SELECT USER();
-- 显示当前日期
SELECT CURRENT_DATE;
-- 显示当前日期
SELECT CURDATE();
-- 显示当前日期时间
SELECT NOW();
-- 当前时间 时分秒
SELECT CURRENT_TIME;
-- 当前时间戳 年月日时分秒
SELECT CURRENT_TIMESTAMP;
-- 截断表
TRUNCATE TABLE XXX;
-- 删除表 ABC 如果存在删除 不存在则不报错
DROP TABLE IF EXISTS ABC;
-- 把USERNAME值赋给变量@A
SELECT @A:= USERNAME FROM USER WHERE ID = 1;
-- 查询表结构 SQL
SELECT col.* FROM INFORMATION_SCHEMA.`COLUMNS` col WHERE col.TABLE_SCHEMA='schema' AND col.TABLE_NAME='table';
-- 查询表名及表注释 SQL
SELECT TABLE_NAME,TABLE_COMMENT FROM INFORMATION_SCHEMA.`TABLES` WHERE TABLE_SCHEMA='schema';

常用 SQL

1
2
3
4
5
6
7
8
9
10
11
-- 去除重复项
SELECT DISTINCT OWNER FROM PET;
-- 批量插入
INSERT INTO YOURTABLE VALUES (1, 2), (5, 5);
-- 设置表的自增主键从 1 开始
ALTER TABLE 表名 AUTO_INCREMENT=1;
-- 条件判断
select id, if(sal > 3000,'high','low') from sal;
-- count(*) 与 count(列名) 区别
select count(*) from user; -- 统计所有
select count(name) from user; -- 只统计 name 非null 的数据

函数

1
2
3
4
5
6
7
8
9
10
-- 字符串转成时间
select STR_TO_DATE("2018-02-01 23:00:00" ,"%Y-%m-%d %H:%i:%S");
-- 字符串转时间戳
select unix_timestamp('2018-12-05 01:10:00');
-- 字符串转时间戳
select unix_timestamp('2018-12-05');
-- 时间戳转字符串
select from_unixtime(1543943400,'%Y-%m-%d');
-- 在str中用replace_str替换search_str
REPLACE (str, search_str ,replace_str)

查询 Mysql 运行时参数

  • Mysql 官方文档https://dev.mysql.com/doc/refman/5.7/en/server-system-variables.html#sysvar_lower_case_table_names
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
-- 查看所有参数
show variables;
-- 模糊查询参数
show variables like '%packet%';
show variables like '%net_buffer%';
-- 查看mysql 数据库编码:
show variables like 'char%';
show variables like 'collation_%';
-- 查看数据存储目录:
show variables like 'datadir';
-- 查看锁等待:
show variables like 'innodb_lock_wait_timeout';
/* 查看大小写敏感问题:
取值范围有三个,分别是0、1、2.
1. 设置成0:表名按你写的SQL大小写存储,大写就大写小写就小写,比较时大小写敏感。
2. 设置成1:表名转小写后存储到硬盘,比较时大小写不敏感。
3. 设置成2:表名按你写的SQL大小写存储,大写就大写小写就小写,比较时统一转小写比较。
这个选项不仅仅适用于表名的大小写敏感,同样适用于数据库名和表别名。
*/
show variables like 'lower_case_table_names%';
-- 查询慢查询相关参数
show variables like 'slow_query_log%'
-- 开启慢查询日志
set global slow_query_log = on
set global slow_query_log_file = '/var/lib/mysql/gupaoedu-slow.log'
set global log_queries_not_using_indexes = on
-- 单位 秒
set global long_query_time = 0.1

Mysql 查询正在执行的进程

  • show processlist
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
mysql> show processlist;
+----+------+-------------------+-----------------+---------+------+-------+------------------+
| Id | User | Host | db | Command | Time | State | Info |
+----+------+-------------------+-----------------+---------+------+-------+------------------+
| 66 | zhuo | 172.17.0.11:45948 | yizhuo_projects | Sleep | 53 | | NULL |
| 67 | zhuo | 172.17.0.11:45952 | yizhuo_projects | Sleep | 1502 | | NULL |
| 68 | zhuo | 172.17.0.11:45954 | yizhuo_projects | Sleep | 1502 | | NULL |
| 69 | zhuo | 172.17.0.11:45968 | yizhuo_projects | Sleep | 1492 | | NULL |
| 70 | zhuo | 172.17.0.11:45978 | yizhuo_projects | Sleep | 1487 | | NULL |
| 71 | zhuo | 172.17.0.11:45982 | yizhuo_projects | Sleep | 1482 | | NULL |
| 72 | zhuo | 172.17.0.11:45988 | yizhuo_projects | Sleep | 1480 | | NULL |
| 73 | zhuo | 172.17.0.11:45992 | yizhuo_projects | Sleep | 1476 | | NULL |
| 74 | zhuo | 172.17.0.11:45996 | yizhuo_projects | Sleep | 1473 | | NULL |
| 75 | zhuo | 172.17.0.11:46004 | yizhuo_projects | Sleep | 1465 | | NULL |
| 76 | zhuo | localhost | NULL | Query | 0 | init | show processlist |
+----+------+-------------------+-----------------+---------+------+-------+------------------+
11 rows in set (0.00 sec)
  • State 状态官网: https://dev.mysql.com/doc/refman/5.7/en/general-thread-states.html

大部分状态对应很快的操作,只要有一个线程保持同一个状态好几秒钟,那么可能是有问题发生了,需要检查一下。
还有其他的状态没在下面列出来,不过它们大部分只是在查看服务器是否有存在错误是才用得着。

这个命令中最关键的就是 State 列,Mysql 列出的状态主要有以下几种:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
Checking table
-> 正在检查数据表(这是自动的)。
Closing tables
-> 正在将表中修改的数据刷新到磁盘中,同时正在关闭已经用完的表。这是一个很快的操作,如果不是这样的话,就应该确认磁盘空间是否已经满了或者磁盘是否正处于重负中。
Connect Out
-> 复制从服务器正在连接主服务器。
Copying to tmp table on disk
-> 由于临时结果集大于tmp_table_size,正在将临时表从内存存储转为磁盘存储以此节省内存。
Creating tmp table
-> 正在创建临时表以存放部分查询结果。
deleting from main table
-> 服务器正在执行多表删除中的第一部分,刚删除第一个表。
deleting from reference tables
-> 服务器正在执行多表删除中的第二部分,正在删除其他表的记录。
Flushing tables
-> 正在执行FLUSH TABLES,等待其他线程关闭数据表。
Killed
-> 发送了一个kill请求给某线程,那么这个线程将会检查kill标志位,同时会放弃下一个kill请求。MySQL会在每次的主循环中检查kill标志位,不过有些情况下该线程可能会过一小段才能死掉。如果该线程程被其他线程锁住了,那么kill请求会在锁释放时马上生效。
Locked
-> 被其他查询锁住了。
Sending data
-> 正在处理SELECT查询的记录,同时正在把结果发送给客户端。
Sorting for group
-> 正在为GROUP BY做排序。
Sorting for order
-> 正在为ORDER BY做排序。
Opening tables
-> 这个过程应该会很快,除非受到其他因素的干扰。例如,在执ALTER TABLE或LOCK TABLE语句行完以前,数据表无法被其他线程打开。正尝试打开一个表。
Removing duplicates
-> 正在执行一个SELECT DISTINCT方式的查询,但是MySQL无法在前一个阶段优化掉那些重复的记录。因此,MySQL需要再次去掉重复的记录,然后再把结果发送给客户端。
Reopen table
-> 获得了对一个表的锁,但是必须在表结构修改之后才能获得这个锁。已经释放锁,关闭数据表,正尝试重新打开数据表。
Repair by sorting
-> 修复指令正在排序以创建索引。
Repair with keycache
-> 修复指令正在利用索引缓存一个一个地创建新索引。它会比Repair by sorting慢些。
Searching rows for update
-> 正在将符合条件的记录找出来以备更新。它必须在UPDATE要修改相关的记录之前就完成了。
Sleeping
-> 正在等待客户端发送新请求.
System lock
-> 正在等待取得一个外部的系统锁。如果当前没有运行多个mysqld服务器同时请求同一个表,那么可以通过增加--skip-external-locking参数来禁止外部系统锁。
Upgrading lock
-> INSERT DELAYED正在尝试取得一个锁表以插入新记录。
Updating
-> 正在搜索匹配的记录,并且修改它们。
User Lock
-> 正在等待GET_LOCK()。
Waiting for tables
-> 该线程得到通知,数据表结构已经被修改了,需要重新打开数据表以取得新的结构。然后,为了能的重新打开数据表,必须等到所有其他线程关闭这个表。以下几种情况下会产生这个通知:FLUSH TABLES tbl_name, ALTER TABLE, RENAME TABLE, REPAIR TABLE, ANALYZE TABLE,或OPTIMIZE TABLE。
waiting for handler insert
-> INSERT DELAYED 已经处理完了所有待处理的插入操作,正在等待新的请求。

排查问题常用 SQL

按客户端 IP 分组,看哪个客户端的链接数最多

1
select client_ip,count(client_ip) as client_num from (select substring_index(host,':' ,1) as client_ip from processlist ) as connect_info group by client_ip order by client_num desc;

查看正在执行的线程,并按 Time 倒排序,看看有没有执行时间特别长的线程

1
select * from information_schema.processlist where Command != 'Sleep' order by Time desc;

找出所有执行时间超过 5 分钟的线程,拼凑出 kill 语句,方便后面查杀

1
select concat('kill ', id, ';') from information_schema.processlist where Command != 'Sleep' and Time > 300 order by Time desc;