C/S(客户端/服务端)模型介绍

img

1
2
3
4
TCP/IP方式(远程、本地):
mysql -uroot -p123456 -h 10.0.0.51 -P3306
Socket方式(仅本地):
mysql -uroot -p123456 -S /tmp/mysql.sock

实例介绍

实例=mysqld后台守护进程+Master Thread +干活的Thread+预分配的内存
公司=老板+经理+员工+办公室

mysqld程序运行原理

mysqld程序结构

img

一条SQL语句的执行过程

连接层

(1)提供连接协议:TCP/IP 、SOCKET
(2)提供验证:用户、密码,IP,SOCKET
(3)提供专用连接线程:接收用户SQL,返回结果
通过以下语句可以查看到连接线程基本情况

1
mysql> show processlist;

SQL层

  1. 接收上层传送的SQL语句
  2. 语法验证模块:验证语句语法,是否满足SQL_MODE
  3. 语义检查:判断SQL语句的类型
    • DDL :数据定义语言
    • DCL :数据控制语言
    • DML :数据操作语言
    • DQL: 数据查询语言
  4. 权限检查:用户对库表有没有权限
  5. 解析器:对语句执行前,进行预处理,生成解析树(执行计划),说白了就是生成多种执行方案.
  6. 优化器:根据解析器得出的多种执行计划,进行判断,选择最优的执行计划
    代价模型:资源(CPU IO MEM)的耗损评估性能好坏
  7. 执行器:根据最优执行计划,执行SQL语句,产生执行结果
    执行结果:在磁盘的xxxx位置上
  8. 提供查询缓存(默认是没开启的),会使用redis tair替代查询缓存功能
  9. 提供日志记录(日志管理章节):binlog,默认是没开启的。

存储引擎层(类似于Linux中的文件系统)

负责根据SQL层执行的结果,从磁盘上拿数据。
将16进制的磁盘数据,交由SQL结构化化成表,
连接层的专用线程返回给用户。

逻辑结构

img

库名,库属性

表名
属性
列:列名(字段),列属性(数据类型,约束等)
数据行(记录)

物理存储结构引入

img

库的物理存储结构

用文件系统的目录来存储

表的物理存储结构

1
2
3
4
5
6
7
8
9
10
MyISAM(一种引擎)的表:
-rw-r----- 1 mysql mysql 10816 Apr 18 11:37 user.frm
-rw-r----- 1 mysql mysql 396 Apr 18 12:20 user.MYD
-rw-r----- 1 mysql mysql 4096 Apr 18 14:48 user.MYI

InnoDB(默认的存储引擎)的表:
-rw-r----- 1 mysql mysql 8636 Apr 18 11:37 time_zone.frm
-rw-r----- 1 mysql mysql 98304 Apr 18 11:37 time_zone.ibd
time_zone.frm:存储列相关信息
time_zone.ibd:数据行+索引

表的段、区、页(16k)

段:一个表就是一个段,可以由1个或多个区构成

区:一个区(簇),默认1M,连续的64个pages

页:一个页,默认16KB,连续的4个OS block,最小的IO单元

基础管理

用户、权限管理

用户

作用:

登录,管理数据库逻辑对象

定义:

1
2
3
4
5
6
7
8
9
用户名@'白名单'
白名单支持的方式?
wordpress@'10.0.0.%'
wordpress@'%'
wordpress@'10.0.0.200'
wordpress@'localhost'
wordpress@'db02'
wordpress@'10.0.0.5%'
wordpress@'10.0.0.0/255.255.254.0'

管理操作:

1
2
3
4
5
6
7
8
9
增:
mysql> create user kinmfer@'10.0.0.%' identified by '123';
查:
mysql> desc mysql.user; ----> authentication_string
mysql> select user ,host ,authentication_string from mysql.user
改:
mysql> alter user kinmfer@'10.0.0.%' identified by '456';
删:
mysql> drop user kinmfer@'10.0.0.%';

权限

权限管理操作:

1
mysql> grant all on wordpress.* to wordpress@'10.0.0.%' identified  by '123';

常用权限介绍:

1
2
3
4
5
ALL:
SELECT,INSERT, UPDATE, DELETE, CREATE, DROP, RELOAD, SHUTDOWN, PROCESS, FILE, REFERENCES, INDEX, ALTER, SHOW DATABASES, SUPER, CREATE TEMPORARY TABLES, LOCK TABLES, EXECUTE, REPLICATION SLAVE, REPLICATION CLIENT, CREATE VIEW, SHOW VIEW, CREATE ROUTINE, ALTER ROUTINE, CREATE USER, EVENT, TRIGGER, CREATE TABLESPACE
ALL : 以上所有权限,一般是普通管理员拥有的

with grant option:超级管理员才具备的,给别的用户授权的功能

权限作用范围:

1
2
3
*.*                  ---->管理员用户
wordpress.* ---->开发和应用用户
wordpress.t1

需求1:windows机器的navicat登录到linux中的MySQL,管理员用户。

1
mysql> grant all on *.* to root@'10.0.0.%' identified by '123';

需求2:创建一个应用用户app用户,能从windows上登录mysql,并能操作app库

1
mysql> grant select ,update,insert,delete on app.* to app@'10.0.0.%' identified by '123';

开发人员用户授权流程

1.权限
2.对谁操作
3.你从哪来
4.密码要求

提示:8.0在grant命令添加新特性

建用户和授权分开了
grant 不再支持自动创建用户了,不支持改密码授权之前,必须要提前创建用户。

查看授权

1
2
3
mysql> show grants for app@'10.0.0.%';

mysql> select * from mysql.user \G;

拓展

mysql库下

MySQL授权表 授权范围
user *.*,存放创的用户和密码包括全局实例级别管理权限设置
db app.*,存放设置的数据库级别的权限设置
tables_priv app.t1,存放表级别的权限设置
column_priv 字段,存放字段级别的权限设置
procs_ priv 存放存储过程中的权限设置

回收权限

注意: MySQL中不能通过重复授权,修改权限,只能通过回收权限方式进行修改

1
revoke  delete on app.*  from app@'10.0.0.%';

本地管理员用户密码忘记

–skip-grant-tables: 跳过授权表
– skip-networking:跳过TCP/IP连接

1
2
3
4
5
[root@db01 ~]# mysqld_safe --skip-grant-tables --skip-networking &
mysql> flush privileges;
mysql> alter user root@'localhost' identified by '123456';
[root@db01 ~]# pkill mysqld
[root@db01 ~]# systemctl start mysqld

连接管理

(1) 本地socket链接方式

1
2
socket=/tmp/mysql.sock
mysql -S /tmp/mysql.sock

前提:数据库中必须实现授权xxx@’localhost’用户

说明:只能在本地使用,不依赖与IP和端口

(2)远程TCP/IP链接方式

1
mysql -uroot -p123 -h 192.168.242.51 -P 3306

前提:必须提前创建好可以远程连接的用户(例如:xxx@’192.168.242.%’)

(3)程序链接

1
2
yum install -y php-mysql
pip3 install pymysql

自带客户端命令

mysql 常用参数:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
-u                   用户
-p 密码
-h IP
-P 端口
-S socket文件
-e 免交互执行命令
< 导入SQL脚本

[root@db01 ~]# mysql -uroot -p -h 10.0.0.51 -P3306
Enter password:
mysql> select @@socket;
+-----------------+
| @@socket |
+-----------------+
| /tmp/mysql.sock |
[root@db01 ~]# mysql -uroot -p -S /tmp/mysql.sock
Enter password:
[root@db01 ~]# mysql -uroot -p -e "select user,host from mysql.user;"
Enter password:
+---------------+-----------+
| user | host |
+---------------+-----------+
| abc | 10.0.0.% |
| app | 10.0.0.% |
| root | 10.0.0.% |
| mysql.session | localhost |
| mysql.sys | localhost |
| root | localhost |
+---------------+-----------+
[root@db01 ~]#
[root@db01 ~]# mysql -uroot -p <world.sql
Enter password:
[root@db01 ~]#

多种启动方式介绍

img

以上多种方式,都可以单独启动MySQL服务
mysqld_safe和mysqld一般是在临时维护时使用。
另外,从Centos 7系统开始,支持systemd直接调用mysqld的方式进行启动数据库

mysql_safe和mysqld可以在启动数据库时,加入自己执行的参数

例如--skip-grant-tables

--skip-networking

--defaults-file=/opt/my.cnf

初始化配置

作用

  • 控制MySQL的启动
  • 影响到客户端的连接

初始化配置的方法

  • 预编译
  • 配置文件(所有启动方式)
  • 命令行参数 (仅限于 mysqld_safe mysqld)

初始配置文件

[服务器端]:影响数据库服务端运行

[客户端]:影响本地客户端连接,不影响远程客户端连接

初始化配置文件的默认读取路径

1
2
3
4
5
[root@db01 ~]# mysqld --help --verbose |grep my.cnf
/etc/my.cnf /etc/mysql/my.cnf /usr/local/mysql/etc/my.cnf ~/.my.cnf
注:
默认情况下,MySQL启动时,会依次读取以上配置文件,如果有重复选项,会以最后一个文件设置的为准。
但是,如果启动时加入了--defaults-file=xxxx时,以上的所有文件都不会读取.

配置文件的书写方式:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
[标签]
配置项=xxxx

标签类型:服务端、客户端
服务器端标签:
[mysqld]
[mysqld_safe]
[server]

客户端标签:
[mysql]
[mysqldump]
[client]

配置文件的示例展示:
[root@db01 ~]# cat /etc/my.cnf
[mysqld]
user=mysql
basedir=/app/mysql
datadir=/data/mysql
socket=/tmp/mysql.sock
server_id=6
port=3306
log_error=/data/mysql/mysql.log
[mysql]
socket=/tmp/mysql.sock
prompt=Master [\\d]>

多实例的应用

准备多个目录

1
mkdir -p /data/330{7,8,9}/data

准备配置文件

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
cat > /data/3307/my.cnf <<EOF
[mysqld]
basedir=/app/mysql
datadir=/data/3307/data
socket=/data/3307/mysql.sock
log_error=/data/3307/mysql.log
port=3307
server_id=7
log_bin=/data/3307/mysql-bin
EOF

cat > /data/3308/my.cnf <<EOF
[mysqld]
basedir=/app/mysql
datadir=/data/3308/data
socket=/data/3308/mysql.sock
log_error=/data/3308/mysql.log
port=3308
server_id=8
log_bin=/data/3308/mysql-bin
EOF

cat > /data/3309/my.cnf <<EOF
[mysqld]
basedir=/app/mysql
datadir=/data/3309/data
socket=/data/3309/mysql.sock
log_error=/data/3309/mysql.log
port=3309
server_id=9
log_bin=/data/3309/mysql-bin
EOF

初始化三套数据

1
2
3
4
mv /etc/my.cnf /etc/my.cnf.bak
mysqld --initialize-insecure --user=mysql --datadir=/data/3307/data --basedir=/app/mysql
mysqld --initialize-insecure --user=mysql --datadir=/data/3308/data --basedir=/app/mysql
mysqld --initialize-insecure --user=mysql --datadir=/data/3309/data --basedir=/app/mysql

systemd管理多实例

1
2
3
4
5
6
7
8
9
10
11
cd /etc/systemd/system
cp mysqld.service mysqld3307.service
cp mysqld.service mysqld3308.service
cp mysqld.service mysqld3309.service

vim mysqld3307.service
ExecStart=/app/mysql/bin/mysqld --defaults-file=/data/3307/my.cnf
vim mysqld3308.service
ExecStart=/app/mysql/bin/mysqld --defaults-file=/data/3308/my.cnf
vim mysqld3309.service
ExecStart=/app/mysql/bin/mysqld --defaults-file=/data/3309/my.cnf

授权

1
chown -R mysql.mysql /data/*

启动

1
2
3
systemctl start mysqld3307.service
systemctl start mysqld3308.service
systemctl start mysqld3309.service

验证多实例

1
2
3
4
netstat -lnp|grep 330
mysql -S /data/3307/mysql.sock -e "select @@server_id"
mysql -S /data/3308/mysql.sock -e "select @@server_id"
mysql -S /data/3309/mysql.sock -e "select @@server_id"