- 1. Mysql的架构介绍
- 1.mysql简介
- 2.mysqlLinux版的安装
- 3.Mysql 的用户与权限管理
- 4.Mysql的一些杂项配置
- 5. Mysql逻辑架构介绍
- 1.总体概览
- https://blog.csdn.net/sj349781478/article/details/78224713?ops_request_misc=%257B%2522request%255Fid%2522%253A%2522165172706316781483777664%2522%252C%2522scm%2522%253A%252220140713.130102334.pc%255Fall.%2522%257D&request_id=165172706316781483777664&biz_id=0&utm_medium=distribute.pc_search_result.none-task-blog-2~all~first_rank_ecpm_v1~rank_v31_ecpm-1-78224713.142^v9^pc_search_result_cache,157^v4^control&utm_term=show+profile&spm=1018.2226.3001.4187">2.利用show profile 查看sql的执行周期 https://blog.csdn.net/sj349781478/article/details/78224713?ops_request_misc=%257B%2522request%255Fid%2522%253A%2522165172706316781483777664%2522%252C%2522scm%2522%253A%252220140713.130102334.pc%255Fall.%2522%257D&request_id=165172706316781483777664&biz_id=0&utm_medium=distribute.pc_search_result.none-task-blog-2~all~first_rank_ecpm_v1~rank_v31_ecpm-1-78224713.142^v9^pc_search_result_cache,157^v4^control&utm_term=show+profile&spm=1018.2226.3001.4187
- 3.查询说明
- 4. SQL执行顺序
- 6. Mysql存储引擎
- 4.MyISAM和InnoDB
- 5. 阿里巴巴、淘宝用哪个
1. Mysql的架构介绍
1.mysql简介
1.mysql概述
MySQL是一个关系型数据库管理系统,由瑞典MySQL AB公司开发,目前属于Oracle公司。
MySQL支持大型数据库,支持5000万条记录的数据仓库,32位系统表文件最大可支持4GB,64位系统支持最大的表文件为8TB。
2.Mysql高手是怎样炼成的
1.数据库内部结构和原理
2.数据库建模优化
3.数据库索引建立
4.SQL语句优化
5.SQL编程
6.mysql服务器的安装配置
7.数据库的性能监控分析与系统优化
8.各种参数常量设定
9.主从复制
10.分布式架构搭建、垂直切割和水平切割
11.数据迁移
12.容灾备份和恢复
13.shell或python等脚本语言开发
14.对开源数据库进行二次开发
2.mysqlLinux版的安装
1.下载地址:
http://dev.mysql.com/downloads/mysql/
2.检查工作
1.检查当前系统是否安装过mysql
1、CentOS6
rpm -qa|grep mysql
如果存在mysql-libs的旧版本包如下:
请先执行卸载命令:rpm -e —nodeps mysql-libs
2、CentOS7
rpm -qa|grep mariadb
如果存在如下:
请先执行卸载命令:rpm -e —nodeps mariadb-libs
2.检查当前mysql依赖环境
执行安装命令前,先执行查询命令
rpm -qa|grep libaio
如果存在libaio包如下:
rpm -qa|grep net-tools
如果存在net-tools包如下:

如果不存在需要到centos安装盘里进行rpm安装
3.检查/tmp文件夹权限
由于mysql安装过程中,会通过mysql用户在/tmp目录下新建tmp_db文件,所以请给/tmp较大的权限
执行 :chmod -R 777 /tmp
3.安装
在mysql的安装文件目录下执行:(必须按照顺序执行)
rpm -ivh mysql-community-common-5.7.16-1.el7.x86_64.rpm
rpm -ivh mysql-community-libs-5.7.16-1.el7.x86_64.rpm
rpm -ivh mysql-community-client-5.7.16-1.el7.x86_64.rpm
rpm -ivh mysql-community-server-5.7.16-1.el7.x86_64.rpm
如在检查工作时,没有检查mysql依赖环境在安装mysql-community-server会报错
4. 查看MySQL安装版本
执行 mysqladmin —version命令,类似java -version如果打出消息,即为成功。
通过vim 查看 mysql用户和mysql组
5. mysql服务的初始化
为了保证数据库目录为与文件的所有者为 mysql 登陆用户,如果你是以 root 身份运行 mysql 服务,需要执行下面的命令初始化
mysqld —initialize —user=mysql
另外 —initialize 选项默认以“安全”模式来初始化,则会为 root 用户生成一个密码并将该密码标记为过期,登陆后你需要设置一个新的密码
查看密码:cat /var/log/mysqld.log

root@localhost: 后面就是初始化的密码:.7whV03Eef
6. mysql服务的启+停
启动:systemctl start mysqld.service
查看进程:ps -ef|grep mysqld
状态:systemctl status mysqld.service
关闭:systemctl stop mysqld.service
7.首次登录
首次登陆通过 mysql -uroot -p进行登录,在Enter password:录入初始化密码
因为初始化密码默认是过期的,所以查看数据库会报错
修改密码:
ALTER USER ‘root’@’localhost’ IDENTIFIED BY ‘new_password’;
但新密码太简单会报错
设置完密码就可以用新密码登陆,正常使用数据库了
8. MySQL的安装位置
查看文件安装路径:whereis mysql
运行文件所在路径:which mysql
在linux下查看安装目录 ps -ef|grep mysql
参数 路径 解释 备注
| 参数 | 路径 | 解释 | 备注 |
|---|---|---|---|
| —basedir | /usr/bin | 相关命令目录 | mysqladmin mysqldump等命令 |
| —datadir | /var/lib/mysql/ | mysql数据库文件的存放路径 | |
| —plugin-dir | /usr/lib64/mysql/plugin | mysql插件存放路径 | |
| —log-error | /var/lib/mysql/jack.atguigu.err | mysql错误日志路径 | |
| —pid-file | /var/run/mysqld/mysqld.pid | 进程pid文件 | |
| —socket | /var/lib/mysql/mysql.sock | 本地连接时用的unix套接字文件 | |
| /usr/share/mysql | 配置文件目录 | mysql脚本及配置文件 | |
| /etc/systemd/system/multi-user.target.wants/mysqld.service | 服务启停相关脚本 |
9. 自启动mysql服务
查看mysql是否自启动(默认自启动)
systemctl list-unit-files|grep mysqld.service

如不是enabled可以运行如下命令设置自启动
systemctl enable mysqld.sercice
10.修改字符集问题
1、修改配置文件
vim /etc/my.cnf
在最后加上中文字符集配置
character_set_server=utf8
2、重新启动mysql
systemctl restart mysqld.service
3、已生成的库表字符集如何变更https://blog.csdn.net/zh_1721342390/article/details/111632195
修改数据库的字符集
alter database 数据库名 characterset utf8;
mysql> alter database mydb character set ‘utf8’;
修改数据表的字符集
mysql> alter table mytbl convert to character set ‘utf8’;
3.Mysql 的用户与权限管理
1.MySQL的用户管理
1.创建用户
create user zhang3 identified by ‘123456’;
表示创建名称为zhang3的用户,密码设为123456;
2.了解user表
查看用户
select host,user,authentication_string,select_priv,insert_priv,drop_priv from mysql.user;

host : 表示连接类型
% 表示所有远程通过 TCP方式的连接
IP 地址 如 (192.168.1.2,127.0.0.1) 通过制定ip地址进行的TCP方式的连接
机器名 通过制定i网络中的机器名进行的TCP方式的连接
::1 IPv6的本地ip地址 等同于IPv4的 127.0.0.1
localhost 本地方式通过命令行方式的连接 ,比如mysql -u xxx -p 123xxx 方式的连接。
User:表示用户名
同一用户通过不同方式链接的权限是不一样的。
password : 密码
所有密码串通过 password(明文字符串) 生成的密文字符串。加密算法为MYSQLSHA1 ,不可逆 。
mysql 5.7 的密码保存到 authentication_string 字段中不再使用password 字段。
select_priv , insert_priv等
为该用户所拥有的权限。
3.设置密码
修改当前用户的密码:
set password =password(‘123456’)
修改某个用户的密码:
update mysql.user set password=password(‘123456’) where user=’li4’;
flush privileges; #所有通过user表的修改,必须用该命令才能生效。
4.修改用户
修改用户名:
update mysql.user set user=’li4’ where user=’wang5’;
flush privileges; #所有通过user表的修改,必须用该命令才能生效。
5.删除用户
drop user li4 ;
不要通过delete from user u where user=’li4’ 进行删除,系统会有残留信息保留。
2.权限管理
1.授予权限
授权命令:
grant 权限1,权限2,…权限n on 数据库名称.表名称 to 用户名@用户地址 identified by ‘连接口令’;
该权限如果发现没有该用户,则会直接新建一个用户。
比如
#给li4用户用本地命令行方式下,授予atguigudb这个库下的所有表的插删改查的权限。
grant select,insert,delete,drop on atguigudb.* to li4@localhost;
#授予通过网络方式登录的的joe用户 ,对所有库所有表的全部权限,密码设为123.
2.收回权限
grant all privileges on *.* to joe@'%' identified by '123';
查看当前用户权限
show grants;
收回权限命令:
revoke 权限1,权限2,…权限n on 数据库名称.表名称 from 用户名@用户地址 ;
#收回全库全表的所有权限
REVOKE ALL PRIVILEGES ON mysql.* FROM joe@localhost;
#收回mysql库下的所有表的插删改查权限
REVOKE select,insert,update,delete ON mysql.* FROM joe@localhost;
3.查看权限
查看当前用户权限
show grants;
查看某用户的全局权限
select from user ;
查看某用户的某个表的权限
select from mysql.tables_priv;
4.通过工具远程访问
1、先 ping 一下数据库服务器的ip 地址确认网络畅通。
2、关闭数据库服务的防火墙
service iptables stop
3、 确认Mysql中已经有可以通过远程登录的账户
select from mysql.user where user=’zhang’ and host=’%’;
如果没有用户,先执行如下命令:
grant all privileges on .* to li4@’%’ identified by ‘123123’;
3.通过工具远程访问
4.Mysql的一些杂项配置
1.MySQL的sql_mode合理设置
sql_mode是个很容易被忽视的变量,默认值是空值,在这种设置下是可以允许一些非法操作的,比如允许一些非法数据的插入。在生产环境必须将这个值设置为严格模式,所以开发、测试环境的数据库也必须要设置,这样在开发测试阶段就可以发现问题。
show variables like ‘sql_mode’;
sql_mode常用值如下:
set sql_mode=’ONLY_FULL_GROUP_BY’;
ONLY_FULL_GROUP_BY:
对于GROUP BY聚合操作,如果在SELECT中的列,没有在GROUP BY中出现,那么这个SQL是不合法的,因为列不在GROUP BY从句中
NO_AUTO_VALUE_ON_ZERO:
该值影响自增长列的插入。默认设置下,插入0或NULL代表生成下一个自增长值。如果用户 希望插入的值为0,而该列又是自增长的,那么这个选项就有用了。
STRICT_TRANS_TABLES:
在该模式下,如果一个值不能插入到一个事务表中,则中断当前的操作,对非事务表不做限制
NO_ZERO_IN_DATE:
在严格模式下,不允许日期和月份为零
NO_ZERO_DATE:
设置该值,mysql数据库不允许插入零日期,插入零日期会抛出错误而不是警告。
ERROR_FOR_DIVISION_BY_ZERO:
在INSERT或UPDATE过程中,如果数据被零除,则产生错误而非警告。如 果未给出该模式,那么数据被零除时MySQL返回NULL
NO_AUTO_CREATE_USER:
禁止GRANT创建密码为空的用户
2.事例
CREATE TABLE mytbl2 (id INT,NAME VARCHAR(200),age INT,dept INT);
INSERT INTO mytbl2 VALUES(1,'zhang3',33,101);
INSERT INTO mytbl2 VALUES(2,'li4',34,101);
INSERT INTO mytbl2 VALUES(3,'wang5',34,102);
INSERT INTO mytbl2 VALUES(4,'zhao6',34,102);
INSERT INTO mytbl2 VALUES(5,'tian7',36,102);
#每个机构年龄最大的人
SELECT NAME,dept,MAX(age) FROM mytbl2 GROUP BY dept;
上面语句是错的
group by使用原则:select 后面只能放 函数 和group by后的字段
1、每个机构最大年龄 2、的人
SELECT * FROM mytbl2 m INNER JOIN(
SELECT dept,MAX(age)maxage FROM mytbl2 GROUP BY dept
)ab ON ab.dept=m.dept AND m.age=ab.maxage
5. Mysql逻辑架构介绍
1.总体概览
和其它数据库相比,MySQL有点与众不同,它的架构可以在多种不同场景中应用并发挥良好作用。主要体现在存储引擎的架构上,
插件式的存储引擎架构将查询处理和其它的系统任务以及数据的存储提取相分离。这种架构可以根据业务的需求和实际需要选择合适的存储引擎。

1.连接层
最上层是一些客户端和连接服务,包含本地sock通信和大多数基于客户端/服务端工具实现的类似于tcp/ip的通信。主要完成一些类似于连接处理、授权认证、及相关的安全方案。在该层上引入了线程池的概念,为通过认证安全接入的客户端提供线程。同样在该层上可以实现基于SSL的安全链接。服务器也会为安全接入的每个客户端验证它所具有的操作权限。
2.服务层
2.1 Management Serveices & Utilities: 系统管理和控制工具
2.2 SQL Interface: SQL接口
接受用户的SQL命令,并且返回用户需要查询的结果。比如select from就是调用SQL Interface
2.3 Parser: 解析器
SQL命令传递到解析器的时候会被解析器验证和解析。
2.4 Optimizer: 查询优化器。
SQL语句在查询之前会使用查询优化器对查询进行优化。 <br /> 用一个例子就可以理解: select uid,name from user where gender= 1;<br /> 优化器来决定先投影还是先过滤。
2.5 Cache和Buffer: 查询缓存。
如果查询缓存有命中的查询结果,查询语句就可以直接去查询缓存中取数据。<br /> 这个缓存机制是由一系列小缓存组成的。比如表缓存,记录缓存,key缓存,权限缓存等
3.引擎层
存储引擎层,存储引擎真正的负责了MySQL中数据的存储和提取,服务器通过API与存储引擎进行通信。不同的存储引擎具有的功能不同,这样我们可以根据自己的实际需要进行选取。后面介绍MyISAM和InnoDB
4.存储层
数据存储层,主要是将数据存储在运行于裸设备的文件系统之上,并完成与存储引擎的交互。
2.利用show profile 查看sql的执行周期 https://blog.csdn.net/sj349781478/article/details/78224713?ops_request_misc=%257B%2522request%255Fid%2522%253A%2522165172706316781483777664%2522%252C%2522scm%2522%253A%252220140713.130102334.pc%255Fall.%2522%257D&request_id=165172706316781483777664&biz_id=0&utm_medium=distribute.pc_search_result.none-task-blog-2~all~first_rank_ecpm_v1~rank_v31_ecpm-1-78224713.142^v9^pc_search_result_cache,157^v4^control&utm_term=show+profile&spm=1018.2226.3001.4187
Show profile 是mysql 提供可以用来分析当前会话中语句执行的资源消耗情况。可以用于sql 调优的测量。默认情况下,参数处于关闭状态,并保存最近15次的运行结果。
修改配置文件/etc/my.cnf
新增一行:query_cache_type=1
重启mysql
1.是否支持:查看当前的mysql版本是否支持 默认关闭,使用前需要开启;
先开启 show variables like ‘%profiling%’;
set profiling=1;或者 set profiling=on;
select * from xxx ;
show profiles; #显示最近的几次查询
show profile cpu,block io for query 编号 #查看程序的执行步骤
3.查询说明
1.查询流程图:
首先,mysql的查询流程大致是:
mysql客户端通过协议与mysql服务器建连接,发送查询语句,先检查查询缓存,如果命中,直接返回结果,否则进行语句解析,也就是说,在解析查询之前,服务器会先访问查询缓存(query cache)——它存储SELECT语句以及相应的查询结果集。如果某个查询结果已经位于缓存中,服务器就不会再对查询进行解析、优化、以及执行。它仅仅将缓存中的结果返回给用户即可,这将大大提高系统的性能。
2. 语法解析器和预处理:
首先mysql通过关键字将SQL语句进行解析,并生成一颗对应的“解析树”。mysql解析器将使用mysql语法规则验证和解析查询;预处理器则根据一些mysql规则进一步检查解析数是否合法。
查询优化器当解析树被认为是合法的了,并且由优化器将其转化成执行计划。一条查询可以有很多种执行方式,最后都返回相同的结果。优化器的作用就是找到这其中最好的执行计划。。
然后,mysql默认使用的BTREE索引,并且一个大致方向是:无论怎么折腾sql,至少在目前来说,mysql最多只用到表中的一个索引。
4. SQL执行顺序
1.手写
2.机读
随着Mysql版本的更新换代,其优化器也在不断的升级,**优化器会分析不同执行顺序产生的性能消耗不同而动态调整执行顺序。**<br /> **下面是经常出现的查询顺序**:<br />
6. Mysql存储引擎
1.查看命令
2. 你的mysql当前默认的存储引擎:
show variables like ‘%storage_engine%’;
3. 各个引擎简介
1、InnoDB存储引擎
InnoDB是MySQL的默认事务型引擎,它被设计用来处理大量的短期(short-lived)事务。除非有非常特别的原因需要使用其他的存储引擎,否则应该优先考虑InnoDB引擎。
2、MyISAM存储引擎
MyISAM提供了大量的特性,包括全文索引、压缩、空间函数(GIS)等,但MyISAM不支持事务和行级锁,有一个毫无疑问的缺陷就是崩溃后无法安全恢复。
3、Archive引擎
Archive档案存储引擎只支持INSERT和SELECT操作,在MySQL5.1之前不支持索引。
Archive表适合日志和数据采集类应用。
根据英文的测试结论来看,Archive表比MyISAM表要小大约75%,比支持事务处理的InnoDB表小大约83%。
4、Blackhole引擎
Blackhole引擎没有实现任何存储机制,它会丢弃所有插入的数据,不做任何保存。但服务器会记录Blackhole表的日志,所以可以用于复制数据到备库,或者简单地记录到日志。但这种应用方式会碰到很多问题,因此并不推荐。
5、CSV引擎
CSV引擎可以将普通的CSV文件作为MySQL的表来处理,但不支持索引。
CSV引擎可以作为一种数据交换的机制,非常有用。
CSV存储的数据直接可以在操作系统里,用文本编辑器,或者excel读取。
6、Memory引擎
如果需要快速地访问数据,并且这些数据不会被修改,重启以后丢失也没有关系,那么使用Memory表是非常有用。Memory表至少比MyISAM表要快一个数量级。
7、Federated引擎
Federated引擎是访问其他MySQL服务器的一个代理,尽管该引擎看起来提供了一种很好的跨服务器的灵活性,但也经常带来问题,因此默认是禁用的。
4.MyISAM和InnoDB
| 对比项 | MyISAM | InnoDB |
|---|---|---|
| 外键 | 不支持 | 支持 |
| 事务 | 不支持 | 支持 |
| 行表锁 | 表锁,即使操作一条记录也会锁住整个表,不适合高并发的操作 | 行锁,操作时只锁某一行,不对其它行有影响,适合高并发的操作 |
| 缓存 | 只缓存索引,不缓存真实数据 | 不仅缓存索引还要缓存真实数据,对内存要求较高,而且内存大小对性能有决定性的影响 |
| 关注点 | 节省资源、消耗少、简单业务 | 并发写、事务、更大资源 |
| 默认安装 | Y | Y |
| 默认使用 | N | Y |
| 自带系统表使用 | Y | N |
5. 阿里巴巴、淘宝用哪个
Percona 为 MySQL 数据库服务器进行了改进,在功能和性能上较 MySQL 有着很显著的提升。该版本提升了在高负载情况下的 InnoDB 的性能、为 DBA 提供一些非常有用的性能诊断工具;另外有更多的参数和命令来控制服务器行为。

该公司新建了一款存储引擎叫xtradb完全可以替代innodb,并且在性能和并发上做得更好,
阿里巴巴大部分mysql数据库其实使用的percona的原型加以修改。AliSql+AliRedis
