mysql学习-centos7上安装配置mysql8.0

    目前MySQL官网最新的版本就是mysql8.0，虽然在新特性上没有新元素的加入，可是它对mysql的源代码进行了重构，最突出的一点就是对MySQL Optimizer优化器的改进，支持隐藏索引等功能。新特性包括

一、新增了事务类型的数据字典，全部的元数据信息，都用InnoDB存储引擎进行存储。

二、调整角色管理和受权

三、配置持久化

四、默认字符集为utf8mb4，包含全部emoji字符

五、隐藏索引

六、支持DDL 原子操做

七、引入直方图

八、支持会话级别SET_VAR动态调整部分参数

1、环境准备

在进行安装以前，须要进行环境准备工做，针对 centos7作一些优化工做

systemctl stip firewalld
systemctl disable firewalld
sed -i 's/SELINUX=.*/SELINUX=disabled/g' /etc/sysconfig/selinux        #重启机器后生效

查看cpu io调度模型。 mysql经过cpu进行IO调度去磁盘获取数据

cat /sys/block/sda/queue/scheduler            #sda为第一块硬盘

【】 中为默认

说明：

一、 cfg模式为比较通用的算法，保证全部认为尽可能公平

此模式为比较通用的算法，保证全部的任务精良公平

二、deadline模式是在cfq的基础上，确保了在一个截止时间内服务请求，这个截止时间读期限短于写期限，这样就防止了写操做由于不能被读取而饿死的现象

deadline是数据库服务器IO模型的最好选择，优先处于读请求，比较适合SA机械硬盘

3）noop模式只有一个队列，每当有新的请求进来会将其与最近的请求进行合并设备文件

此模式优先写而饿死读操做，与deadline 相反，此模式不适用，若是采用固态硬盘，则能够尝试

建议为deadline模式，按照以下方式进行修改

grubby --update-kernel=ALL --args="elevator=deadile"

swap使用： swap是一个对操做系统内存的保护机制，是磁盘上文件到内存的映射，在内存不足或者内存任务不活跃时操做系统将这些任务调度到swap中，防止系统负载太高。过多使用 swap就会下降数据库的性能，由于其自己并非内存，因此须要取一个均衡值，即保证swap使用，但尽可能不使用，若是服务器性能较好，能够直接设置为swap 0

cat /proc/sys/vm/swappiness        #查看当前分配比例

修改使用优先级比例：

echo 10 > /proc/sys/vm/swappiness        #当前修改成10
echo -e > "echo 10 >/proc/sysvm/swappiness" >> /etc/rc.d/rc.local

文件系统:centos7默认文件系统为xfs , 日志型文件系统，适合mysql存储结构化数据

系统参数:mysql自己就是为应用提供服务的，因此生产上会有大量的链接到mysql上，而且并发进行文件数据读取。而linux自己为了防止进程过多致使系统奔溃，对进行参数进行了限制，能够直接进行修改

ulimit -a
#打开文件的句柄数：open files
#针对用户数量限制：max user processes

按照以下方式修改

echo -e "* soft nproc 65535\n* hard nproc 65535\n* soft nofile 65535\n* hard nofile 65535\n" >> /etc/security/limits.conf #退出终端后ulimit -a 查看

或直接编辑/etc/security/limits.conf,  直接添加

2、使用yum 安装 mysql8.0

参考官方手册进行安装，地址为https://dev.mysql.com/doc/refman/8.0/en/

llinux上使用社区版

首先，添加mysql yum仓库，yum仓库的下载地址为https://dev.mysql.com/downloads/repo/yum/

能够直接使用 wget 下载

wget https://dev.mysql.com/get/mysql80-community-release-el7-3.noarch.rpm

下载完成后采用yum 安装仓库

yum install mysql80-community-release-el7-3.noarch.rpm

而后配置禁用mysql5.7的仓库，启用mysql8.0  的仓库

yum install yum-utils -y
yum-config-manager --disable mysql57-community
yum-config-manager --enable mysql80-community

而后检查是否正确启用了仓库

yum repolist enabled | grep mysql

而后直接yum安装便可

yum install mysql-community-server -y & #后台安装

3、配置文件

采用yum安装的mysql, 会直接读取/etc/my.cnf做为配置文件。

默认的配置配置文件内容以下

其中默认决定了如下关键配置

datadir设定默认数据存储路径

socket默认启动sock

 log-error日志路径

pid-file

好比咱们想更改，好比新建一个/data/mysql，将mysql的数据和配置等保存在这个路径，则须要修改。同时要注意，在yum安装完后，会新建mysql帐户，咱们须要把路径归属调整为mysql用户。

好比

mkdir -p /data/mysql/{data,tmp,log,mysqld}            #这四个文件分别表明配置文件中四个配置
chown -R mysql:mysql /data/mysql

固然， /etc/my.cnf配置文件能够优化，添加内容，如下为核心参数含义，除了这些须要配置外

innodb_buffer_pool 
注：缓冲池位于主内存中，InnoDB用它来缓存被访问过的表和索引文件，使经常使用数据能够直接在内存中被处理，从而提高处理速度；
innodb_buffer_pool_instance
注：MySQL5.6.6以后能够调整为多个。表示InnoDB缓冲区能够被划分为多个区域，也能够理解为把innodb_buffer_pool划分为多个实例，能够提升并发性，避免在高并发环境下，出现内存的争用问题；
innodb_data_file_path
注：该参数能够指定系统表空间文件的路径和ibdata1文件的大小。默认大小是10MB，这里建议调整为1GB
transaction_isolation
注：MySQL数据库的事务隔离级别有四种，分别为READ-UNCOMMITTED、READ-COMMITTED、REPEATABLE-READ和SERIALIZABLE。默认采用REPEATABLE-READ（可重复读）
innodb_log_buffer_size
注：是日志缓冲的大小，InnoDB改变数据的时候，它会把此次改动的记录先写到日志缓冲中
innodb_log_file_size
注：是指Redo log日志的大小，该值设置不宜过大也不宜太小，若是设置太大，实例恢复的时候须要较长时间，若是设置过小，会形成redo log 切换频繁，产生无用的I/O消耗，影响数据库性能
innodb_log_files_in_group
注：redo log文件组中日志文件的数量，默认状况下至少有2个
max_connections
该参数表明MySQL数据库的最大链接数
expire_logs_days
注：该参数表明binlog的过时时间，单位是天
slow_query_log
注：慢查询日志的开关，该参数等于1表明开启慢查询
long_query_time
注：慢查询的时间，某条SQL语句超过该参数设置的时间，就会记录到慢查询日志中。单位是秒
binlog_format
注：该参数表明二进制日志的格式。binlog格式有三种statement、row和mixed。生产环境中使用row这种格式更安全，不会出现跨库复制丢数据的状况
lower_case_table_names
注：表名是否区分大小的参数。默认是值为0。0表明区分大小写，1表明不区分大小写，以小写存储
interactive_timeout
注：是服务器关闭交互式链接前等待活动的时间,默认是28800s（8小时）
wait_timeout
注：是服务器关闭非交互式链接以前等待活动的时间，默认是28800s（8小时）
innodb_flush_method
注：这个参数影响InnoDB数据文件，redo log文件的打开刷写模式
log_queries_not_using_indexes
注：若是运行的SQL语句没有使用索引，则MySQL数据库一样会将这条SQL语句记录到慢查询日志文件中

除了核心参数以外，可能在某些场景须要设置其余参数

如下我收集的一个参数配置解释

[client]
port = 3306
socket = /tmp/mysql.sock
[mysqld]
port = 3306
socket = /tmp/mysql.sock
basedir = /usr/local/mysql
datadir = /data/mysql
pid-file = /data/mysql/mysql.pid
user = mysql
bind-address = 0.0.0.0
server-id = 1 #表示是本机的序号为1,通常来说就是master的意思
skip-name-resolve
# 禁止MySQL对外部链接进行DNS解析，使用这一选项能够消除MySQL进行DNS解析的时间。但须要注意，若是开启该选项，
# 则全部远程主机链接受权都要使用IP地址方式，不然MySQL将没法正常处理链接请求
#skip-networking
back_log = 600
# MySQL能有的链接数量。当主要MySQL线程在一个很短期内获得很是多的链接请求，这就起做用，
# 而后主线程花些时间(尽管很短)检查链接而且启动一个新线程。back_log值指出在MySQL暂时中止回答新请求以前的短期内多少个请求能够被存在堆栈中。
# 若是指望在一个短期内有不少链接，你须要增长它。也就是说，若是MySQL的链接数据达到max_connections时，新来的请求将会被存在堆栈中，
# 以等待某一链接释放资源，该堆栈的数量即back_log，若是等待链接的数量超过back_log，将不被授予链接资源。
# 另外，这值（back_log）限于您的操做系统对到来的TCP/IP链接的侦听队列的大小。
# 你的操做系统在这个队列大小上有它本身的限制（能够检查你的OS文档找出这个变量的最大值），试图设定back_log高于你的操做系统的限制将是无效的。
max_connections = 1000
# MySQL的最大链接数，若是服务器的并发链接请求量比较大，建议调高此值，以增长并行链接数量，固然这创建在机器能支撑的状况下，由于若是链接数越多，介于MySQL会为每一个链接提供链接缓冲区，就会开销越多的内存，因此要适当调整该值，不能盲目提升设值。能够过'conn%'通配符查看当前状态的链接数量，以定夺该值的大小。
max_connect_errors = 6000
# 对于同一主机，若是有超出该参数值个数的中断错误链接，则该主机将被禁止链接。如需对该主机进行解禁，执行：FLUSH HOST。
open_files_limit = 65535
# MySQL打开的文件描述符限制，默认最小1024;当open_files_limit没有被配置的时候，比较max_connections*5和ulimit -n的值，哪一个大用哪一个，
# 当open_file_limit被配置的时候，比较open_files_limit和max_connections*5的值，哪一个大用哪一个。
table_open_cache = 128
# MySQL每打开一个表，都会读入一些数据到table_open_cache缓存中，当MySQL在这个缓存中找不到相应信息时，才会去磁盘上读取。默认值64
# 假定系统有200个并发链接，则需将此参数设置为200*N(N为每一个链接所需的文件描述符数目)；
# 当把table_open_cache设置为很大时，若是系统处理不了那么多文件描述符，那么就会出现客户端失效，链接不上
max_allowed_packet = 4M
# 接受的数据包大小；增长该变量的值十分安全，这是由于仅当须要时才会分配额外内存。例如，仅当你发出长查询或MySQLd必须返回大的结果行时MySQLd才会分配更多内存。
# 该变量之因此取较小默认值是一种预防措施，以捕获客户端和服务器之间的错误信息包，并确保不会因偶然使用大的信息包而致使内存溢出。
binlog_cache_size = 1M
# 一个事务，在没有提交的时候，产生的日志，记录到Cache中；等到事务提交须要提交的时候，则把日志持久化到磁盘。默认binlog_cache_size大小32K
max_heap_table_size = 8M
# 定义了用户能够建立的内存表(memory table)的大小。这个值用来计算内存表的最大行数值。这个变量支持动态改变
tmp_table_size = 16M
# MySQL的heap（堆积）表缓冲大小。全部联合在一个DML指令内完成，而且大多数联合甚至能够不用临时表便可以完成。
# 大多数临时表是基于内存的(HEAP)表。具备大的记录长度的临时表 (全部列的长度的和)或包含BLOB列的表存储在硬盘上。
# 若是某个内部heap（堆积）表大小超过tmp_table_size，MySQL能够根据须要自动将内存中的heap表改成基于硬盘的MyISAM表。还能够经过设置tmp_table_size选项来增长临时表的大小。也就是说，若是调高该值，MySQL同时将增长heap表的大小，可达到提升联接查询速度的效果
read_buffer_size = 2M
# MySQL读入缓冲区大小。对表进行顺序扫描的请求将分配一个读入缓冲区，MySQL会为它分配一段内存缓冲区。read_buffer_size变量控制这一缓冲区的大小。
# 若是对表的顺序扫描请求很是频繁，而且你认为频繁扫描进行得太慢，能够经过增长该变量值以及内存缓冲区大小提升其性能
read_rnd_buffer_size = 8M
# MySQL的随机读缓冲区大小。当按任意顺序读取行时(例如，按照排序顺序)，将分配一个随机读缓存区。进行排序查询时，
# MySQL会首先扫描一遍该缓冲，以免磁盘搜索，提升查询速度，若是须要排序大量数据，可适当调高该值。但MySQL会为每一个客户链接发放该缓冲空间，因此应尽可能适当设置该值，以免内存开销过大
sort_buffer_size = 8M
# MySQL执行排序使用的缓冲大小。若是想要增长ORDER BY的速度，首先看是否可让MySQL使用索引而不是额外的排序阶段。
# 若是不能，能够尝试增长sort_buffer_size变量的大小
join_buffer_size = 8M
# 联合查询操做所能使用的缓冲区大小，和sort_buffer_size同样，该参数对应的分配内存也是每链接独享
thread_cache_size = 8
# 这个值（默认8）表示能够从新利用保存在缓存中线程的数量，当断开链接时若是缓存中还有空间，那么客户端的线程将被放到缓存中，
# 若是线程从新被请求，那么请求将从缓存中读取,若是缓存中是空的或者是新的请求，那么这个线程将被从新建立,若是有不少新的线程，
# 增长这个值能够改善系统性能.经过比较Connections和Threads_created状态的变量，能够看到这个变量的做用。(–>表示要调整的值)
# 根据物理内存设置规则以下：
# 1G  —> 8
# 2G  —> 16
# 3G  —> 32
# 大于3G  —> 64
query_cache_size = 8M
#MySQL的查询缓冲大小（从4.0.1开始，MySQL提供了查询缓冲机制）使用查询缓冲，MySQL将SELECT语句和查询结果存放在缓冲区中，
# 从此对于一样的SELECT语句（区分大小写），将直接从缓冲区中读取结果。根据MySQL用户手册，使用查询缓冲最多能够达到238%的效率。
# 经过检查状态值'Qcache_%'，能够知道query_cache_size设置是否合理：若是Qcache_lowmem_prunes的值很是大，则代表常常出现缓冲不够的状况，
# 若是Qcache_hits的值也很是大，则代表查询缓冲使用很是频繁，此时须要增长缓冲大小；若是Qcache_hits的值不大，则代表你的查询重复率很低，
# 这种状况下使用查询缓冲反而会影响效率，那么能够考虑不用查询缓冲。此外，在SELECT语句中加入SQL_NO_CACHE能够明确表示不使用查询缓冲
query_cache_limit = 2M
#指定单个查询可以使用的缓冲区大小，默认1M
key_buffer_size = 4M
#指定用于索引的缓冲区大小，增长它可获得更好处理的索引(对全部读和多重写)，到你能负担得起那样多。若是你使它太大，
# 系统将开始换页而且真的变慢了。对于内存在4GB左右的服务器该参数可设置为384M或512M。经过检查状态值Key_read_requests和Key_reads，
# 能够知道key_buffer_size设置是否合理。比例key_reads/key_read_requests应该尽量的低，
# 至少是1:100，1:1000更好(上述状态值可使用SHOW STATUS LIKE 'key_read%'得到)。注意：该参数值设置的过大反而会是服务器总体效率下降
ft_min_word_len = 4
# 分词词汇最小长度，默认4
transaction_isolation = REPEATABLE-READ
# MySQL支持4种事务隔离级别，他们分别是：
# READ-UNCOMMITTED, READ-COMMITTED, REPEATABLE-READ, SERIALIZABLE.
# 如没有指定，MySQL默认采用的是REPEATABLE-READ，ORACLE默认的是READ-COMMITTED
log_bin = mysql-bin
binlog_format = mixed
expire_logs_days = 30 #超过30天的binlog删除
log_error = /data/mysql/mysql-error.log #错误日志路径
slow_query_log = 1
long_query_time = 1 #慢查询时间 超过1秒则为慢查询
slow_query_log_file = /data/mysql/mysql-slow.log
performance_schema = 0
explicit_defaults_for_timestamp
#lower_case_table_names = 1 #不区分大小写
skip-external-locking #MySQL选项以免外部锁定。该选项默认开启
default-storage-engine = InnoDB #默认存储引擎
innodb_file_per_table = 1
# InnoDB为独立表空间模式，每一个数据库的每一个表都会生成一个数据空间
# 独立表空间优势：
# 1．每一个表都有自已独立的表空间。
# 2．每一个表的数据和索引都会存在自已的表空间中。
# 3．能够实现单表在不一样的数据库中移动。
# 4．空间能够回收（除drop table操做处，表空不能自已回收）
# 缺点：
# 单表增长过大，如超过100G
# 结论：
# 共享表空间在Insert操做上少有优点。其它都没独立表空间表现好。当启用独立表空间时，请合理调整：innodb_open_files
innodb_open_files = 500
# 限制Innodb能打开的表的数据，若是库里的表特别多的状况，请增长这个。这个值默认是300
innodb_buffer_pool_size = 64M
# InnoDB使用一个缓冲池来保存索引和原始数据, 不像MyISAM.
# 这里你设置越大,你在存取表里面数据时所须要的磁盘I/O越少.
# 在一个独立使用的数据库服务器上,你能够设置这个变量到服务器物理内存大小的80%
# 不要设置过大,不然,因为物理内存的竞争可能致使操做系统的换页颠簸.
# 注意在32位系统上你每一个进程可能被限制在 2-3.5G 用户层面内存限制,
# 因此不要设置的过高.
innodb_write_io_threads = 4
innodb_read_io_threads = 4
# innodb使用后台线程处理数据页上的读写 I/O(输入输出)请求,根据你的 CPU 核数来更改,默认是4
# 注:这两个参数不支持动态改变,须要把该参数加入到my.cnf里，修改完后重启MySQL服务,容许值的范围从 1-64
innodb_thread_concurrency = 0
# 默认设置为 0,表示不限制并发数，这里推荐设置为0，更好去发挥CPU多核处理能力，提升并发量
innodb_purge_threads = 1
# InnoDB中的清除操做是一类按期回收无用数据的操做。在以前的几个版本中，清除操做是主线程的一部分，这意味着运行时它可能会堵塞其它的数据库操做。
# 从MySQL5.5.X版本开始，该操做运行于独立的线程中,并支持更多的并发数。用户可经过设置innodb_purge_threads配置参数来选择清除操做是否使用单
# 独线程,默认状况下参数设置为0(不使用单独线程),设置为 1 时表示使用单独的清除线程。建议为1
innodb_flush_log_at_trx_commit = 2
# 0：若是innodb_flush_log_at_trx_commit的值为0,log buffer每秒就会被刷写日志文件到磁盘，提交事务的时候不作任何操做（执行是由mysql的master thread线程来执行的。
# 主线程中每秒会将重作日志缓冲写入磁盘的重作日志文件(REDO LOG)中。不论事务是否已经提交）默认的日志文件是ib_logfile0,ib_logfile1
# 1：当设为默认值1的时候，每次提交事务的时候，都会将log buffer刷写到日志。
# 2：若是设为2,每次提交事务都会写日志，但并不会执行刷的操做。每秒定时会刷到日志文件。要注意的是，并不能保证100%每秒必定都会刷到磁盘，这要取决于进程的调度。
# 每次事务提交的时候将数据写入事务日志，而这里的写入仅是调用了文件系统的写入操做，而文件系统是有 缓存的，因此这个写入并不能保证数据已经写入到物理磁盘
# 默认值1是为了保证完整的ACID。固然，你能够将这个配置项设为1之外的值来换取更高的性能，可是在系统崩溃的时候，你将会丢失1秒的数据。
# 设为0的话，mysqld进程崩溃的时候，就会丢失最后1秒的事务。设为2,只有在操做系统崩溃或者断电的时候才会丢失最后1秒的数据。InnoDB在作恢复的时候会忽略这个值。
# 总结
# 设为1固然是最安全的，但性能页是最差的（相对其余两个参数而言，但不是不能接受）。若是对数据一致性和完整性要求不高，彻底能够设为2，若是只最求性能，例如高并发写的日志服务器，设为0来得到更高性能
innodb_log_buffer_size = 2M
# 此参数肯定些日志文件所用的内存大小，以M为单位。缓冲区更大能提升性能，但意外的故障将会丢失数据。MySQL开发人员建议设置为1－8M之间
innodb_log_file_size = 32M
# 此参数肯定数据日志文件的大小，更大的设置能够提升性能，但也会增长恢复故障数据库所需的时间
innodb_log_files_in_group = 3
# 为提升性能，MySQL能够以循环方式将日志文件写到多个文件。推荐设置为3
innodb_max_dirty_pages_pct = 90
# innodb主线程刷新缓存池中的数据，使脏数据比例小于90%
innodb_lock_wait_timeout = 120 
# InnoDB事务在被回滚以前能够等待一个锁定的超时秒数。InnoDB在它本身的锁定表中自动检测事务死锁而且回滚事务。InnoDB用LOCK TABLES语句注意到锁定设置。默认值是50秒
bulk_insert_buffer_size = 8M
# 批量插入缓存大小， 这个参数是针对MyISAM存储引擎来讲的。适用于在一次性插入100-1000+条记录时， 提升效率。默认值是8M。能够针对数据量的大小，翻倍增长。
myisam_sort_buffer_size = 8M
# MyISAM设置恢复表之时使用的缓冲区的尺寸，当在REPAIR TABLE或用CREATE INDEX建立索引或ALTER TABLE过程当中排序 MyISAM索引分配的缓冲区
myisam_max_sort_file_size = 10G
# 若是临时文件会变得超过索引，不要使用快速排序索引方法来建立一个索引。注释：这个参数以字节的形式给出
myisam_repair_threads = 1
# 若是该值大于1，在Repair by sorting过程当中并行建立MyISAM表索引(每一个索引在本身的线程内) 
interactive_timeout = 28800
# 服务器关闭交互式链接前等待活动的秒数。交互式客户端定义为在mysql_real_connect()中使用CLIENT_INTERACTIVE选项的客户端。默认值：28800秒（8小时）
wait_timeout = 28800
# 服务器关闭非交互链接以前等待活动的秒数。在线程启动时，根据全局wait_timeout值或全局interactive_timeout值初始化会话wait_timeout值，
# 取决于客户端类型(由mysql_real_connect()的链接选项CLIENT_INTERACTIVE定义)。参数默认值：28800秒（8小时）
# MySQL服务器所支持的最大链接数是有上限的，由于每一个链接的创建都会消耗内存，所以咱们但愿客户端在链接到MySQL Server处理完相应的操做后，
# 应该断开链接并释放占用的内存。若是你的MySQL Server有大量的闲置链接，他们不只会白白消耗内存，并且若是链接一直在累加而不断开，
# 最终确定会达到MySQL Server的链接上限数，这会报'too many connections'的错误。对于wait_timeout的值设定，应该根据系统的运行状况来判断。
# 在系统运行一段时间后，能够经过show processlist命令查看当前系统的链接状态，若是发现有大量的sleep状态的链接进程，则说明该参数设置的过大，
# 能够进行适当的调整小些。要同时设置interactive_timeout和wait_timeout才会生效。
[mysqldump]
quick
max_allowed_packet = 16M #服务器发送和接受的最大包长度
[myisamchk]
key_buffer_size = 8M
sort_buffer_size = 8M
read_buffer = 4M
write_buffer = 4M

对于咱们新手而言，不须要急着先调整配置文件参数，首先保持默认便可，在之后启动再慢慢调整优化便可

注意，再mysql8.0 中，默认端口是3306，默认字符集就是utf, 这些能够不用在配置文件中再进行配置

4、启动mysql

因为mysql8.0增强了安全性，因此头次启动登录，会生成一个临时随机密码，使用该密码进行root用户登录，而后再修改密码

systemctl start mysqld            #启动

若是没有修改/etc/my.cnf配置文件中关于log路径的话，临时密码会在/var/log/mysqld.log中，按照以下方式查找临时密码

 grep 'temporary password' /var/log/mysqld.log

而后登录输入临时密码

mysql -uroot -p

而后按照以下方式进行修改密码

mysql> ALTER USER 'root'@'localhost' IDENTIFIED BY 'MyNewPass4!';            #定义的密码

要求密码包含至少一个大写字母，一个小写字母，一个数字和一个特殊字符，而且总密码长度至少为8个字符。

配置远程登录

咱们须要使用navicat远程登录mysql 8.0,可是因为mysql8.0 增强了安全性，与mysql 5.5以前版本链接加密协议不一致，并且貌似不支持直接root用户远程登录。

因此咱们要配置一个远程登录用户user,同时配置加密规则

create user 'user'@'%'identified by 'xxxxxxxx';
grant all privileges on *.* to 'user'@'%' with grant option;
alter user 'user'@'%' identified with mysql_native_password;
alter user 'user'@'%' identified by 'xxxxxxxxx' password expire never;
flush privileges;

此时配置完成，而后使用navicat等第三方可视化工具链接