新跳槽了一家公司,上来就是数据库调优和数据迁移。调优那部分后面再补上来。公司目前用的是5.1的数据库,很老了,并且随着业务的发展须要作读写分离和主从复制。想把全部的数据都挪到新库上去。但这个库大概有60G的数据。
主要思路:mysql
1.建立用户,并受权 2.搭建主从,作到主从同步,数据目前先保持一致,在切换主从同步切换ip Mysql5.1已有数据量了,为保证数据的一致性。故须要锁库,等数据导入后再解锁 3.须要注意从库和主库的引擎,字符集 show variables like 'character_set%'; --查看当前环境的character_set show variables like 'collation%'; --查看当前的collation 4.数据搬完后作数据校验,校验一致性 采用pt-table-checksum 进行校验用pt-table-sync恢复一致 Zabbix定时监控mysql是否一致,若是不一致,调用脚本自动修复
统计了几种方式:
一·版本相同的数据库sql
1.若是版本相同的话,直接停库,拷贝(cp、tar,gzip,cpio) 把mysql的整个目录打包发送到新的主机上。 这个是最简单粗暴的,也是最有效,并且数据也是很一致的 2。也能够采用percona-xtrabackup 物理备份 + binlog 借助第三方软件备份,好处:它能对InnoDB和XtraDB存储引擎的数据库非阻塞地备份。它不暂停服务建立Innodb热备份; 为mysql作增量备份;在mysql服务器之间作在线表迁移;使建立replication更加容易;备份mysql而不增长服务器的负载。 3.mysqldump备分 a.主机A备份成sql文件,在导入到主机B数据库里,这种方式须要长时间锁表,并且须要大量时间 mysqldump -uvnum -pvnum@123 --force data_base_name > /data/data_base_name.sql 或直接传到对应主机下的sql文件,60个G的话,导出导入时间差很少要五个小时左右,太慢了 b.tar备份 备份并压缩 mysqldump -uusername -ppassword dbname | gzip > /data/wwwroot/www/dbname.sql.gz 解压并还原 gunzip < /root/dbname.sql.gz | mysql -uusernameb -ppasswordb dbnamenew 时间相对减小点 最佳方式介绍 还有一种直接将数据库A直接转移到数据库B的方式(在服务器A中执行)但要求网速必定要好 mysqldump --default-character-set=utf8mb4 --host=127.0.0.1 -uusername -ppassword 1.必须保证服务器B的数据库可以服务器A访问,且B服务器存在对应的库 2.--opt命令可选,建议加上。等同于指定 --add-drop-tables--add-locking --create-option --disable-keys--extended-insert --lock-tables --quick --set-charset。它能够给出很快的转储操做并产生一个能够很快装入MySQL服务器的转储文件。 3.--default-character-set=utf8mb4 指定该数据库链接的字符类型。若是服务器默认未utf8的话,导出的数据可能会丢失四字节的unicode信息(表情之类的) 4.-C 客户端和服务器之间启用压缩传递全部信息。固然得要有咯。 mysql经过命令行快速转移数据库,一个命令(mysqldump)完成数据备