MySQL字符集设置及字符转换（latin1转utf8）

 MySQL字符集设置及字符转换（latin1转utf8）

http://blog.chinaunix.net/uid-25266990-id-3344584.html

  MySQL字符集设置及字符转换（latin1转utf8）   2012-09-11 14:17:36

分类： Mysql/postgreSQL

 

在生成环境中，会常常碰到Mysql字符的设置问题，CU不少牛人都说过N次了，我的也总结下。

若是在应用开始阶段没有正确的设置字符集，在运行一段时间之后才发现存在不能知足要求须要调整，那么就须要进行字符集的修改。字符集的修改不能直接经过alter dataabase character set ***; 或者　alter table tablename character set ***; 命令进行，这两个命令都没有更新已有记录的字符集，而只是对新建立的表或者记录生效。

在笔者的数据库最为经常使用的是latin1、utf8，因为项目的整合，字符的要求也开始规范，统一为utf8，那么就须要把以前的latin1字符转换成才utf8格式，那样才不会出现乱码的状况。已有的记录的字符集调整，须要先将数据导出，通过适当的调整从新导入后才可完成。

如下模拟的是将latin1字符集的数据库修改为GBK字符集的数据库的过程。操做较为简单，只要花的时间是在导入和导出数据。下面就来简单的介绍Mysql字符变量和latin1转换到utf8的过程，你们能够根据本身实际状况，触类旁通。

1、MySQL字符集设置

• 系统变量：

– character_set_server：默认的内部操做字符集

– character_set_client：客户端来源数据使用的字符集

– character_set_connection：链接层字符集

– character_set_results：查询结果字符集

– character_set_database：当前选中数据库的默认字符集

– character_set_system：系统元数据(字段名等)字符集

– 还有以collation_开头的同上面对应的变量，用来描述字符序。

• 用introducer指定文本字符串的字符集：

– 格式为：[_charset] ‘string’ [COLLATE collation]

– 例如：

• SELECT _latin1 ‘string’;

• SELECT _utf8 ‘你好’ COLLATE utf8_general_ci;

–由introducer修饰的文本字符串在请求过程当中不通过多余的转码，直接转换为内部字符集处理。

2、MySQL中的字符集转换过程

1. MySQL Server收到请求时将请求数据从character_set_client转换为character_set_connection；

2. 进行内部操做前将请求数据从character_set_connection转换为内部操做字符集，其肯定方法以下：

• 使用每一个数据字段的CHARACTER SET设定值；

• 若上述值不存在，则使用对应数据表的DEFAULT CHARACTER SET设定值(MySQL扩展，非SQL标准)；

• 若上述值不存在，则使用对应数据库的DEFAULT CHARACTER SET设定值；

• 若上述值不存在，则使用character_set_server设定值。

3. 将操做结果从内部操做字符集转换为character_set_results。

 

3、latin1转换到utf8

以原来的字符集为latin1为例，升级成为utf8的字符集。原来的表: databasename (default charset=latin1)，新表：new_databasename(default charset=utf8)。

 

mysql> show create database databasename;
+--------------+-------------------------------------------------------------------------+
| Database | Create Database |
+--------------+-------------------------------------------------------------------------+
| databasename | CREATE DATABASE `databasename` /*!40100 DEFAULT CHARACTER SET latin1 */ |
+--------------+-------------------------------------------------------------------------+
1 row in set (0.00 sec)

 

1> 导出表结构：

 

mysqldump -uroot -p --default-character-set=utf8 -d databasename > createtab.sql

 

 

其中--default-character-set=utf8 表示设置以什么字符集链接，　-d 表示只导出表结构，不导出数据。

2>修改　createtab.sql 中表结构定义中的字符集为新的字符集。

 

sed -i s/CHARSET=latin1/CHARSET=utf8/g `grep -rl "CHARSET=latin1" createtab.sql `

 

3>确保记录再也不更新，导出全部记录。

 

mysqldump -uroot -p --no-create-info databasename > data.sql

 

可选参数：

--quick: 该选项用于转储大的表。　它强制　mysqldump 从服务器一次一行地检索表中的行而不是　检索全部行，并在输出前将它缓存到内存中。

--extended-insert: 使用包括几个　values 列表的多行insert语法，这样使转储文件更小，重载文件时能够加速插入。

--no-create-info: 不写从新建立每一个转储表的create table 语句。

--default-character-set=latin1: 按照原有的字符集导出全部数据，这样导出的文件中，全部中文都是可见的，不会保存成乱码。不添加该参数以默认字符导出。

4>打开data.sql,将　set names latin1 修改为　set names utf8 。

 

sed -i s/CHARSET=latin1/CHARSET=utf8/g `grep -rl "CHARSET=latin1" data.sql `

 

 

(PS：sed工做效率是很是高的，在测试中60G的数据4分钟就转换完毕了）

 

5>使用新的字符集建立新的数据库。

 

create database new_databasename default charset utf8;

 

6>建立表，执行　createtab.sql

 

mysql -uroot -p new_databasename < createtab.sql

 

7>导入数据，执行data.sql

 

mysql -uroot -p new_databasename < data.sql

八、查看新数据库的字符信息

 

mysql> show create database new_databasename;

+------------------+-----------------------------------------------------------------------------+

| Database | Create Database |

+------------------+-----------------------------------------------------------------------------+

| new_databasename | CREATE DATABASE `new_databasename` /*!40100 DEFAULT CHARACTER SET utf8 */ |

+------------------+-----------------------------------------------------------------------------+

1 row in set (0.00 sec)

mysql> show create table type;

+-------+------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+

| Table | Create Table |

+-------+------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+

| type | CREATE TABLE `type` (

  `id` int(10) NOT NULL AUTO_INCREMENT,

  `Name` varchar(100) CHARACTER SET gb2312 NOT NULL,

  PRIMARY KEY (`id`)

) ENGINE=MyISAM AUTO_INCREMENT=17 DEFAULT CHARSET=utf8 |

+-------+------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+

1 row in set (0.00 sec)

注意：选择字符集的时候，要注意最好是源字符的超集，或者肯定比源字符集的字库更大。