软件测试从业者,立志做出一番事业,2015加油~!

发布新日志

  • mysql 字符集问题(转)

    2009-04-16 17:35:42

    前一段时间,一直被mysql的字符集困扰,今天就这方面的知识总结一下.
    MySQL的字符集支持(Character Set Support)有两个方面:
         字符集(Character set)和排序方式(Collation)。
    对于字符集的支持细化到四个层次:
         服务器(server),数据库(database),数据表(table)和连接(connection)。


    1.MySQL默认字符集

      MySQL对于字符集的指定可以细化到一个数据库,一张表,一列,应该用什么字符集。

    但是,传统的程序在创建数据库和数据表时并没有使用那么复杂的配置,它们用的是默认的配置,那么,默认的配置从何而来呢?

        (1)编译MySQL 时,指定了一个默认的字符集,这个字符集是 latin1;
        (2)安装MySQL 时,可以在配置文件 (my.ini) 中指定一个默认的的字符集,如果没指定,这个值继承自编译时指定的;
        (3)启动mysqld 时,可以在命令行参数中指定一个默认的的字符集,如果没指定,这个值继承自配置文件中的配置,此时 character_set_server 被设定为这个默认的字符集;
        (4)当创建一个新的数据库时,除非明确指定,这个数据库的字符集被缺省设定为character_set_server
        (5)当选定了一个数据库时,character_set_database 被设定为这个数据库默认的字符集;
        (6)在这个数据库里创建一张表时,表默认的字符集被设定为 character_set_database,也就是这个数据库默认的字符集;
        (7)当在表内设置一栏时,除非明确指定,否则此栏缺省的字符集就是表默认的字符集;

    简单的总结一下,如果什么地方都不修改,那么所有的数据库的所有表的所有栏位的都用 latin1 存储,不过我们如果安装 MySQL,一般都会选择多语言支持,也就是说,安装程序会自动在配置文件中把 default_character_set 设置为 UTF-8,这保证了缺省情况下,所有的数据库的所有表的所有栏位的都用 UTF-8 存储。


    2.查看默认字符集(默认情况下,mysql的字符集是latin1(ISO_8859_1)
    通常,查看系统的字符集和排序方式的设定可以通过下面的两条命令:
         mysql> SHOW VARIABLES LIKE 'character%';
    +--------------------------+---------------------------------+
    | Variable_name            | Value                           |
    +--------------------------+---------------------------------+
    | character_set_client     | latin1                          |
    | character_set_connection | latin1                          |
    | character_set_database   | latin1                          |
    | character_set_filesystem | binary                          |
    | character_set_results    | latin1                          |
    | character_set_server     | latin1                          |
    | character_set_system     | utf8                            |
    | character_sets_dir       | D:"mysql-5.0.37"share"charsets" |
    +--------------------------+---------------------------------+

      mysql> SHOW VARIABLES LIKE 'collation_%';
    +----------------------+-----------------+
    | Variable_name        | Value           |
    +----------------------+-----------------+
    | collation_connection | utf8_general_ci |
    | collation_database   | utf8_general_ci |
    | collation_server     | utf8_general_ci |
    +----------------------+-----------------+

    3.修改默认字符集
      (1) 最简单的修改方法,就是修改mysql的my.ini文件中的字符集键值,
    如    default-character-set = utf8
          character_set_server =  utf8
       修改完后,重启mysql的服务,service mysql restart
       使用 mysql> SHOW VARIABLES LIKE 'character%';查看,发现数据库编码均已改成utf8
    +--------------------------+---------------------------------+
    | Variable_name            | Value                           |
    +--------------------------+---------------------------------+
    | character_set_client     | utf8                            |
    | character_set_connection | utf8                            |
    | character_set_database   | utf8                            |
    | character_set_filesystem | binary                          |
    | character_set_results    | utf8                            |
    | character_set_server     | utf8                            |
    | character_set_system     | utf8                            |
    | character_sets_dir       | D:"mysql-5.0.37"share"charsets" |
    +--------------------------+---------------------------------+

       (2) 还有一种修改字符集的方法,就是使用mysql的命令
         mysql> SET character_set_client = utf8 ;
         mysql> SET character_set_connection = utf8 ;
         mysql> SET character_set_database = utf8 ;
         mysql> SET character_set_results = utf8 ;
         mysql> SET character_set_server = utf8 ;

         mysql> SET collation_connection = utf8 ;
         mysql> SET collation_database = utf8 ;
         mysql> SET collation_server = utf8 ;


    一般就算设置了表的默认字符集为utf8并且通过UTF-8编码发送查询,你会发现存入数据库的仍然是乱码。问题就出在这个connection连接层上。解决方法是在发送查询前执行一下下面这句:

    SET NAMES 'utf8';

    它相当于下面的三句指令:
    SET character_set_client = utf8;
    SET character_set_results = utf8;
    SET character_set_connection = utf8;

    总结:
    因此,使用什么数据库版本,不管是3.x,还是4.0.x还是4.1.x,其实对我们来说不重要,重要的有二:
      1) 正确的设定数据库编码.MySQL4.0以下版本的字符集总是默认ISO8859-1,MySQL4.1在安装的时候会让你选择。如果你准备使用UTF- 8,那么在创建数据库的时候就要指定好UTF-8(创建好以后也可以改,4.1以上版本还可以单独指定表的字符集)
      2) 正确的设定数据库connection编码.设置好数据库的编码后,在连接数据库时候,应该指定connection的编码,比如使用jdbc连接时,指定连接为utf8方式.


    参考 "关中刀客" 的  <Mysql编码问题>,原文地址http://lixiang.cn/?q=node/98

  • 关于utf-8编码GBK

    2009-04-16 16:39:20

    通俗的说:utf-8 是基于unicode编码的,适用国际化场合,日文,韩文都可以用;而GBK和GB2312是国标,主要用于编码常用汉字,GB2312出来的比较早,所以有些汉字和繁体好像不支持,GBK是对GB2312的一个改进版本。

    专业的来讲:utf-8用以解决国际上字符的一种多字节编码,它对英文使用8位(即一个字节),中文使用24位(三个字节)来编码。UTF-8包含全世界所有国家需要用到的字符,是国际编码,通用性强。UTF-8编码的文字可以在各国支持UTF8字符集的浏览器上显示。如,如果是UTF8编码,则在外国人的英文IE上也能显示中文,他们无需下载IE的中文语言支持包。      GBK的文字编码是用双字节来表示的,即不论中、英文字符均使用双字节来表示,为了区分中文,将其最高位都设定成1。GBK包含全部中文字符,是国家编码,通用性比UTF8差,不过UTF8占用的数据库比GBK大。

    对于一个网站、论坛来说,如果英文字符较多,则建议使用UTF-8节省空间。

    各个国家和地区所制定的不同 ANSI 编码标准中,都只规定了各自语言所需的“字符”。比如:汉字标准(GB2312)中没有规定韩国语字符怎样存储。这些 ANSI 编码标准所规定的内容包含两层含义:
    1. 使用哪些字符。也就是说哪些汉字,字母和符号会被收入标准中。所包含“字符”的集合就叫做“字符集”。
    2. 规定每个“字符”分别用一个字节还是多个字节存储,用哪些字节来存储,这个规定就叫做“编码”。
    各个国家和地区在制定编码标准的时候,“字符的集合”和“编码”一般都是同时制定的。因此,平常我们所说的“字符集”,比如:GB2312, GBK, JIS 等,除了有“字符的集合”这层含义外,同时也包含了“编码”的含义。
    “UNICODE 字符集”包含了各种语言中使用到的所有“字符”。用来给 UNICODE 字符集编码的标准有很多种,比如:UTF-8, UTF-7, UTF-16, UnicodeLittle, UnicodeBig 等。

Open Toolbar