↑↓ 选择↵ 打开⌫ 切换范围完整搜索

PG.CENTER 连接 PostgreSQL 文档、百科与生态知识。由 Pigsty 维护。

支持中的版本: 当前版本 (18) / 17 / 16 / 15 / 14
开发中的版本: 19 / 20devel
已结束支持的版本: 13 / 12 / 11 / 10 / 9.6 / 9.5 / 9.4 / 9.3 / 9.2 / 9.1 / 9.0 / 8.4 / 8.3 / 8.2 / 8.1 / 8.0 / 7.4 / 7.3 / 7.2 / 7.1
历史版本。 PostgreSQL 8.2 已结束支持。 请参阅 当前版本手册.

21.2. Character Set Support #

PostgreSQL中的字符集支持允许你以多种字符集(也称为编码)存储文本,包括 ISO 8859 系列之类的单字节字符集,以及 EUC(扩展 Unix 编码)、UTF-8 和 Mule 内部编码等多字节字符集。所有受支持的字符集都可以被客户端透明地使用,但其中少数不支持在服务器内部使用(即不能作为服务器端编码)。默认字符集是在使用 initdb初始化PostgreSQL 数据库集簇时选定的。创建数据库时可以覆盖该设置,因此你可以拥有多个数据库,并让每个数据库使用不同的字符集。

21.2.1. 支持的字符集 #

表 21.1显示了PostgreSQL中可用的字符集。

表 21.1. PostgreSQL 字符集

名称描述语言是否服务器端?字节数/字符别名
BIG5Big Five繁体中文否1-2WIN950, Windows950
EUC_CN扩展 Unix 编码-CN简体中文是1-3 
EUC_JP扩展 Unix 编码-JP日语是1-3 
EUC_KR扩展 Unix 编码-KR韩语是1-3 
EUC_TW扩展 Unix 编码-TW繁体中文、台湾语是1-3 
GB18030国家标准中文否1-4 
GBK扩展国家标准简体中文否1-2WIN936, Windows936
ISO_8859_5ISO 8859-5, ECMA 113拉丁语/西里尔语是1 
ISO_8859_6ISO 8859-6, ECMA 114拉丁语/阿拉伯语是1 
ISO_8859_7ISO 8859-7, ECMA 118拉丁语/希腊语是1 
ISO_8859_8ISO 8859-8, ECMA 121拉丁语/希伯来语是1 
JOHABJOHAB韩语否1-3 
KOI8KOI8-R(U)西里尔语是1KOI8R
LATIN1ISO 8859-1, ECMA 94西欧是1ISO88591
LATIN2ISO 8859-2, ECMA 94中欧是1ISO88592
LATIN3ISO 8859-3, ECMA 94南欧是1ISO88593
LATIN4ISO 8859-4, ECMA 94北欧是1ISO88594
LATIN5ISO 8859-9, ECMA 128土耳其语是1ISO88599
LATIN6ISO 8859-10, ECMA 144北欧是1ISO885910
LATIN7ISO 8859-13波罗的海是1ISO885913
LATIN8ISO 8859-14凯尔特语是1ISO885914
LATIN9ISO 8859-15带欧元符号和重音字符的 LATIN1是1ISO885915
LATIN10ISO 8859-16, ASRO SR 14111罗马尼亚语是1ISO885916
MULE_INTERNALMule 内部编码多语种 Emacs是1-4 
SJISShift JIS日语否1-2Mskanji, ShiftJIS, WIN932, Windows932
SQL_ASCII未指定(见正文)任意是1 
UHC统一韩语编码韩语否1-2WIN949, Windows949
UTF8Unicode,8 位所有是1-4Unicode
WIN866Windows CP866西里尔语是1ALT
WIN874Windows CP874泰语是1 
WIN1250Windows CP1250中欧是1 
WIN1251Windows CP1251西里尔语是1WIN
WIN1252Windows CP1252西欧是1 
WIN1253Windows CP1253希腊语是1 
WIN1254Windows CP1254土耳其语是1 
WIN1255Windows CP1255希伯来语是1 
WIN1256Windows CP1256阿拉伯语是1 
WIN1257Windows CP1257波罗的海是1 
WIN1258Windows CP1258越南语是1ABC, TCVN, TCVN5712, VSCII

并非所有客户端API都支持上表中的全部字符集。例如,PostgreSQL JDBC 驱动就不支持 MULE_INTERNAL、LATIN6、LATIN8和LATIN10。

SQL_ASCII 设置的行为与其他设置有很大不同。当服务器字符集为 SQL_ASCII 时,服务器按 ASCII 标准解释字节值 0-127,而将字节值 128-255 视为不作解释的字符。设置为 SQL_ASCII 时,不会进行任何编码转换。因此,这一设置与其说是声明使用某种特定编码,不如说是声明不关心编码。在大多数情况下,如果需要处理任何非 ASCII 数据,使用 SQL_ASCII 都是不明智的,因为 PostgreSQL 将无法帮助转换或验证非 ASCII 字符。

21.2.2. 设置字符集

initdb为PostgreSQL集簇定义默认字符集(编码)。例如:

initdb -E EUC_JP

这会把默认字符集设为EUC_JP(日语的扩展 Unix 编码)。如果你喜欢更长的选项形式,也可以用--encoding代替-E。如果既没有给出-E也没有给出 --encoding,initdb会根据指定的或默认的区域设置,尝试确定应使用的合适编码。

你可以创建一个使用不同字符集的数据库:

createdb -E EUC_KR korean

这将创建一个名为korean的数据库,它使用 EUC_KR字符集。另一种实现方式是使用下面的 SQL 命令:

CREATE DATABASE korean WITH ENCODING 'EUC_KR';

数据库编码存储在系统目录pg_database中。可以通过 psql的-l选项或\l 命令查看它。

$ psql -l
            List of databases
   Database    |  Owner  |   Encoding
---------------+---------+---------------
 euc_cn        | t-ishii | EUC_CN
 euc_jp        | t-ishii | EUC_JP
 euc_kr        | t-ishii | EUC_KR
 euc_tw        | t-ishii | EUC_TW
 mule_internal | t-ishii | MULE_INTERNAL
 postgres      | t-ishii | EUC_JP
 regression    | t-ishii | SQL_ASCII
 template1     | t-ishii | EUC_JP
 test          | t-ishii | EUC_JP
 utf8          | t-ishii | UTF8
(9 rows)

重要

尽管你可以为数据库指定任意编码,但选择一种与所选区域设置的期望不相符的编码是不明智的。LC_COLLATE和 LC_CTYPE设置隐含着一种特定的编码,区域设置相关的操作(例如排序)很可能会错误解释以不兼容编码存储的数据。

由于这些区域设置被initdb冻结,在一个集簇的不同数据库中使用不同编码的表面灵活性实际上更多只是理论上的。这些机制将来很可能会在PostgreSQL的未来版本中重新考虑。

安全使用多种编码的办法之一,是在initdb时把区域设置选为C或POSIX,从而关闭任何真正的区域感知。

21.2.3. 服务器和客户端之间的自动字符集转换

PostgreSQL 支持在服务器和客户端之间,对某些字符集组合进行自动字符集转换。转换信息保存在系统目录 pg_conversion 中。PostgreSQL 提供了一些预定义转换,如表 21.2所示。可以使用 SQL 命令 CREATE CONVERSION 创建新的转换。

表 21.2. 客户端/服务器字符集转换

服务器字符集可用的客户端字符集
BIG5不支持作为服务器编码
EUC_CNEUC_CN, MULE_INTERNAL, UTF8
EUC_JPEUC_JP, MULE_INTERNAL, SJIS, UTF8
EUC_KREUC_KR, MULE_INTERNAL, UTF8
EUC_TWEUC_TW, BIG5, MULE_INTERNAL, UTF8
GB18030不支持用作服务器编码
GBK不支持作为服务器编码
ISO_8859_5ISO_8859_5, KOI8R, MULE_INTERNAL, UTF8, WIN866, WIN1251
ISO_8859_6ISO_8859_6, UTF8
ISO_8859_7ISO_8859_7, UTF8
ISO_8859_8ISO_8859_8, UTF8
JOHABJOHAB, UTF8
KOI8KOI8, ISO_8859_5, MULE_INTERNAL, UTF8, WIN866, WIN1251
LATIN1LATIN1, MULE_INTERNAL, UTF8
LATIN2LATIN2, MULE_INTERNAL, UTF8, WIN1250
LATIN3LATIN3, MULE_INTERNAL, UTF8
LATIN4LATIN4, MULE_INTERNAL, UTF8
LATIN5LATIN5, UTF8
LATIN6LATIN6, UTF8
LATIN7LATIN7, UTF8
LATIN8LATIN8, UTF8
LATIN9LATIN9, UTF8
LATIN10LATIN10, UTF8
MULE_INTERNALMULE_INTERNAL, BIG5, EUC_CN, EUC_JP, EUC_KR, EUC_TW, ISO_8859_5, KOI8R, LATIN1 to LATIN4, SJIS, WIN866, WIN1250, WIN1251
SJIS不支持用作服务器编码
SQL_ASCII任意(不执行转换)
UHC不支持作为服务器编码
UTF8all supported encodings
WIN866WIN866, ISO_8859_5, KOI8R, MULE_INTERNAL, UTF8, WIN1251
WIN874WIN874, UTF8
WIN1250WIN1250, LATIN2, MULE_INTERNAL, UTF8
WIN1251WIN1251, ISO_8859_5, KOI8R, MULE_INTERNAL, UTF8, WIN866
WIN1252WIN1252, UTF8
WIN1253WIN1253, UTF8
WIN1254WIN1254, UTF8
WIN1255WIN1255, UTF8
WIN1256WIN1256, UTF8
WIN1257WIN1257, UTF8
WIN1258WIN1258, UTF8

若要启用自动字符集转换,必须告诉PostgreSQL 你希望客户端使用哪种字符集(编码)。有几种方法可以做到这一点:

  • 在psql中使用\encoding 命令。\encoding允许动态更改客户端编码。例如,要把编码改成SJIS,可以输入:

    \encoding SJIS

  • 使用 libpq 函数。\encoding 实际上是通过调用 PQsetClientEncoding() 来实现其功能的:

    int PQsetClientEncoding(PGconn *conn, const char *encoding);

    其中 conn 是到服务器的连接,encoding 是你想使用的编码。如果该函数成功设置了编码,它返回 0,否则返回 -1。此连接的当前编码可以用下面的函数确定:

    int PQclientEncoding(const PGconn *conn);

    注意,它返回的是编码 ID,而不是像 EUC_JP 这样的符号字符串。要把编码 ID 转换为编码名,可以使用:

    char *pg_encoding_to_char(int encoding_id);

  • 使用SET client_encoding TO。可以使用以下 SQL 命令设置客户端编码:

    SET CLIENT_ENCODING TO 'value';

    也可以为此使用标准 SQL 语法SET NAMES:

    SET NAMES 'value';

    要查询当前客户端编码:

    SHOW client_encoding;

    要返回到默认编码:

    RESET client_encoding;

  • 使用PGCLIENTENCODING。如果在客户端环境中定义了 PGCLIENTENCODING环境变量,那么连接服务器时会自动选择该客户端编码。(之后仍可以用上面提到的任何其他方法覆盖它。)

  • 使用配置变量client_encoding。如果设置了 client_encoding变量,那么连接服务器时会自动选择该客户端编码。(之后仍可以用上面提到的任何其他方法覆盖它。)

如果某个特定字符无法完成转换,就会报错。例如,假设服务器使用 EUC_JP而客户端使用LATIN1,此时若返回了一些在LATIN1中没有表示形式的日语字符,就会出现错误。

如果客户端字符集定义为 SQL_ASCII,则无论服务器字符集是什么,都会禁用编码转换。与服务器一样,除非处理的全部是 ASCII 数据,否则使用 SQL_ASCII 是不明智的。

21.2.4. 进一步阅读

这些都是开始了解各种编码系统的良好资料。

http://www.i18ngurus.com/docs/984813247.html

一份关于字符集、编码和代码页的大量文档合集。

ftp://ftp.ora.com/pub/examples/nutshell/ujip/doc/cjk.inf

其中对EUC_JP、EUC_CN、EUC_KR和EUC_TW的详细说明见第 3.2 节。

http://www.unicode.org/

Unicode Consortium 网站。

RFC 3629

这里定义了UTF-8(8 位 UCS/Unicode 转换格式)。

报告文档问题

阅读 上游文档. 反馈更正前请先核对 当前版本手册.