GB 18030
Template:NoteTA Template:Infobox character encoding GB 18030（全稱《信息技術 中文編碼字符集》）是中華人民共和國國家標準簡體中文字符集，由中華人民共和國信息產業部提出、信息產業部電子工業標準化研究所歸口。其向後兼容並替代GB 2312-1980、GBK和CP936傳統編碼，並支持Unicode（GB 13000）的所有碼位。GB 18030採用變長多字節編碼，每個字可以由1個、2個或4個字節組成。其編碼空間龐大，最多可定義161萬個字元。由於GB 18030完全支持Unicode，無需動用造字區即可支持中日韓統一表意文字、中國國內的少數民族文字以及emoji等字符。GB 18030在微軟Windows系統中的代碼頁為54936。
除編碼方法外，GB 18030還包含其他文字和語言以及本標準適用對象的要求。不過，GB 18030不是一個漢字規範，不定義漢字的正式字形；字形由《通用規範漢字表》進行規範。
版本[編輯]
本標準的第一版 GB 18030-2000《信息技術 信息交換用漢字編碼字符集 基本集的擴充》由中華人民共和國信息產業部電子工業標準化研究所、北京大學計算機技術研究所、北大方正集團、北京方正新天地信息網絡科技有限責任公司、四通集團公司、中國科學院軟體研究所、長城軟體公司、四通利方公司、中國軟體與技術服務股份有限公司、金山軟體公司和聯想集團起草，由國家質量技術監督局於2000年3月17日發布和實施。此版本兼容Unicode 3.0的中日韓統一表意文字擴展區A，共收錄27,533個漢字。
本標準的第二版 GB 18030-2005《信息技術 中文編碼字符集》由國家質量監督檢驗檢疫總局和中國國家標準化管理委員會於2005年11月8日發布，並於2006年5月1日實施。此版本兼容Unicode 3.1的中日韓統一表意文字擴展區B，並刊載少數民族包括朝鮮文、蒙古文（包括滿文、托忒文、錫伯文、阿禮嘎禮文）、德宏傣文、藏文、維吾爾文／哈薩克文／柯爾克茲文和彝文的文字。共有70,244個漢字。此標準內的單字節編碼部分、雙字節編碼部分，和四字節編碼部分收錄的少數中日韓統一表意文字擴展區A的漢字，為強制性標準。其他部分則屬於規模性標準。在中華人民共和國境內所有軟體產品，都需要支持這個同時包含單字節、雙字節和四字節編碼的規格。[1]Template:Rp
本標準的第三版 GB 18030-2022《信息技術 中文編碼字符集》由國家市場監督管理總局和中國國家標準化管理委員會於2022年7月19日發布，並於2023年8月1日實施[2]。此版本兼容到Unicode 11為止的中日韓統一表意文字擴展區C、D、E和F，並新增康熙部首，以及滇東北苗文、傈僳文、西雙版納新傣文、西雙版納老傣文、德宏傣文等少數民族文字以及蒙古文 BIRGA 符號，共收錄漢字87,887個和漢字部首228個，比上一版增加錄入了1.7萬餘個生僻漢字。此版本在保留總體結構的基礎上，從條文強制改為全文強制，但增加了「實現的級別」一章，定義了三個實現級別：
- 級別1：支持中日韓統一表意文字和中日韓統一表意文字擴展區A的漢字（所有具備中文信息處理和交換功能的產品均應滿足此級別。與上一版的「部分強制」相比，實際要求「增加四字節編碼部分的CJK統一漢字」的 66 字。）
- 級別2：在級別1的基礎上額外支持資料性附錄E中明確的《通用規範漢字表》中沒有包含在級別1之內的 8105 個漢字（作業系統、資料庫管理系統、中間件等系統軟體和支撐軟體均應滿足此級別。）
- 級別3：支持GB 18030-2022中所規定的全部漢字以及康熙部首（GB/T 4754《國民經濟行業分類》中任何用於政務服務和公共服務的信息技術產品和信息系統應均滿足此級別。）
Unicode支持[編輯]
| GB 字節串 | Unicode 碼位 | |
|---|---|---|
| GB 18030-2000 | GB 18030-2005 | |
| A8 BC (ḿ) | Template:Code | Template:Unichar |
| 81 35 F4 37 | Template:Unichar | Template:Code |
GB 18030在其標準中以碼表形式定義了除去Template:Tsl外的全部Unicode碼位的定義。由於GB 18030基本上是繞開已分配的碼點去指定需要對應的Unicode，其變換和UTF-8相比要複雜得多。在日常實現上，常常會直接使用一個偏移量表[3]。
GB 18030-2005與GB 18030-2000、GBK相比，去除了很多原來映射在PUA中的編碼；後來剩餘的24個PUA碼位也在Unicode 4.1中加上。
在GB 18030-2022中，剩餘的24個PUA碼位已經被去除或更改對應，所有有意義字符都已經映射到正式的 Unicode 碼位上。[4]
字節結構[編輯]
GB 18030包含三種長度的編碼：單字節的ASCII、雙字節的GBK（略帶擴展）、以及用於填補所有Unicode碼位的四字節UTF區段。GBK雙字節部分通過查表定義，而四字節部分則根據之前兩個部分沒有提到的通用字符集碼位順序填補。由於和GBK兼容，GB 18030在搜索ASCII字符時也需要使用特別代碼進行判斷。
| GB 18030 | 碼位數 | UnicodeTemplate:Efn | |||
|---|---|---|---|---|---|
| 字節1（最高位） | 字節2 | 字節3 | 字節4 | ||
| Template:Code – Template:Code | 128 | Template:Code – Template:Code | |||
| Template:Code | — | 錯誤Template:Efn | |||
| Template:Code – Template:Code | Template:Code – Template:Code 除去 Template:CodeTemplate:Efn | Template:Val | Template:Code – Template:Code 除去 Template:Code – Template:CodeTemplate:Efn | ||
| Template:Code – Template:Code | Template:Code – Template:Code | Template:Code – Template:Code | Template:Code – Template:Code | Template:Val | |
| Template:Code | — (Template:Val) | （未來字符拓展） | |||
| Template:Code – Template:Code | — (Template:Val) | （未來漢字拓展） | |||
| 無 | — | Template:Code – Template:CodeTemplate:Efn | |||
| Template:Code – Template:Code | Template:Code – Template:Code | Template:Code – Template:Code | Template:Code – Template:Code | Template:Val | 1 0000 – 10 FFFF
|
| Template:Code – Template:Code | — (Template:Val) | （未來標準拓展） | |||
| Template:Code – Template:Code | — (Template:Val) | （用戶造字區域） | |||
| Template:Code | — | 錯誤 | |||
| 總計 | Template:Val | ||||
一、二字節區段基本就是GBK編碼，另外加上了專門的歐元字符、豎排版本的標點符號，以及造字區對Unicode造字區的對應。四字節區段可以視作兩段形似GBK二字節區段結構的部分，每段的第一字節可以為0x81到0xFE，第二字節為0x30到0x39。由於結構類似，能夠安全於GBK的字符串搜索程序對於GB 18030來說也基本安全（正如Template:Tsl的搜索程序對於EUC、UTF-8也基本安全一般。）
四字節區段總共可以表達1,587,600（126×10×126×10）種字符，足以覆蓋Unicode的1,112,064（17×65536 − 2048個代理對）個有效碼位。
由於四字節區段通過填空定義，要寫出處理這段轉換的程序需要同時知道GBK的覆蓋範圍，並不簡單：
U+00DE (Þ) → 81 30 89 37 U+00DF (ß) → 81 30 89 38 U+00E0 (à) → A8 A4 U+00E1 (á) → A8 A2 U+00E2 (â) → 81 30 89 39 U+00E3 (ã) → 81 30 8A 30
WHATWG和W3C的GB 18030實現通過一張「位置偏移表」記錄GB 18030四字節區中連續的幾塊碎片，以便高效處理轉換。[10]ICU[9]和glibc也都對大塊連續的區域使用了類似的策略。
參見[編輯]
注釋[編輯]
參考資料[編輯]
外部連結[編輯]
- 新浪網：關於GB18030漢字編碼標準集Template:Wayback
- 新浪網：電腦漢字不夠用 計算機也要「掃盲」Template:Wayback
- Update on GB 18030:2005, Ken Lunde, 2006-11-13Template:Wayback
- http://source.icu-project.org/repos/icu/data/trunk/charset/data/xml/gb-18030-2000.xmlTemplate:Wayback
- ICU Converter Explorer: GB18030Template:Wayback（英語）
- 微軟有關GB18030編碼的介紹（英語）
- 微軟：老舊軟體可能發生的兼容問題Template:Wayback（英語）
- 微軟 Win2000 GB18030 支持包Template:Wayback
- GB18030與Unicode對照表Template:Wayback
Template:Ideographic repertoire Template:中文信息處理 Template:Character encoding
- ↑ Template:Cite web
- ↑ Template:Cite web
- ↑ Template:Cite web
- ↑ 4.0 4.1 Template:Cite web
- ↑ Template:Cite web
- ↑ 6.0 6.1 Template:Cite book
- ↑ Template:Cite book
- ↑ Template:Cite book
- ↑ 9.0 9.1 Authoritative mapping table between GB18030-2000 and Unicode Template:Wayback. ICU – International Components for Unicode. 2001-02-21. Accessed 2016-09-04.
- ↑ Template:Cite web