本文详解如何在 go 中高效、准确地将 unicode 字符串编码为 utf-16be 格式的十六进制字符串（常被误称为 ucs-2），并指出常见误区与最佳实践。
本文详解如何在 go 中高效、准确地将 unicode 字符串编码为 utf-16be 格式的十六进制字符串（常被误称为 ucs-2），并指出常见误区与最佳实践。
在 Go 中实现类似 Python s.encode('utf-16-be').encode('hex') 的功能，关键在于理解编码语义与标准库的协作方式。首先需明确：Python 示例实际使用的是 UTF-16BE（大端序 UTF-16），而非已废弃的 UCS-2。UCS-2 仅支持 BMP 平面字符（U+0000–U+FFFF），无法表示补充字符（如 emoji 或古文字）；而 UTF-16 兼容 UCS-2，并通过代理对（surrogate pairs）完整支持全部 Unicode 码点。现代系统应统一使用 UTF-16，避免使用“UCS-2”这一过时术语。
Go 标准库未直接提供 UTF-16 编码器，但 unicode/utf16 包提供了核心转换能力：utf16.Encode() 将 []rune（即 Unicode 码点序列）转换为 []uint16（UTF-16 代码单元序列）。注意：该函数默认生成 UTF-16 编码单元序列（无字节序标记、无字节序隐含），其结果等价于 UTF-16BE 的 逻辑单元序列，只需按大端格式将每个 uint16 转为两个十六进制字节即可。
以下是推荐的简洁、高效且可复用的实现：
package main
import (
"fmt"
"strings"
"unicode/utf16"
)
// hexUTF16FromString 将字符串编码为 UTF-16BE 十六进制字符串（小写，无 BOM，无空格）
// 等效于 Python: s.encode('utf-16-be').hex()
func hexUTF16FromString(s string) string {
// 将字符串转为 rune 切片（Unicode 码点）
runes := []rune(s)
// 编码为 UTF-16 代码单元（[]uint16）
units := utf16.Encode(runes)
// 格式化为十六进制：每个 uint16 表示为 4 位小写 hex，空格分隔
hex := fmt.Sprintf("%04x", units)
// 移除方括号和空格，得到连续 hex 字符串
return strings.ReplaceAll(strings.Trim(hex, "[]"), " ", "")
}
func main() {
str := "Bien joué"
fmt.Println(str)
fmt.Println(hexUTF16FromString(str)) // 输出: 004200690065006e0020006a006f007500e9
}✅ 优势说明：
- 避免手动 rune 拆解与多次 strings.Replace，性能更优；
- 使用 strings.ReplaceAll 和 strings.Trim 替代链式 Replace，代码更清晰；
- fmt.Sprintf("%04x", units) 自动将每个 uint16 格式化为 4 位小写十六进制（如 0042），符合 UTF-16BE 字节序逻辑（高位字节在前）；
- 函数封装便于测试、复用及未来扩展（如添加 BOM、切换大小写、支持 UTF-16LE 等）。
⚠️ 重要注意事项：
- 此实现不添加 UTF-16 BOM（Byte Order Mark）。若需 BOM（如 \xff\xfe），应在编码前手动前置 []uint16{0xfeff}；
- 输入含补充字符（如 "??"）时，utf16.Encode 会正确生成代理对（如 0xd83d 0xdcbb），输出长度为 8 位 hex，完全符合 UTF-16 规范；
- 不要尝试用 []byte 直接操作——Go 字符串底层是 UTF-8 编码，直接转换会导致乱码；
- 若需严格匹配 Python 的 utf-16-be（含 BOM），可改用第三方库如 golang.org/x/text/encoding/unicode 并配置 UseBOM: false, Encoder: unicode.LittleEndian（注意：Python utf-16-be 对应 unicode.BigEndian）。
总结：掌握 unicode/utf16.Encode 是 Go 中处理 UTF-16 的基石；始终以 UTF-16 替代 UCS-2 表述；函数化 + 标准库组合是简洁、健壮、可维护的首选方案。
