Go语言原生支持Unicode和UTF-8,字符串以UTF-8存储,操作时需区分字节与字符;使用rune可正确遍历字符,utf8包验证编码并统计字符数,读写UTF-8文件无需额外处理,非UTF-8需借助第三方库转换。

Go语言原生支持Unicode和UTF-8编码,处理字符时既方便又安全。字符串在Go中默认以UTF-8格式存储,开发者可以直接操作Unicode文本而无需额外转换。
理解Go中的字符串与字节
Go的字符串是只读的字节序列,底层以UTF-8编码存储Unicode文本。一个中文字符通常占用3个字节,而英文字母只占1个字节。直接通过索引访问字符串得到的是字节,不是字符。
例如:
s := "你好, world" fmt.Println(len(s)) // 输出 13(字节数) fmt.Println(s[0]) // 输出 228(第一个字节,不是字符)
使用rune正确处理Unicode字符
要按字符而非字节操作,应使用
rune类型,它等价于int32,表示一个Unicode码点。
立即学习“go语言免费学习笔记(深入)”;
将字符串转为rune切片可正确遍历每个字符:
s := "你好, 世界"
runes := []rune(s)
fmt.Println(len(runes)) // 输出 6(字符数)
for i, r := range runes {
fmt.Printf("位置%d: %c\n", i, r)
}
range遍历字符串时,Go会自动解码UTF-8,返回字符的起始索引和rune值:
for i, r := range "Hello 世界" {
fmt.Printf("索引 %d, 字符 %c\n", i, r)
}
字符串与UTF-8编码操作
使用
unicode/utf8包可验证字符串是否为有效UTF-8,或统计字符数:
import "unicode/utf8"
s := "Hello 世界"
if utf8.ValidString(s) {
fmt.Println("有效UTF-8字符串")
}
fmt.Println("字符数:", utf8.RuneCountInString(s))
需要编码或解码时,可用
utf8.EncodeRune和
utf8.DecodeRuneInString处理单个rune。
读写文件时的编码注意事项
Go默认读写UTF-8文本无需额外处理。只要文件本身是UTF-8编码,用
os.Open或
ioutil.ReadFile读取后可直接使用rune操作。
若处理非UTF-8编码(如GBK),需借助第三方库(如
golang.org/x/text)进行转码。
基本上就这些。Go的设计让UTF-8和Unicode处理变得直观,关键是要区分字节和字符,善用rune和utf8包。不复杂但容易忽略细节。










