在多语言（i18n）支持的应用程序中，如何根据用户的语言偏好选择合适的语言进行展示是一个重要的任务。这通常涉及到将用户首选语言与应用程序支持的语言之间进行最佳匹配。在这篇文章中，我们将探讨语言标签的复杂性以及 Go 语言如何帮助实现有效的语言匹配。
语言标签简介
语言标签（Language Tags），也被称为区域标识符，是用于表示语言和/或方言的机器可读标识符。最常用的参考标准是 IETF BCP 47 标准，Go 语言的库遵循这一标准。以下是一些 BCP 47 语言标签的示例及其对应的语言或方言：
| 标签 | 描述 |
|---|---|
| en | 英语 |
| en-US | 美式英语 |
| cmn | 普通话（普通话） |
| zh | 中文（通常是普通话） |
| nl | 荷兰语 |
| nl-BE | 佛兰德语（荷兰语的变体） |
| es-419 | 拉丁美洲西班牙语 |
| az | 阿塞拜疆语（拉丁脚本） |
| az-Arab | 阿塞拜疆语（阿拉伯脚本） |
语言标签的通用形式包括语言代码（如“en”、“cmn”）以及可选的子标签，例如脚本（“-Arab”）、区域（“-US”）、变体（“-oxendict”）和扩展（“-u-co-phonebk”）。
语言匹配的复杂性
处理语言标签是一个复杂的任务，主要因为人类语言的边界并不明确，而且语言标签标准经历了演变。以下是处理语言标签的一些复杂情况：
标签具有不同的语言代码但指示相同语言
由于历史和政治原因，许多语言代码随着时间的推移发生了变化。例如，普通话的官方语言代码是“cmn”，但“zh”通常被用作该语言的标识符。
仅使用语言代码不足以准确匹配
例如，阿塞拜疆语（“az”）根据不同国家的书写脚本有所不同：拉丁脚本（“az-Latn”）、阿拉伯脚本（“az-Arab”）和西里尔字母（“az-Cyrl”）。仅使用“az”会导致默认使用拉丁脚本，从而可能无法被只懂阿拉伯脚本的用户理解。
最佳匹配可能是用户未列出的语言
例如，用户请求挪威语（“nb”），如果没有提供挪威语，丹麦语可能是一个不错的替代选择。类似地，请求瑞士德语（“gsw”）的用户可能更愿意看到德语（“de”），虽然情况正好相反。
Go 语言中的语言匹配
Go 语言的 golang.org/x/text/language 包实现了 BCP 47 标准，并支持根据 Unicode Common Locale Data Repository（CLDR）中的数据决定使用的语言。以下是一个示例程序，展示了如何将用户的语言偏好与应用程序支持的语言进行匹配：
package main
import (
"fmt"
"golang.org/x/text/language"
"golang.org/x/text/language/display"
)
var userPrefs = []language.Tag{
language.Make("gsw"), // 瑞士德语
language.Make("fr"), // 法语
}
var serverLangs = []language.Tag{
language.AmericanEnglish, // en-US 作为回退语言
language.German, // de
}
var matcher = language.NewMatcher(serverLangs)
func main() {
tag, index, confidence := matcher.Match(userPrefs...)
fmt.Printf("最佳匹配: %s (%s) index=%d confidence=%v\n",
display.SimplifiedChinese.Tags().Name(tag),
display.Self.Name(tag),
index, confidence)
// 输出：最佳匹配: 德语 (Deutsch) index=1 confidence=High
}
创建语言标签
创建 language.Tag 的最简单方法是使用 language.Make。它会从用户给定的语言代码字符串中提取有意义的信息。例如，“en-USD” 会转换为“en”，尽管“USD” 不是有效的子标签。
package main
import (
"fmt"
"golang.org/x/text/language"
)
func main() {
tag := language.Make("en-USD")
fmt.Println(tag) // 输出: en
}
匹配用户首选语言
Matcher 可以用于将用户的语言首选项与应用程序支持的语言进行匹配。以下是如何使用 Matcher 进行语言匹配的示例：
package main
import (
"fmt"
"golang.org/x/text/language"
)
var supported = []language.Tag{
language.AmericanEnglish, // en-US: 作为回退语言
language.German, // de
language.Dutch, // nl
language.Portuguese, // pt（默认为巴西葡萄牙语）
language.EuropeanPortuguese, // pt-PT
language.Romanian, // ro
language.Serbian, // sr（默认为西里尔字母脚本）
language.SerbianLatin, // sr-Latn
language.SimplifiedChinese, // zh-Hans
language.TraditionalChinese, // zh-Hant
}
var matcher = language.NewMatcher(supported)
// 示例用户语言首选项
var userPrefs = []language.Tag{
language.Make("he"), // 希伯来语
language.Make("hr"), // 克罗地亚语
}
func main() {
tag, index, confidence := matcher.Match(userPrefs...)
fmt.Printf("最佳匹配: %s (index=%d confidence=%v)\n", tag, index, confidence)
// 输出：最佳匹配: en-US (index=0 confidence=No)
}
golang.org/x/text/language/display 包的作用
golang.org/x/text/language/display 包用于提供语言标签的本地化名称。通过该包，我们可以将语言标签转换为人类可读的名称，并且支持多种语言的显示。例如，您可以显示语言标签的英文名称和该语言在其自身语言中的名称。
示例代码
下面的示例展示了如何使用 display 包来获取并显示语言标签的本地化名称：
package main
import (
"fmt"
"golang.org/x/text/language"
"golang.org/x/text/language/display"
)
func main() {
supported := []language.Tag{
language.English, // en
language.French, // fr
language.Dutch, // nl
language.Make("nl-BE"), // nl-BE
language.SimplifiedChinese, // zh-Hans
language.TraditionalChinese, // zh-Hant
language.Russian, // ru
}
en := display.English.Tags()
for _, t := range supported {
fmt.Printf("%-20s (%s)\n", en.Name(t), display.Self.Name(t))
}
}
输出结果将显示语言标签的英文名称和该语言在其自身语言中的名称，例如：
English (English)
French (français)
Dutch (Nederlands)
Flemish (Vlaams)
Simplified Chinese (简体中文)
Traditional Chinese (繁體中文)
Russian (русский)
结论
语言标签看起来像是结构化的数据，但由于它们描述的是人类语言，标签之间的关系实际上非常复杂。使用简单的字符串操作来处理语言匹配可能会产生糟糕的结果。Go 的 golang.org/x/text/language 包在处理这个复杂问题时，提供了一个简单易用的 API，帮助开发者高效地进行语言匹配。display 包进一步简化了语言标签的本地化显示，使得处理和展示语言变得更加方便和准确。
相关阅读：
希望本文对你在 Go 语言中处理语言与区域匹配的问题有所帮助。如果有更多问题或建议，欢迎留言讨论。
