如何用 Go 实现一个配置包

简介: 如何用 Go 实现一个配置包

在现代软件开发中,配置文件是不可或缺的一部分。在编写 Go 项目时,不管是一个简单的单文件脚本还是一个庞大的微服务项目,程序的灵活性和可扩展性都需要依赖于配置文件的加载。配置文件可以包含程序的各种设置,如端口号、数据库连接信息、认证密钥等,这些设置可能需要根据不同的环境和部署情况进行调整。因此,一个可靠的配置文件加载机制对于项目的成功实现至关重要。本文就来探究下在 Go 项目中如何更加方便的加载和管理配置。

在 Go 中,有很多方法可以加载和管理配置,例如使用命令行标志、环境变量或者读取特定格式的文件。选择哪种方法取决于项目的具体需求和开发人员的偏好。

需求

根据我的开发经验,一个配置包通常需要支持如下功能:

  • 支持从环境变量、命令行标志加载配置文件,然后将配置文件内容映射到 Go 结构体中,这个过程叫作反序列化。
  • 支持将 Go 结构体中的配置信息写入配置文件,这个过程叫作序列化。
  • 起码要支持 YAML、JSON 这两种最常见的配置文件格式。

config 包实现

反序列化

反序列化操作是配置包最常用的功能,通过反序列化我们可以将配置文件内容映射到 Go 结构体中。所以我们先来实现如何进行配置文件的反序列化操作。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
type FileType int
const (
	FileTypeYAML = iota
	FileTypeJSON
)
funcLoadConfig(filename string, cfg interface{}, typ FileType)error {
	data, err := os.ReadFile(filename)
if err != nil {
return fmt.Errorf("ReadFile: %v", err)
	}
switch typ {
case FileTypeYAML:
return yaml.Unmarshal(data, cfg)
case FileTypeJSON:
return json.Unmarshal(data, cfg)
	}
return errors.New("unsupported file type")
}

首先定义一个 FileType 类型,用来区分不同的配置文件格式,我们要实现的日志包能够支持 YAML 和 JSON 两种格式。

接下来实现了 LoadConfig 函数,用来加载配置,它接收三个参数:配置文件名称、配置结构体、文件类型。

在函数内部,首先使用 os.ReadFile(filename) 读取配置文件内容,然后根据文件类型,使用不同的方法来反序列化,最终将配置信息映射到 cfg 结构体中。

序列化

配置包还要支持序列化操作,也就是将配置信息从内存中写入文件。有时候我们想保存一个 example-config.yaml 供项目使用者参考,这个功能就很实用。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
funcDumpConfig(filename string, cfg interface{}, typ FileType)error {
var (
		data []byte
		err  error
	)
switch typ {
case FileTypeYAML:
		data, err = yaml.Marshal(cfg)
case FileTypeJSON:
		data, err = json.Marshal(cfg)
	}
if err != nil {
return err
	}
	f, err := os.Create(filename)
if err != nil {
return err
	}
	_, err = f.Write(data)
	_ = f.Close()
return err
}

我们实现了 DumpConfig 函数用来进行序列化操作,该函数同样接收三个参数:配置文件名、配置结构体、文件类型。

在函数中,首先根据文件类型对配置对象 cfg 进行序列化操作得到 data,然后通过 os.Create(filename) 创建配置文件文件,最后使用 f.Write(data) 将序列化后的内容写入文件。

现在配置包的核心功能已经实现了,并且两个函数都被允许导出,如果其他项目想使用,其实是可以拿过去直接使用的。不过目前的配置包在易用性上还有可优化的空间。

通过环境变量/命令行参数指定配置文件

以上序列化/反序列化函数的实现,配置文件名都是需要通过参数传递进来的,我们还可以通过环境变量或者命令行参数的形式来指定配置文件名。

1
2
3
4
5
6
7
8
9
var (
	cfgPath = flag.String("c", "config.yaml", "path to config file")
	dump    = flag.Bool("d", false, "dump config to file")
)
funcinit() {
	_ = flag.Set("c", os.Getenv("CONFIG_PATH"))
	_ = flag.Set("d", os.Getenv("DUMP_CONFIG"))
}

命令行参数解析可以使用 Go 内置的 flag 包来实现,我们在这里声明了两个标志,-c 用来传递配置文件名,-d 用来决定要进行序列化还是反序列化操作。

此外,在 init 函数中,我们实现了从环境变量中加载配置文件名和需要执行的操作。当配置包被导入时,会优先执行 init 函数,所以这些信息会优先从环境变量读取。

封装

现在我们可以通过环境变量或命令行参数的形式拿到配置文件名和需要执行的操作两个参数,并且分别赋值给 cfgPathdump 两个变量,接下来我们将对之前实现的序列化/反序列化函数进行封装,让其使用起来更加便捷。

反序列化

首先,我们可以将反序列化操作函数 LoadConfig 进一步封装,将其包装成两个函数分别加载 YAML 配置和 JSON 配置,这样调用方在使用时能够少传递一个参数。实现如下:

1
2
3
4
5
6
7
funcLoadYAMLConfig(filename string, cfg interface{})error {
return LoadConfig(filename, cfg, FileTypeYAML)
}
funcLoadJSONConfig(filename string, cfg interface{})error {
return LoadConfig(filename, cfg, FileTypeJSON)
}

其次,我们拿到的 cfgPath 参数也能派上用场了,可以对 LoadYAMLConfigLoadJSONConfig 进一步封装:

1
2
3
4
5
6
7
8
9
10
11
12
13
funcLoadYAMLConfigFromFlag(cfg interface{})error {
if !flag.Parsed() {
		flag.Parse()
	}
return LoadYAMLConfig(*cfgPath, cfg)
}
funcLoadJSONConfigFromFlag(cfg interface{})error {
if !flag.Parsed() {
		flag.Parse()
	}
return LoadJSONConfig(*cfgPath, cfg)
}

因为 cfgPath 是通过环境变量或命令行参数形式传入,所以调用反序列化函数的时候也就没必要手动传入了。

不过在使用 cfgPath 变量之前,我们调用了 flag.Parsed() 并对其返回值进行了判断,如果 flag.Parsed() 返回 false 则调用 flag.Parse()

这一步操作是因为,配置包的调用方可能也使用了 flag 包,那么如果调用方已经调用过 flag.Parse() 解析了命令行参数,调用 flag.Parsed() 就会返回 true,此时配置包内部没必要再解析一遍命令行参数,可以直接使用。

提示:如果你不熟悉 flag 包的用法,可以参考我之前写的文章《深入探究 Go flag 标准库》

序列化

封装好了反序列化操作,对应的,也要封装序列化操作。代码实现上与反序列化操作如出一辙,我将代码贴在这里,就不再进行讲解了。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
funcDumpYAMLConfig(filename string, cfg interface{})error {
return DumpConfig(filename, cfg, FileTypeYAML)
}
funcDumpJSONConfig(filename string, cfg interface{})error {
return DumpConfig(filename, cfg, FileTypeJSON)
}
funcDumpYAMLConfigFromFlag(cfg interface{})error {
if !flag.Parsed() {
		flag.Parse()
	}
return DumpYAMLConfig(*cfgPath, cfg)
}
funcDumpJSONConfigFromFlag(cfg interface{})error {
if !flag.Parsed() {
		flag.Parse()
	}
return DumpJSONConfig(*cfgPath, cfg)
}

统一出口函数

我们通过环境变量或命令行参数拿到的另外一个用户指定的变量 dump 还没有使用,dump 是一个 bool 值,代表用户是否想要序列化配置,如果为 true 则进行序列化操作,否则进行反序列化操作。

由此,我们可以将序列化/反序列化操作封装成一个函数,内部通过 dump 的值来决定执行哪种操作。实现如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
funcLoadOrDumpYAMLConfigFromFlag(cfg interface{})error {
if !flag.Parsed() {
		flag.Parse()
	}
if *dump {
if err := DumpYAMLConfig(*cfgPath, cfg); err != nil {
return err
		}
		os.Exit(0)
	}
return LoadYAMLConfig(*cfgPath, cfg)
}
funcLoadOrDumpJSONConfigFromFlag(cfg interface{})error {
if *dump {
if err := DumpJSONConfigFromFlag(cfg); err != nil {
return err
		}
		os.Exit(0)
	}
return LoadJSONConfigFromFlag(cfg)
}

我们对 YAML 和 JSON 格式的配置分别实现了 LoadOrDumpYAMLConfigFromFlagLoadOrDumpJSONConfigFromFlag 函数。顾名思义,这个函数既能加载(Load)配置,也能将配置写入(Dump)文件。

两个函数内部思路相同,如果 dumptrue,就序列化配置信息到文件中,并且使用 os.Exit(0) 退出程序。此时,控制台不会有任何输出,这遵循了 Linux/Unix 系统的设计哲学,没有消息就是最好的消息;如果 dumpfalse,则进行反序列化操作。

以上我们就实现了自定义配置包的全部功能,完整代码可以点击这里查看。

config 包使用

配置包的完整使用示例我写在了项目 GitHub 仓库的 README.md 文件中,你可以点进去查看。

总结

本文带大家一起使用 Go 语言实现了一个简洁的日志包,虽然功能不多,但足够中小型项目使用。如果对加载配置文件有更要的要求,如更多格式的日志文件支持、热加载等,则可以考虑使用更强大的 Go 第三方库 Viper,或者使用 Nacos、Disconf 等配置中心。

在这个云原生的时代,其实多数情况下,配置包不需要实现多么复杂的功能,尽量保持简洁。配置文件可以使用 K8s ConfigMap 来实现,配置包的高级特性也可以考虑通过 Sidecar 的形式来实现。

参考

config 源码: https://github.com/jianghushinian/gokit/tree/main/config/config

相关文章
|
2月前
|
算法 Java Go
【GoGin】(1)上手Go Gin 基于Go语言开发的Web框架,本文介绍了各种路由的配置信息;包含各场景下请求参数的基本传入接收
gin 框架中采用的路优酷是基于httprouter做的是一个高性能的 HTTP 请求路由器,适用于 Go 语言。它的设计目标是提供高效的路由匹配和低内存占用,特别适合需要高性能和简单路由的应用场景。
287 4
|
6月前
|
Go 开发者
Go语言包的组织与导入 -《Go语言实战指南》
本章详细介绍了Go语言中的包(Package)概念及其使用方法。包是实现代码模块化、复用性和可维护性的核心单位,内容涵盖包的基本定义、命名规则、组织结构以及导入方式。通过示例说明了如何创建和调用包,并深入讲解了`go.mod`文件对包路径的管理。此外,还提供了多种导入技巧,如别名导入、匿名导入等,帮助开发者优化代码结构与可读性。最后以表格形式总结了关键点,便于快速回顾和应用。
297 61
|
2月前
|
Java 编译器 Go
【Golang】(1)Go的运行流程步骤与包的概念
初次上手Go语言!先来了解它的运行流程吧! 在Go中对包的概念又有怎样不同的见解呢?
179 4
|
5月前
|
JSON 中间件 Go
Go语言实战指南 —— Go中的反射机制:reflect 包使用
Go语言中的反射机制通过`reflect`包实现,允许程序在运行时动态检查变量类型、获取或设置值、调用方法等。它适用于初中级开发者深入理解Go的动态能力,帮助构建通用工具、中间件和ORM系统等。
325 63
|
4月前
|
缓存 监控 安全
告别缓存击穿!Go 语言中的防并发神器:singleflight 包深度解析
在高并发场景中,多个请求同时访问同一资源易导致缓存击穿、数据库压力过大。Go 语言提供的 `singleflight` 包可将相同 key 的请求合并,仅执行一次实际操作,其余请求共享结果,有效降低系统负载。本文详解其原理、实现及典型应用场景,并附示例代码,助你掌握高并发优化技巧。
366 0
|
5月前
|
JSON 安全 Go
Go语言项目工程化 —— 日志、配置、错误处理规范
本章详解Go语言项目工程化核心规范,涵盖日志、配置与错误处理三大关键领域。在日志方面,强调其在问题排查、性能优化和安全审计中的作用,推荐使用高性能结构化日志库zap,并介绍日志级别与结构化输出的最佳实践。配置管理部分讨论了配置分离的必要性,对比多种配置格式如JSON、YAML及环境变量,并提供viper库实现多环境配置的示例。错误处理部分阐述Go语言显式返回error的设计哲学,讲解标准处理方式、自定义错误类型、错误封装与堆栈追踪技巧,并提出按调用层级进行错误处理的建议。最后,总结各模块的工程化最佳实践,助力构建可维护、可观测且健壮的Go应用。
|
7月前
|
Go 持续交付 开发者
Go语言包与模块(module)的基本使用-《Go语言实战指南》
本章深入讲解Go语言中的包(Package)和模块(Module)概念。包是代码组织的最小单位,每个`.go`文件属于一个包,通过`import`实现复用;主程序包需命名为`main`。模块是Go 1.11引入的依赖管理机制,支持自动版本管理和私有/远程仓库,无需依赖GOPATH。通过实际示例,如自定义包`mathutil`和第三方模块`gin`的引入,展示其使用方法。常用命令包括`go mod init`、`go mod tidy`等,帮助开发者高效管理项目依赖。最后总结,包负责功能划分,模块实现现代化依赖管理,提升团队协作效率。
320 15
|
10月前
|
Shell Go 开发工具
【环境】Rocky8使用gvm配置Go多版本管理的微服务开发环境(go-zero)
通过本文的介绍,我们详细讲解了如何在Rocky8上使用gvm来管理多个Go版本,并配置go-zero框架的开发环境。通过gvm的灵活管理,开发者可以轻松切换不同的Go版本,以适应不同项目的需求。同时,go-zero框架的使用进一步提升了微服务开发的效率和质量。希望本文能帮助开发者构建高效的Go语言开发环境,提高项目开发的灵活性和稳定性。
339 63
|
Linux Go iOS开发
怎么禁用 vscode 中点击 go 包名时自动打开浏览器跳转到 pkg.go.dev
本文介绍了如何在 VSCode 中禁用点击 Go 包名时自动打开浏览器跳转到 pkg.go.dev 的功能。通过将 gopls 的 `ui.navigation.importShortcut` 设置为 "Definition",可以实现仅跳转到定义处而不打开链接。具体操作步骤包括:打开设置、搜索 gopls、编辑 settings.json 文件并保存更改,最后重启 VSCode 使设置生效。
498 9
怎么禁用 vscode 中点击 go 包名时自动打开浏览器跳转到 pkg.go.dev
|
11月前
|
Go 数据库
Go语言中的包(package)是如何组织的?
在Go语言中,包是代码组织和管理的基本单元,用于集合相关函数、类型和变量,便于复用和维护。包通过目录结构、文件命名、初始化函数(`init`)及导出规则来管理命名空间和依赖关系。合理的包组织能提高代码的可读性、可维护性和可复用性,减少耦合度。例如,`stringutils`包提供字符串处理函数,主程序导入使用这些函数,使代码结构清晰易懂。
401 11

热门文章

最新文章