聊聊 Python 数据处理全家桶

第一时间关注 Python 技术干货！

1.前言

在实际项目中，经常会接触到各种各样的配置文件，它可以增强项目的可维护性

常用配件文件的处理方式，包含：JSON、ini / config、YAML、XML 等

本篇文章，我们将聊聊 Python 数据处理全家桶之配置文件大总结

2.JSON

Python 内置了 JSON 模块，可以非常方便操作 JSON 数据

常见的 4 个方法分别是：

json.load(json_file)

解析 JSON 文件，转换为 Python 中对应的数据类型

json.loads(json_string)

解析 JSON 格式的字符串，结果为 Python 中的字典

json.dump(python_content,file_path)

将 Python 数据，包含：dict、list 写入到文件中

json.dumps(python_dict)

将 Python 中 dict 转为 JSON 格式的字符串

以下面这段 JSON 配置文件为例：

1、读取配置文件

读取配置文件有两种方式，分别是：

使用 json.load() 直接读取配置文件

或者，先读取配置文件中的内容，然后使用 json.loads() 转换为Python 数据类型

需要指出的是，面对复杂层级的 JSON 配置文件，可以利用 jsonpath 进行读取；jsonpath 类似于 xpath，可以通过正则表达式快速读取数据

2、保存配置文件

使用 json 中的 json.dump() 方法，可以将一个字典写入到 JSON 文件中

3、修改配置文件

如果需要修改配置文件，只需要先从配置文件中读出内容，然后修改内容，最后将修改后的内容保存的配置文件中即可

3.ini/config

ini 配置文件和 config 配置文件的解析方式类似，仅仅是文件后缀不一致

这里我们以ini配置文件为例

ini 文件由 3 部分组成，分别是：节点（Section）、键（Key）、值（Value）

常见的 Python 处理 ini 文件有两种方式，包含：

使用内置的configparser标准模块

使用 configobj第三方依赖库

我们先来看看内置的 configparser 模块

3.1.1 读取配置文件

实例化一个 ConfigParser解析对象，使用read()方法读取 ini 配置文件

使用sections()函数，可以获取所有的节点列表

要获取某一个节点下的所有键，可以使用options(section_name)函数

通过 items(section_name)函数，可以获取某一个节点下的所有键值对

如果要获取某一个节点下，某一个键下的值，使用get(section_name,key_name) 函数即可

3.1.2 写入配置文件

和读取配置文件类似，需要先实例化一个 ConfigParser解析对象

首先，使用add_section(section_name)函数添加一个节点

然后，就可以使用set(section_name,key,value)函数往某一个节点添加键值对

最后，使用write()函数写入到配置文件中去

3.1.3 修改配置文件

修改配置文件的步骤是，读取配置文件，然后通过 set(section_name,key,value) 进行修改操作，最后使用 write() 函数写入到文件中即可

接着，我们聊聊使用 configobj 操作 ini 配置文件的流程

首先安装 configobj 依赖库

3.2.1 读取配置文件

直接将 ini 配置文件路径作为参数，使用 ConfigObj 类构造一个对象

查看源码可以发现，ConfigObj 是 Section 节点的子类，而 Section 是 Dict 字典的子类

所以，可以直接通过键名 Key 获取节点和键值

3.2.2 修改配置文件

只需要读取配置文件，然后直接修改 ConfigObj 对象，最后使用 write() 方法，即可以达到修改配置文件的目的

3.2.3 写入配置文件

写入配置文件，首先需要实例化一个 ConfigObj 对象，传入文件路径

然后，设置节点、针对节点设置键值对

最后，调用 write() 方法，写入到配置文件中

4.YAML

Python 操作 YAML 文件，常见的 2 种方式分别是：pyyaml、ruamel.yaml

使用 pip 安装依赖

下面以一个简单的 YAML 配置文件为例，通过两种方式进行说明

我们先来看看 pyyaml

4.1.1 读取配置文件

首先，读取配置文件，使用yaml.safe_load()加载数据，获取的数据类型是字典

接着，就可以通过 YAML 配置文件的层级关系，获取键值

4.1.2 写入配置文件

使用 YAML 中的dump()方法，可以将一个字典写入到 YAML 配置文件中

需要注意的是，为了保证中文写入能正常显示，需要配置 allow_unicode=True

4.1.3 修改配置文件

和修改 ini 文件类型，先读取配置文件，然后修改字典中的内容，最后使用上面的写入方法，即可以达到修改配置文件的目的

接着，我们来聊聊使用ruamel操作 YAML 配置文件的流程

ruamel 是 pyyaml 的衍生版本，在传统 pyyaml 的基础上，增加了 RoundTrip 模式，保证 YAML 配置文件的读写顺序一致

所以，在读取、修改、写入方式上和 pyyaml 类似

4.2.1 读取配置文件

4.2.2 写入配置文件

4.2.3 修改配置文件

5.XML

XML 作为一种标记语言，被用来设计存储和传输数据，很多项目经常使用 XML 作为配置文件和数据传输类型

Python 内置的xml 模块 可以很方便地处理 XML 配置文件

以下面这段配置文件为例：

接着，使用 getElementsByTagName(tag_name)方法，获取某一节点

最后，使用 childNodes属性，遍历节点的子 Node 节点，获取节点的名称和值

6.最后

到此，Python 数据全家桶以全部完结！

如果你觉得文章还不错，请大家点赞、分享、留言下，因为这将是我持续输出更多优质文章的最强动力！