专栏首页麒思妙想要解析一个配置文件,当打开文件的时候我崩溃了
原创

要解析一个配置文件,当打开文件的时候我崩溃了

薛定谔的猫

首先,说一些题外话,按照我一贯的风格,这篇文章本应该叫《浅谈如何优雅读取特殊格式配置文件》,但是最近被某些网站的推送恶心到了,我是不太喜欢这种标题的,所以我一直尽量避免使用这种标题党式的标题,但是,好奇心驱使我,想做一次实验,欢迎大家留言,说出你的想法,你更喜欢哪个标题?

A. 要解析一个配置文件,当打开文件的时候我崩溃了 | 为人性癖耽佳句,语不惊人死不休

B. 浅谈如何优雅读取特殊格式配置文件 | 少一点套路,多一点真诚

C. 冇所谓

一点点创意

最近需要读取一些配置文件,但他并不是常用格式,而且需要我们对该文件进行操作除了正常的读写外,还要尽量保存原文件的注释、顺序等信息。

这个配置文件原本也是键值对性质的文件,但是这里键值的分隔符,用了空格和制表符而不是等号。

键也不是唯一的,同名键可能有多个值的情况。

如何满足这个需求呢?将文件加载进来,处理成一个特殊的数据结构,标记出来注释,字段,值等信息,直接对这个结构进行操作,然后再落盘回去,即形成如下图结构。

如上所示,尽管也可以完成需求,但是总觉得不够优雅,逻辑结构混杂在一起。

那么如何能更优雅一些呢?作为一名老CRUD,我是这么想的,在原始数据加载时候,引入一个纯数据缓存队列,用于应对读取操作,引入一个辅助元数据队列, 用于协助判断键具体的类型,例如,键值对、键多值对等情况。

在进行数据更新的时候,引入变更队列,用于处理数据变更,这里并不会直接更新实际数据,而是在落盘的时候,才会合并处理。在外层加入一个布隆过滤器,用于在遍历的时候,先抵消部分无变更键。

这样,还能顺便实现一波恢复操作。

整体架构,归结如上图所示。架构设计,有时就是这样,一点点的变更,看着能笑出来。

希望能对正在读文章的你有所启发,也欢迎与我交流。

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 要解析一个配置文件,当打开文件的时候我崩溃了

    首先,说一些题外话,按照我一贯的风格,这篇文章本应该叫《浅谈如何优雅读取特殊格式配置文件》,但是最近被某些网站的推送恶心到了,我是不太喜欢这种标题的,所以我一直...

    麒思妙想
  • 阿卡姆科普报告——Flink

    Flink 是一个针对流数据和批数据的分布式处理引擎。说起Flink那么必定会和Spark比一比,从slogan来看也能看出来一些区别(详细内容,可以参考下面链...

    麒思妙想
  • 浅谈基于JDBC实现虚拟专用数据库(VPD)

    虚拟专用数据库 (VPD)提供了角色和视图无法提供的行级访问控制。对于互联网访问,虚拟专用数据库可以确保在线银行的客户只能看到他们自己的帐户。Web托管公司可以...

    麒思妙想
  • 反射机制、依赖注入、控制反转

    反向: dll->类[方法,属性]. 从已经有的dll文件反编译得到其中的一些可用的方法.

    后端技术探索
  • 【系列文】数据分析在人力资源管理当中的应用!

    数据分析在人力资源管理当中的应用之 人工成本分析 随着人力资源管理理论和管理实践的迅速发展,人力资源管理的各大模块的职能已趋完善,如何提升人力资源管理的价值,是...

    CDA数据分析师
  • 怎样设置EditText内部文字被锁定不可删除和修改,而文字只能在后面输入

    在做项目的时候,我曾经遇到过这样的要求,就是跟百度贴吧客户端上的一样,在回复帖子的时候,在EditText中显示回复人的名字,而且这个名字不可以修改和删除,说白...

    非著名程序员
  • Apache Beam:下一代的数据处理标准

    Apache Beam(原名Google DataFlow)是Google在2016年2月份贡献给Apache基金会的孵化项目,被认为是继MapReduce、G...

    CSDN技术头条
  • 《Learning Scrapy》(中文版)第6章 Scrapinghub部署

    前面几章中,我们学习了如何编写爬虫。编写好爬虫之后,我们有两个选择。如果是做单次抓取,让爬虫在开发机上运行一段时间就行了。或者,我们往往需要周期性的进行抓取。我...

    SeanCheney
  • intel-hadoop/HiBench流程分析----以贝叶斯算法为例

    Hibench 包含9个典型的hadoop负载(micro benchmarks,hdfs benchmarks,web search bench marks,...

    流川疯
  • 初识Flask

        Flask是一个基于Python开发并且依赖jinja2模板和Werkzeug WSGI服务的一个微型框架,微框架中的“微”意味着 Flask 旨在...

    py3study

扫码关注云+社区

领取腾讯云代金券