前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >DBDB: 一个简单的key/value数据库(一)

DBDB: 一个简单的key/value数据库(一)

作者头像
哒呵呵
发布2018-08-06 14:12:57
1.1K0
发布2018-08-06 14:12:57
举报
文章被收录于专栏:鸿的学习笔记鸿的学习笔记

编译自:http://www.aosabook.org/en/500L/dbdb-dog-bed-database.html 作者:Taavi Burns 翻译:鸿 如有翻译问题或建议,请公众号留言

导论 DBDB(Dog Bed Database)是基于Python实现的key/value数据库。 它将key值与value值关联,并将该关联存储在磁盘上方便检索。DBDB可以在服务器崩溃或者发生错误的情况下保存数据,并且也避免了所有数据都保存在内存中,因此它可以存储比服务器内存更多的数据。

DBDB解决的三个问题 如果您的文件系统空间不足,会发生什么情况? 如果服务器在保存数据时死机会发生什么? 如果你的数据大小超过可用内存呢?

DBDB的特点 数据库的特点可以用ACID来描述:原子性,一致性,隔离性和持久性。DBDB中的数据更新具有原子性和持久性。但是DBDB不提供一致性保证,因为它没有对存储的数据施加限制。同样的,隔离性也没有实现。当然,应用程序可以使用属于它自己的一致性保证,但隔离性则需要专门的事务管理器。除此以外,还有其它的问题存在。例如,DBDB不会处理老数据,因此重复更新(即使是相同的key值)最终都会消耗掉所有的磁盘空间。

俯瞰DBDB DBDB分为逻辑层(数据结构:二叉树),物理层(如何在磁盘上存储数据)以及接口API(key值与value值的具体内容)几层。

代码架构 下面的模块是按终端用户的使用频率进行降序排序的,换句话说,第一个模块是用户了解的最多的模块,而最后一个模块与终端用户没有什么交集。

  • tool.py:一个用于从终端窗口使用数据库的命令行工具。
  • interface.py:定义了类(DBDB),它基于二叉树实现了Python字典数据结构。
  • logical.py:逻辑层。它是一个key值/value值存储的抽象接口。LogicalBase为数据更新提供了接口(如get,set和commit),并且对锁进行管理和回收内部节点引用。ValueRef是一个引用存储在数据库中的二进制Blob的Python对象,可以避免将所有数据一次性加载到内存中。
  • binary_tree.py:在逻辑层之下定义了一个具体的二叉树算法。BinaryTree提供了二叉树的具体实现,其中包含读取,插入和删除key/value的方法。 BinaryTree是一棵函数式的不变的二叉树;更新是通过返回一个与旧树共享公共结构的新树来实现的。 BinaryNode实现了二叉树的一个节点。BinaryNodeRef是一个特殊的ValueRef,它知道如何对BinaryNode进行序列化和反序列化。
  • physical.py:定义了物理层。 Storage类提供持久,(往往是)仅追加记录的存储。
本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2018-04-24,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 鸿的学习笔记 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
对象存储
对象存储(Cloud Object Storage,COS)是由腾讯云推出的无目录层次结构、无数据格式限制,可容纳海量数据且支持 HTTP/HTTPS 协议访问的分布式存储服务。腾讯云 COS 的存储桶空间无容量上限,无需分区管理,适用于 CDN 数据分发、数据万象处理或大数据计算与分析的数据湖等多种场景。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档