前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >大数据时代的NoSQL

大数据时代的NoSQL

作者头像
用户1564362
发布2018-04-04 17:51:54
7000
发布2018-04-04 17:51:54
举报
文章被收录于专栏:飞总聊IT飞总聊IT

NoSQL这个词语伴随着云计算和大数据的出现也有一些时日,对于NoSQL和SQL的区别到底是什么,NoSQL自己又是什么,往往很多人还有一些困惑。这篇文章主要阐述一下这些基本概念,做个简单的介绍。

SQL是国际标准化了的数据库的查询语言,由IBM发明,被Oracle抄袭,之后广泛被各大厂商支持。其最著名的SELECT FROM WHERE GROUP BY基本上就是路人皆知了。SQL有很多的标准,从当前环境来看,最重要的应该是SQL1998,基本上现在任何一个新的startup要想写个database,SQL1998的支持是必要的,不然差评,没人买。

从狭义上讲,NoSQL指key-value store。SQL实际上指relational database。两者在概念上最大的区别是对consistency的处理。SQL有著名的ACID原则,对consistency来说是strong consistency,而NoSQL一般讲究eventual consistency,并不保证在任何的有限时间内读写会consistent。NoSQL也有所谓的BASE原则。这两者的理论基础是著名的CAP理论。要解释清楚这些概念本身可能需要一长篇文章,所以我打算另外在撰文。在这里把这些东西先列一下。

著名的key-value store很多,然而大体上的套路要么遵循了BigTable,要么遵循了Dynamo。对一个key-value store来说要解决的两个核心问题是

  1. 如何partition data
  2. 每个partition的data是怎么存的

前者一般用hash partition或者range partition。后者一般存成某种tree的结构或者某种hash-table。另外一般还要带上bloom filter来加速查询。

广义上来讲,现在人们把document db和graph db也算作NoSQL。简而言之,这种数据库存的是JSON blob。最为著名的两个是MongoDB和CouchDB。这些数据库一般来说都是只支持Restful API,通过HTTP来读取。每条record是个JSON blob,里面存了所有相关的数据。Schema是self-define的。这类数据库都要求每条record有一个unique key,这样才能够通过key去查询。我道听途书的一个比较有意思的传闻是Uber内部的存储系统。他们用了MySQL做了一个类似document db的东西,一张表里面有key有value, value就是一个JSON blob。当然这类数据库一般都有indexing。

GraphDB存的是图,基本上比如说社交图啊。这不是我最熟悉的领域,我也只是读过一些paper并无实际工作经验。一般来说,这种数据库其实更像一个search engine,一般来说这种系统会有三层:底层的分布式存储系统,中间层是对图数据库的管理和查询,最上层则是对图处理的API蹭。目前比较知名的是Twitter的FlockDB和facebook的TAO。有兴趣的可以仔细研读一下TAO的基本构架。

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2016-08-28,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 飞总聊IT 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
大数据
全栈大数据产品,面向海量数据场景,帮助您 “智理无数,心中有数”!
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档