大神带我来搬砖-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

大神带我来搬砖

专栏成员

63

文章

81831

阅读量

21

订阅数

深入浅析分布式系统的一致性模型

一致性模型指的是分布式系统对外界承诺的一个契约，外界按照契约的规定与分布式系统发生交互，就能得到契约中承诺的观测结果。

大神带我来搬砖

2019-06-15

3150

如何学习分布式系统

分布式编程算法

2019年，做大数据的开发已经6年了，这期间分布式系统的知识学习了不少，但基本都是来源于项目需要而零敲碎打，没有系统性的融会贯通提纲挈领，在一件小事的触动之下，决定将分布式系统做一次系统性的学习。

大神带我来搬砖

2019-05-22

5330

Spark RDD深入浅析

css 分布式 spark

Spark里的RDD是什么？在Spark如火如荼的今天，很多面试官都会问这个问题。想必答案大家都脱口而出--就是弹性分布式数据集嘛，但是它怎么就弹性了？它怎么分布式的？就需要去它的实现代码中一探究竟了。

大神带我来搬砖

2019-05-08

8400

想搞大数据??你这样是自寻死路!!

大数据分布式数据库 hbase

近日来，家住北京市朝阳区的程序员诸葛建国非常郁闷。因为他的公司审时度势，附庸风雅牵强附会的上了一套大数据系统，可谓麻雀虽小五脏俱全，包括了：分布式文件系统HDFS 分布式数据库hbase,mongodb,kudu 分布式内存文件系统alluxio 用于多维分析的druid 实时流计算系统storm 正所谓，覆巢之下，安有完卵。这些产品虽然好用，但是却给诸葛建国带来了很多烦恼。为了安装软件，他要重复重复再重复的登录一台又一台的服务器；为了修改某个参数，他又要重复重复再重复的登录一台又一台的服务器；为了监控服

大神带我来搬砖

2018-06-19

4680

从技术面试官的角度谈谈简历和面试那些事儿

分布式爬虫

公司组织过多次校园招聘和社会招聘，忝为首席架构师（因为项目组就一个架构师~~人工摊手），我也多次作为技术面试官参与面试，所以也谈谈面试中那些事儿。简历简历的重要性是不言而喻的，如果简历写的好，我们可能已经内心里有了录用他的想法，把候选人请来只是验证一下想法的正确性，看看候选人是否有意向来。关于简历，从技术面试官的角度来看，需要注意以下几点： 1 简明扼要基本上我们看简历都是第一页决定了整体印象。有一次一个工作了11年的大哥来面试，整整6页的简历啊！各种工作经历事无巨细，满篇都是“某公司XX管理系统

大神带我来搬砖

2018-05-02

7984

想搞大数据??你这样是自寻死路!!

大数据分布式数据库

近日来,家住北京市朝阳区的程序员诸葛建国非常郁闷,因为他的公司审时度势,附庸风雅,牵强附会的上了一套大数据系统,可谓麻雀虽小五脏俱全,包括了: 分布式文件系统HDFS 分布式数据库hbase,mongodb,kudu 分布式内存文件系统alluxio 用于多维分析的druid 实时流计算系统storm 正所谓,覆巢之下,安有完卵.这些产品虽然好用,但是却给诸葛建国带来了很多烦恼.为了安装软件,他要重复重复再重复的登录一台又一台的服务器,为了修改某个参数,他又要重复重复再重复的登录一台又一台的服务器,为了监控

大神带我来搬砖

2018-05-02

6350

分布式数据存储系统kudu使用总结

分布式存储开源 spark sql

Kudu是Cloudera开源的新型列式存储系统，专门为了对快速变化的数据进行快速的分析。在国内，小米和神策都已经采用了kudu。我们使用了kudu 1.3.0版本存储用户行为数据，现在已经使用了一段时间。首先它的插入性能还是不错的，设置足够的内存以后，插入速度轻轻松松就达到了百万条每秒。查询速度还算中规中矩，用spark SQL或者impala在上面都有不错的查询速度，至少比hbase快多了，当然前提是要合理设置range分区，让每次的查询进行提前剪枝。当然在使用过程中遇到了几个小坑，

大神带我来搬砖

2018-05-02

1.2K0

没有更多了

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态