腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

Golang开发

专栏作者

289

文章

265708

阅读量

38

订阅数

分布式 spark 大数据数据结构

全称为Resilient Distributed Datasets,弹性分布式数据集，是Spark中最基本的数据抽象，它代表一个不可变，可分区,里面的元素可并行计算的集合。RDD在逻辑上是一个数据集，在物理上则可以分块分布在不同的机器上并发运行。RDD允许用户在执行多个查询时显示的将工作缓存在内存中，后续的查询能够重用工作集，这极大的提升了查询速度。在Spark 中，对数据的所有操作不外乎创建RDD,转换已有RDD以及调用RDD操作进行求值，每个RDD都被分为多个分区，这些分区运行在集群的不同节点上，RDD可以包含Python,Java,Scala中任意类型的对象，甚至可以是用户自定义对象。 RDD是Spark的核心，也是整个Spark的架构基础。它的特性可以总结如下：

2019-08-08

5160

JavaScrip内置对象

编程算法数据结构

数组任意地方删除或者添加元素 start 开始 deletedCount 删除个数

2019-08-02

1.1K0

树（英语：tree）是一种抽象数据类型（ADT）或是实现这种抽象数据类型的数据结构，用来模拟具有树状结构性质的数据集合。它是由n（n>0）个有限节点组成一个具有层次关系的集合。把它叫做“树”是因为它看起来像一棵倒挂的树，也就是说它是根朝上，而叶朝下的。特点

2019-06-11

4390

存储编程算法数据结构

JavaScript中: js中的对象就是生活中对象的一个抽象，没有特征和行为,取而代之的是有对应的属性和方法;

2019-06-11

11.5K0

Golang——Context

go 数据结构

Go中goroutine之间没有父与子的关系，多个gorountine都是平行的被调度，不存在所谓的子进程退出后的通知机制。多个goroutine协调工作涉及通信，同步，通知，退出四个方面：通信：chan通道是各goroutine之间通信的基础。注意这里的通信主要指程序的数据通道。同步：可以使用不带缓冲的chan；sync.WaitGroup为多个gorouting提供同步等待机制；mutex锁与读写锁机制。通知：通知与上文通信的区别是，通知的作用为管理，控制流数据。一般的解决方法是在输入端绑定两个chan，通过select收敛处理。这个方案可以解决简单的问题，但不是一个通用的解决方案。退出：简单的解决方案与通知类似，即增加一个单独的通道，借助chan和select的广播机制(close chan to broadcast)实现退出。 context设计目的: 1.退出通知机制一一通知可以传递给整个 goroutine 调用树上的每一个。 2.传递数据一一数据可以传递给整个 goroutine 调用树上的每一个 goroutine

2019-05-29

9621

Go语言核心编程(7)——语言陷阱

数据结构编程算法

规则 1 相同类型变量可在末尾带上类型 2 如果不带类型，则进行类型推断 3 多值赋值语句每个变量后面不能带上类型格式右边可是一个返回函数表达式，可以是range对map clice 等函数的操作，也可以是类型推断赋值的左边需要和右边的的值数量一致，从左到右依次赋值

2019-05-29

1.1K0

Java基础——数据类型

编程算法数据结构

Java语言提供了八种基本类型。六种数字类型（四个整数型，两个浮点型），一种字符类型，还有一种布尔型。

2019-05-28

4120

Java基础——集合

hashmap 编程算法数据结构 java

集合是java中提供的一种容器，可以用来存储多个数据，集合框架主要java.util 包中，存储结构可以分为两大类，分别是单列集合java.util.Collection和双列集合java.util.Map。 Collection是单列集合类的根接口，用于存储一系列符合某种规则的元素，它有两个重要的子接口，分别是java.util.List和java.util.Set。其中，List的特点是元素有序、元素可重复。Set的特点是元素无序，而且不可重复。List接口的主要实现类有java.util.ArrayList和java.util.LinkedList，Set接口的主要实现类有java.util.HashSet和java.util.TreeSet。

2019-05-28

5670

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态