吉吉在这里-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

吉吉在这里

专栏成员

38

文章

111893

阅读量

14

订阅数

Spark学习笔记

spark hadoop python css 分布式

Apache Spark是一个开源集群运算框架，最初是由加州大学柏克莱分校AMPLab所开发。相对于Hadoop的MapReduce会在运行完工作后将中介数据存放到磁盘中，Spark使用了存储器内运算技术，能在数据尚未写入硬盘时即在存储器内分析运算。Spark在存储器内运行程序的运算速度能做到比Hadoop MapReduce的运算速度快上100倍，即便是运行程序于硬盘时，Spark也能快上10倍速度。[1]Spark允许用户将数据加载至集群存储器，并多次对其进行查询，非常适合用于机器学习算法。

2020-06-16

1.1K0

CentOS Minimal 安装和配置TIPS

centos yum bash bash 指令 python

Linux 各种发行版虽然和Unix系非常相近，但还是有许多差别的。Linux更有趣吧.最近需要学习和测试，就在OSX平台下VirtualBox重新安装CentOS 7.由于机器本身性能原因，另外个人觉得Minimal安装不仅节约资源，而且可以更好的锻炼动手能力。再次把这次安装配置记录下来。

2019-03-01

1.4K0

没有更多了

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态