LhWorld哥陪你聊算法-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

LhWorld哥陪你聊算法

欢迎大家微信公众号LHWorld 带你领略算法和大数据的魅力；主页地址：https://blog.csdn.net/LHWorldBlog

专栏成员

159

文章

253189

阅读量

42

订阅数

从0到1搭建spark集群---企业集群搭建

spark hadoop http apache html

今天分享一篇从0到1搭建Spark集群的步骤，企业中大家亦可以参照次集群搭建自己的Spark集群。

LhWorld哥陪你聊算法

2018-09-13

2.1K0

hadoop集群篇--从0到1搭建hadoop集群

hadoop ssh java jdk xml

本来有套好好的集群，可是不知道为什么虚拟机镜像文件损坏，结果导致集群不能用。所以不得不重新搭套集群，借此机会顺便再重新搭套吧，顺便提醒一句大家，自己虚拟机的集群一定要及时做好快照，最好装完每个东西后记得拍摄快照。要不搞工具真的很浪费时间，时间一定要用在刀刃上。废话不多说，开始准备环境搭建，本集群搭建完全基于企业思想，所以生产集群亦可以参照此搭建。

LhWorld哥陪你聊算法

2018-09-13

1.3K0

【CDH篇】---CDH从初识到搭建到应用

apache hadoop 存储分布式大数据

CDH（Cloudera's Distribution, including Apache Hadoop）是Hadoop众多分支中的一种，由Cloudera维护，基于稳定版本的Apache Hadoop构建提供了Hadoop的核心可扩展存储、分布式计算基于Web的用户界面。简单来说CDH就是把我们知道的大数据家族组件进行了一个组合，然后提供了一个WEB-UI的页面，使原来的搭建操作变得非常简单。CDH架构图如下：

LhWorld哥陪你聊算法

2018-09-13

2.9K0

【Spark篇】---Spark初始

spark mapreduce hadoop 大数据 apache

Spark是基于内存的计算框架，性能要优于Mapreduce，可以实现hadoop生态圈中的多个组件，是一个非常优秀的大数据框架，是Apache的顶级项目。One stack rule them all 霸气。

LhWorld哥陪你聊算法

2018-09-13

9970

【Sqoop篇】----Sqoop从搭建到应用案例

hadoop hive 数据库云数据库 SQL Server postgresql

今天开始讲解Sqoo的用法搭建和使用。Sqoop其实功能非常简单。主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递，可以将一个关系型数据库（例如： MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可以将HDFS的数据导进到关系型数据库中。

LhWorld哥陪你聊算法

2018-09-13

8730

HBase篇--初始Hbase

hbase 分布式数据库 hadoop 存储

1.HBase，是一个高可靠性、高性能、面向列、可伸缩、实时读写的分布式数据库。 2.利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce来处理HBase中的海量数据,利用Zookeeper作为其分布式协同服务。

LhWorld哥陪你聊算法

2018-09-13

4.4K0

HBase篇--搭建HBase完全分布式集群

hbase 分布式 hadoop zookeeper http

完全分布式基于hadoop集群和Zookeeper集群。所以在搭建之前保证hadoop集群和Zookeeper集群可用。可参考本人博客地址

LhWorld哥陪你聊算法

2018-09-13

7550

没有更多了

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态