首页
学习
活动
专区
工具
TVP
发布

架构师专栏

专注Java、Spring / Boot / Cloud,微服务架构,大数据,云计算,知识分享
专栏成员
131
文章
233251
阅读量
72
订阅数
HBase-1.3.1 集群搭建 - 报错整理
HBase 启动报错 Waiting for dfs to exit safe mode… 启动 Hadoop 和HBase之后,执行jps命令,已经看到有 HMaster,HRegionServer的进程 Maste $ jps 6100 SecondaryNameNode 6634 HMaster #Master 进程 7354 Jps 6254 ResourceManager 5903 NameNode node2,node3 (salve) $ jps 2528 NodeManager 2417 D
程序员鹏磊
2018-02-09
4450
大数据平台搭建 Hadoop-2.7.4 + Spark-2.2.0 快速搭建
Apache Spark 简介 Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架,Spark,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。 Spark 是一种与
程序员鹏磊
2018-02-09
2.5K0
离线部署 CDH 5.12.1 及使用 CDH 部署 Hadoop 大数据平台集群服务
Cloudera Manager Cloudera Manager 分为两个部分:CDH和CM。 CDH是Cloudera Distribution Hadoop的简称,顾名思义,就是cloudera公司发布的Hadoop版本,封装了Apache Hadoop,提供Hadoop所有的服务,包括HDFS,YARN,MapReduce以及各种相关的components:HBase, Hive, ZooKeeper,Kafka等。 CM是cloudera manager的简称,是CDH的管理平台,主要包括CM s
程序员鹏磊
2018-02-09
2.6K0
CentOs7.3 Hadoop 用户 ssh 免密登录
环境 三台虚拟机(IP): 192.168.252.121 192.168.252.122 192.168.252.123 1.修改主机名 修改三台主机名,以此类推,node1,node3,node3 命令格式 hostnamectl set-hostname <hostname> sudo hostnamectl set-hostname node1 剩下的虚拟机依次修改hostnamectl set-hostname[1-3] 重启操作系统 $ reboot 2.修改映射关系 1.在 node1 的 /
程序员鹏磊
2018-02-09
1.8K0
HBase-1.3.1 集群搭建
什么是HBase? HBase是建立在Hadoop文件系统之上的分布式面向列的数据库。它是一个开源项目,是横向扩展的。 HBase是一个数据模型,类似于谷歌的大表设计,可以提供快速随机访问海量结构化数据。它利用了Hadoop的文件系统(HDFS)提供的容错能力。 它是Hadoop的生态系统,提供对数据的随机实时读/写访问,是Hadoop文件系统的一部分。 人们可以直接或通过HBase的存储HDFS数据。使用HBase在HDFS读取消费/随机访问数据。 HBase在Hadoop的文件系统之上,并提供了读写访问
程序员鹏磊
2018-02-09
8850
Hadoop-2.7.4 集群快速搭建
Hadoop简介 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。 Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集(large data set)的应用程
程序员鹏磊
2018-02-09
1.3K0
离线部署 CDH 5.12.1 及使用 CDH 部署 Hadoop 大数据平台集群服务
Cloudera Manager 分为两个部分:CDH和CM。
程序员鹏磊
2018-01-10
2.3K0
没有更多了
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪,探寻中国数据库50年的发展历程
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档