前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >hadoop的单机版安装和HBase的搭建

hadoop的单机版安装和HBase的搭建

作者头像
用户1499526
发布2019-07-15 17:47:54
1.5K0
发布2019-07-15 17:47:54
举报
文章被收录于专栏:简单的日记简单的日记

1. 安装jdk1.7的环境 下载hadoop. hadoop-2.5.2.tar.gz版本

2.进入hadoop的网站,点击左下角的Documentation,找到对应的版本 ,点击进入,找到Single Node Setup 的说明文档,按照文档说明开始配置

1.编辑etc/hadoop/hadoop-env.sh

2.

 # set to the root of your Java installation
  export JAVA_HOME=/usr/java/latest (java的环境位置)

3.Use the following:

etc/hadoop/core-site.xml:

<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:8020</value> (ip地址)
    </property>
</configuration>

etc/hadoop/mapred-site.xml:

<configuration>
    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>
</configuration>

etc/hadoop/yarn-site.xml:

<configuration>
    <property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
    </property>
</configuration>

配置 hadoop.tmp.dir

在hadoop文件中创建data目录

在etc/hadoop/core-site.xml:中添加

<property>
        <name>hadoop.tmp.dir</name>
        <value>/bigdata/softwares/hadoop-2.5.2/data/tmp</value>
    </property>

执行操作

1.Format the filesystem: 格式化信息

$ bin/hdfs namenode -format

2.Start NameNode daemon and DataNode daemon:

$ sbin/start-dfs.sh

3.

$ sbin/start-yarn.sh

4.The hadoop daemon log output is written to the $HADOOP_LOG_DIR directory (defaults to $HADOOP_HOME/logs).

5.Browse the web interface for the NameNode; by default it is available at:

NameNode - http://localhost:50070/

hbase

Example hbase-site.xml for Standalone HBase

<configuration>
  <property>
    <name>hbase.rootdir</name>
    <value>hdfs://ip:8080/data</value>
  </property>
  <property>
    <name>hbase.zookeeper.property.dataDir</name>
    <value>/bigdata/softwares/hbase-1.2.3/data/zkData</value>
  </property>
</configuration>
<property>
  <name>hbase.cluster.distributed</name>
  <value>true</value>
</property>

修改 regionserver 中的ip地址

bin/hbase-daemon.sh start zookeeper

bin/hbase-daemon.sh start master

bin/hbase-daemon.sh start regionserver

http://192.168.1.23:16030/rs-status 端口边了

本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
TDSQL MySQL 版
TDSQL MySQL 版(TDSQL for MySQL)是腾讯打造的一款分布式数据库产品,具备强一致高可用、全球部署架构、分布式水平扩展、高性能、企业级安全等特性,同时提供智能 DBA、自动化运营、监控告警等配套设施,为客户提供完整的分布式数据库解决方案。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档