专栏首页积累沉淀hadoop与hbase伪分布式的基本配制文件设置

hadoop与hbase伪分布式的基本配制文件设置

Hadoop

0.hbase-env.sh

export JAVA_HOME=/software/jdk1.7.0_80

1.core-site.xml

 <configuration>

    <property> 

        <name>fs.defaultFS</name> 

        <value>hdfs://master:9000</value> 

    </property> 

    <property> 

        <name>hadoop.tmp.dir</name> 

        <value>file:/software/hadoop-2.6.4/tmp</value>

    </property>

    <property>

        <name>hadoop.native.lib</name>

        <value>false</value>

    </property>

 </configuration>

2.hdfs-site.xml

<configuration>

    <property> 

        <name>dfs.replication</name> 

        <value>1</value> 

    </property> 

    <property>

        <name>dfs.namenode.name.dir</name>

        <value>file:/software/hadoop-2.6.4/dfs/name</value>

    </property>

    <property>

        <name>dfs.datanode.data.dir</name>

        <value>file:/software/hadoop-2.6.4/dfs/data</value>

    </property>

    <property>

        <name>dfs.permissions</name>

        <value>false</value>

    </property>

 </configuration>

 3.mapred-site.xml

<configuration>

    <property>

        <name>mapreduce.framework.name</name>

        <value>yarn</value>

    </property>

</configuration>

4.yarn-site.xml

<configuration>

    <property>

        <description>The hostname of the RM.</description> 

        <name>yarn.resourcemanager.hostname</name> 

        <value>master</value> 

    </property> 

    <property> 

        <name>yarn.nodemanager.aux-services</name> 

        <value>mapreduce_shuffle</value> 

    </property>

</configuration>

5.slaves

master

Hbase:

0.hbase-env.sh

export JAVA_HOME=/software/jdk1.7.0_80 

export HBASE_CLASSPATH=/software/hadoop-2.6.4/etc/hadoop 

export HBASE_MANAGES_ZK=true 

export HBASE_LOG_DIR=/software/hbase-1.2.1/logs

1.hbase-site.xml 

<configuration>

<property>

<name>hbase.rootdir</name>

<value>hdfs://master:9000/hbase</value>

</property>

<property>

<name>hbase.cluster.distributed</name>

<value>true</value>

</property>

<property>

<name>hbase.tmp.dir</name>

<value>file:/software/hbase-1.2.1/tmp</value>

</property>

<property>

<name>hbase.zookeeper.quorum</name>

<value>master</value>

</property>

<property>

<name>hbase.zookeeper.property.dataDir</name>

<value>file:/software/hbase-1.2.1/zookeeper</value>

</property>

<property>

<name>dfs.replication</name>

<value>1</value>

</property>

</configuration>

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 干货--JMS(java消息服务)整合Spring项目案例

    Sprng-jms消息服务小项目 所需的包: spring的基础包 spring-jms-xx包 spring-messag...

    汤高
  • 适配器模式

    思想: 写一个抽象类继承HttpServlet,在这个类中加入通用功能。 以后所有的servlet类都继承自这个 类。 以达到扩展Servlet...

    汤高
  • JavaScript基本包装类型

    知识点: 1.基本包装类型概述 2.Boolean类型 3.Number类型 4.String类型 为了便于操作基本类型值,ECMAScript...

    汤高
  • Hadoop完全分布式安装

    完全分布式安装部署,其实步骤上来说与伪分布式没有太大的区别,主要增加2台虚拟机部署称为一个3台的集群

    我脱下短袖
  • Hadoop install

    XING辋
  • jdbc连接Mysql报错“java.sql.SQLException: Incorrect string value:。。。”的解决办法

    产生这种异常的原因在于,mysql中的utf8编码最多会用3个字节存储一个字符,如果一个字符的utf8 编码占用4个字节(最常见的就是ios中的emoji表情...

    飞奔去旅行
  • 基于SSM的数据库连接池框架druid的使用

    可以先去druid的官网下载jar:http://druid.io/downloads.html

    SmileNicky
  • druid简介与运用

    Druid首先是一个数据库连接池。Druid是目前最好的数据库连接池,在功能、性能、扩展性方面,都超过其他数据库连接池,包括DBCP、C3P0、BoneCP、P...

    Java架构师历程
  • Hive篇--搭建Hive集群

    Hive中搭建分为三中方式 a)内嵌Derby方式 b)Local方式 c)Remote方式 三种方式归根到底就是元数据的存储位置不一样。

    LhWorld哥陪你聊算法
  • 基于druid和spring的动态数据库以及读写分离

    spring与druid可以实现动态数据源,夸库查询,读写分离等功能。现在说一下配置:

    一笠风雨任生平

扫码关注云+社区

领取腾讯云代金券