腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

有困难要上，没有困难创造困难也要上！

专栏作者

247

文章

379102

阅读量

37

订阅数

使用docker-compose创建hadoop集群

容器镜像服务 bash bash 指令 hadoop 容器

下载docker镜像首先下载需要使用的五个docker镜像 docker pull bde2020/hadoop-namenode:1.1.0-hadoop2.7.1-java8 docker pull bde2020/hadoop-datanode:1.1.0-hadoop2.7.1-java8 docker pull bde2020/hadoop-resourcemanager:1.1.0-hadoop2.7.1-java8 docker pull bde2020/hadoop-historyserv

2018-06-22

3.9K0

Hive通过JDBC连接HiveServer

修改 hadoop 配置首先需要修改hadoop的配置文件etc/hadoop/core-site.xml，添加如下配置项，其中 <user> 为连接用户，根据具体用户替换。 <?xml versi

2018-05-14

1.7K1

Hadoop3-分布式模式安装

hadoop xml yarn node.js mapreduce

接前一篇博客，这次做安装一个真正的分布式集群环境。准备这里准备三台机器bd1,bd2,bd3来组个hadoop集群，其中bd1作为namenode，bd1,bd2,bd3作为datanode 配置这三台机器之间可以免密码 SSH 登录，参考我以前的博客。配置修改下面几个配置文件 etc/hadoop/core-site.xml <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://bd1:9000</

2018-05-14

4820

hive hadoop sql mapreduce 数据库

介绍 Hive 是一个基于 Hadoop 的数据仓库工具，它可以将结构化数据文件映射成一张表，然后通过类似 SQL 的查询语句来执行查询。这些查询语句在Hive中被称作HQL，这些 HQL 会被翻译成 MapReduce 作业来执行。 Hive 把表和字段转换成 HDFS 中的文件夹和文件，并将这些元数据保持在关系型数据库中，如 derby 或 mysql。 Hive 查询的数据存储在HDFS上，运行在Yarn上。 Hive 适合做离线数据分析，如：批量处理和延时要求不高场景。安装安装 Hadoop 由

2018-05-14

1.5K0

HBase入门-安装

hbase hadoop 分布式数据库存储

HBase是建立在Hadoop文件系统之上的分布式面向列的数据库，它是横向扩展的。它利用了Hadoop的文件系统（HDFS）提供的容错能力。 HBase提供对数据的随机实时读/写访问，可以直接HBase存储HDFS数据。准备安装JDK1.8+ 下载 hbase-2.0.0-beta-1-bin.tar.gz 包，并解压到 /apps/目录下。修改 conf/hbase-env.sh 文件，设置 JAVA_HOME 变量 export JAVA_HOME=/opt/jdk1.8.0_112 单机模式单

2018-05-14

1K0

没有更多了

社区活动

RAG七天入门训练营

鹅厂大牛手把手带你上手实战

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态