腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

软件开发-青出于蓝

专栏作者

322

文章

452327

阅读量

38

订阅数

Hive on spark下insert overwrite partition慢的优化

spark mapreduce node.js hive

这几天发现insert overwrite partition运行的很慢，看了下是hive on spark引擎，这引擎平时比mapreduce快多了，但是怎么今天感觉比mapreduce慢了好几倍，运行了1h多还没运行完。

2020-08-10

2.5K0

Spark集群安装方式2 原

spark hadoop bash bash 指令 php

环境: jdk1.8、hadoop-2.7、spark-1.6、三台centos7(如下List-1所示)

2019-05-06

3160

Spark集群安装原

spark node.js bash bash 指令 ssh

Spark的版本1.6.0，Scala的版本2.12，jdk版本1.8。最近使用spark，在这里记录下。

2019-04-15

4680

Spark之伪分布式搭建、伪分布式Hadoop、Hive安装

spark https yarn 网络安全 node.js

之后进入$SPARK_HOME/sbin下，执行start-all.sh，可以看下是否启动成功，之后去看localhost:8080，可以看到spark的界面。

2019-04-15

6790

Spark之Ubuntu18上安装Spark单机环境

在浏览器中输入http://192.168.43.214:4040就可看到UI界面了。

2019-04-15

1.1K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态