腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

软件开发-青出于蓝

专栏作者

322

文章

453963

阅读量

38

订阅数

Hive on spark下insert overwrite partition慢的优化

spark mapreduce node.js hive

这几天发现insert overwrite partition运行的很慢，看了下是hive on spark引擎，这引擎平时比mapreduce快多了，但是怎么今天感觉比mapreduce慢了好几倍，运行了1h多还没运行完。

2020-08-10

2.5K0

Hive之导出数据到宿主机

hive list 数据

直接上代码，如下List-1，会将student_info的数据导入到/tmp/student_info文件中

2020-02-12

6300

Sqoop之导入Mysql数据到Hive出现ASCII

云数据库 SQL Server hive 数据库 sql

问题是这样的，从Mysql中导入数据到Hive中，Mysql中数据是"T2"，到Hive中后，发现变为"54 32"，咦，怎么乱码了，感觉这像ASCII编码。

2019-10-26

1.1K0

Hive之命令行修改表注释

sql hive list 关系型数据库

最近遇到一个需求，在不重建表的情况下，修改表的注释，hive有没有类似关系型数据库的SQL命令来修改呢，找了下，亲测有效，如下List-1

2019-09-18

2.1K0

Sqoop之导入到Hive时特殊字符导致数据变乱

Sqoop从关系型数据库导入数据到Hive时，发现数据量增多了，查找之后发现是由于源数据中含义\r\t\n特殊字符的数据，这样Hive遇到之后就将其视为换行，所以导入到Hive后数据条数增多了很多，问题找到了，怎么解决呢.

2019-09-18

1.3K0

Hive远程模式安装

hive 云数据库 SQL Server 数据库 sql hadoop

Hadoop的安装略，JDK的安装略。安装在192.168.33.33这台机器上。

2019-07-30

1.2K0

Presto之分布式安装查询Hive

node.js hadoop hive

工作需要使用Presto，记录下。Presto需要Hive，安装Hive的步骤略，可参考我的这篇博客。

2019-07-29

1.3K0

Hive表与hdfs文件关联原

/opt/data/alarm是个目录，它下面有文件data_alarm，内容如下，各个字段间用\t隔开。

2019-04-15

1.2K0

Hive on spark的搭建记录原

hive xml bash bash 指令 hadoop

注：Hadoop-2.7.7、Hive-2.1.1、spark-1.6.0-bin-hadoop2.6，操作系统是Ubuntu18 64bit。最近做Hive on spark的任务，记录下。

2019-04-15

1.3K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态