腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

张浩的专栏

大家好，这里是张浩的专栏。感兴趣的小伙伴可以关注我和订阅我的专栏哦。

专栏作者

27

文章

56964

阅读量

24

订阅数

基于Avro文件和Avro Schema构建Avro Hive表

hive avro hdfs schema tools

使用avro-tools获取Avro文件的Schema avro-tools getschema hdfs://localhost:9000//user/hive/warehouse/retail_stage.db/orders/part-m-00000.avro >~/orders.avsc 将Avro文件的Schema文件上传到HDFS hdfs dfs -put orders.avsc /user/hive/warehouse/avro/schema/orders/ 创建Hive表 create ex

2019-02-22

2.5K0

CCA175 考试总结

今天(2019.01.29)考了CCA175考试，针对考试中一些考点和技巧做出总结

2019-01-29

2.2K25

Hive 创建自定义函数（UDF）

当Hive中的内置函数不满足我们需求的时候，我们可以自定义我们自己的Hive函数，来满足我们的需求。

2018-12-19

3.1K0

Hive的数据模型

hive 数据库 sql

在Hive中，表中的一个Partition对应表下的一个目录，所有的Partition的数据都存储在对应的目录中

2018-12-16

1.1K0

Hive CLI常用命令

清屏 Ctrl+L 或者 !clear 查看数据仓库中的表 show tables; 查看数据仓库中内置的函数 show functions; 查看表结构 desc tablename 查看HDFS上的文件 dfs -ls 目录执行Linux的命令 !命令执行HQL语句 SELECT * FROM tablename 执行SQL的脚本 source sql文件 Hive 静默模式 hive -S Hive 直接执行SQL hive -e <quoted-query-string> Hive 执行文件中

2018-12-15

1.6K0

Spark本地调试的使用Hive配置文件

在本地调试的时候发现把Hive的hive-site.xml放到项目的resources目录下，就可以让Spark读取hive-site.xml中的Hive的配置信息了。并且相关的HSQL可以直接执行在这个Hive之上，不会另外去生成metastore_db文件夹。

2018-12-05

2.3K0

Hive Metastore 使用MySQL存储

xml hive 存储云数据库 SQL Server 数据库

Hive的metastore默认是存储在Derby数据库里面，只能用于单元测试，并且一次只能有一个进程连接到metastore的数据库。所以在实际的应用中，需要将metastore存储在一些关系型数据库里面。

2018-11-16

1.7K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态