spark 2.0.0与HIVE结合的测试
spark 2.0.0与HIVE结合的测试
sparkexpert
发布于 2018-01-09 16:05:55
发布于 2018-01-09 16:05:55
spark 2.0.0中，对hive的结合开发是否进行了改变，于是进行了如下测试。
最大的变化就是没有什么HiveContext了。直接就是一个SparkSession。
val spark = SparkSession
.builder()
.master("local[*]")
.appName("Spark Hive Example")
.config("spark.sql.warehouse.dir", warehouseLocation)
.enableHiveSupport()
.getOrCreate()其中有个命令就是：enableHiveSupport，提供了对HIVE的支持。非常方便。
于是进行测试，剩下的套路和以前都是一样的。顺利通过。
本文参与 腾讯云自媒体分享计划，分享自作者个人站点/博客。
原始发表：2016年09月12日，如有侵权请联系 cloudcommunity@tencent.com 删除
评论
登录后参与评论
推荐阅读