腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

加米谷大数据

加米谷大数据实战经验分享，大数据项目分享，大数据开发培训等

专栏作者

296

文章

345638

阅读量

61

订阅数

带你去看常见的3种大数据编程语言

java scala hadoop jvm

各位同学对于大数据编程语言知道多少呢？今天加米谷带着大家一起来看看常见的3种大数据编程语言，一起来看看他们的功能与特征。

加米谷大数据

2020-06-02

2.3K0

技术干货 | Hive模式设计

jvm hive 存储

过多使用分区可能导致非必须的Hadoop文件和文件夹，最终会超出NameNode对系统云数据信息的处理能力。默认，每个task都是一个新的JVM实例，都需要开启和销毁的开销。对于小文件（小于一个块的大小），每个文件都会对应一个task。会导致JVM开启和销毁的时间中可能会比实际处理数据的时间消耗要长。理想的分区方案部应该导致产生太多的分区和文件夹目录，并且每个目录下的文件应该足够大，应该是文件系统中块大小的若干倍。不能够找到好的、大小相对合适的分区方式的话，可以考虑使用分桶表数据存储。 Hive没有主

加米谷大数据

2018-04-02

8080

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态