walker0316

文章/答案/技术大牛

发布

LV0

我关注的人

一例 Hive join 优化实战

由于 hive 与传统关系型数据库面对的业务场景及底层技术架构都有着很大差异，因此，传统数据库领域的一些技能放到 Hive 中可能已不再适用。关于 hive ...

用户1177713 2018-02-242018-02-24 16:37:34

hive

深入剖析Tez原理

https://hortonworks.com/blog/expressing-data-processing-in-apache-tez/

数据仓库践行者 2020-05-092020-05-09 15:28:00

hive、https、mapreduce、网络安全、大数据

Tez 优化参数

tez是hive的常用引擎之一，本文介绍tez常用的调试参数。主要是内存，map/reduce数量方面的调试。

AAACCC

腾讯｜开发工程师 (已认证)

2019-12-152019-12-15 16:13:12

mapreduce、bash、bash 指令

Hadoop（十四）MapReduce原理分析

　　上一篇我们分析了一个MapReduce在执行中的一些细节问题，这一篇分享的是MapReduce并行处理的基本过程和原理。

大道七哥 2019-09-102019-09-10 15:11:43

mapreduce、yarn、node.js

Hadoop 利用ToolRunner运行MapReduce

大多数人通常使用通过静态 main 方法执行驱动程序代码创建他们的 MapReduce 作业。这种实现的缺点是大多数特定的配置（如果有的话）通常都是硬编码的(例...

smartsi 2019-08-072019-08-07 09:53:05

mapreduce、jar、hadoop、编程算法

YARN任务监控界面Aggregate Resource Allocation指标解析

在YARN的原生任务监控界面中，我们经常能看到Aggregate Resource Allocation这个指标（图中高亮选中部分），这个指标表示该任务拥有的所...

九州暮云 2019-09-022019-09-02 16:14:52

yarn、node.js

maven引入本地jar包的方法

但是有些情况，比如需要引入第三方包，如快递鸟，支付宝，微信等jar包（当然有可能直接提供maven依赖）

陈灬大灬海 2019-09-232019-09-23 16:12:36

打包、maven、jar、xml、java

Java 命令行运行参数大全

javac 用法：javac <选项> <源文件> 其中，可能的选项包括： -g ...

汤高 2018-01-112018-01-11 15:31:55

java

如何使用Zookeeper实现HiveServer2的HA

之前Fayson介绍了《如何使用HAProxy实现HiveServer2负载均衡》，这种方案也有一些弊端，如HAProxy本身就是单点，虽然可以通过Keepal...

Fayson 2018-04-012018-04-01 19:34:07

hive、zookeeper

【Java 线程池】Java 创建线程池的正确姿势： Executors 和 ThreadPoolExecutor 详解

Executors的创建线程池的方法，创建出来的线程池都实现了ExecutorService接口。常用方法有以下几个：

一个会写诗的程序员 2020-06-032020-06-03 16:30:56

linux、java、缓存

Java多线程总结

对于进程和线程的概念可以简单的理解成一个包含关系，例如：一个人个体可以称为社会的一个进程，人可以同时做很多事情,这个称之为线程

付威 2020-01-212020-01-21 17:55:27

java、编程算法

Hive 元数据表结构详解

元数据是基础，这篇文章值得一读。本文介绍Hive元数据库中一些重要的表结构及用途，方便Impala、SparkSQL、Hive等组件访问元数据库的理解。 1、...

大数据和云计算技术 2018-03-082018-03-08 14:04:49

spark

最受欢迎的Linux发行版, Manjaro折腾全记录（超长超详细）

Manjaro到底有多受欢迎? DistroWatch是一个包含了各种Linux发行版及其他自由/开放源代码的类Unix操作系统（如OpenSolaris、M...

zhaoolee 27天前2025-08-13 10:29:32

编程算法

[spark streaming] 状态管理 updateStateByKey&mapWithState

SparkStreaming 7*24 小时不间断的运行，有时需要管理一些状态，比如wordCount，每个batch的数据不是独立的而是需要累加的，这时就需要...

UFO 2018-08-292018-08-29 17:27:58

其他

个人简介

暂未填写公司和职称
暂未填写个人简介
暂未填写技能专长
暂未填写学校和专业
暂未填写个人网址
暂未填写所在城市
加入社区时间：2020-04-26

个人成就

获得 1 次赞同

关注了：4关注者：0

walker0316

一例 Hive join 优化实战

深入剖析Tez原理

Tez 优化参数

Hadoop（十四）MapReduce原理分析

Hadoop 利用ToolRunner运行MapReduce

YARN任务监控界面Aggregate Resource Allocation指标解析

maven引入本地jar包的方法

Java 命令行运行参数大全

如何使用Zookeeper实现HiveServer2的HA

【Java 线程池】Java 创建线程池的正确姿势： Executors 和 ThreadPoolExecutor 详解

Java多线程总结

Hive 元数据表结构详解

最受欢迎的Linux发行版, Manjaro折腾全记录（超长超详细）

[spark streaming] 状态管理 updateStateByKey&mapWithState

个人简介

个人成就

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

walker0316

一例 Hive join 优化实战

深入剖析Tez原理

​Tez 优化参数

Hadoop（十四）MapReduce原理分析

Hadoop 利用ToolRunner运行MapReduce

YARN任务监控界面Aggregate Resource Allocation指标解析

maven引入本地jar包的方法

Java 命令行运行参数大全

如何使用Zookeeper实现HiveServer2的HA

【Java 线程池】Java 创建线程池的正确姿势： Executors 和 ThreadPoolExecutor 详解

Java多线程总结

Hive 元数据表结构详解

最受欢迎的Linux发行版, Manjaro折腾全记录（超长超详细）

[spark streaming] 状态管理 updateStateByKey&mapWithState

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

Tez 优化参数