腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

暴走大数据

专栏作者

298

文章

539091

阅读量

99

订阅数

Flink重点难点：Flink任务综合调优(Checkpoint/反压/内存)

flink 大数据 jvm 数据处理数据结构

我们在Flink重点难点：状态(Checkpoint和Savepoint)容错与两阶段提交一文中对Flink的Checkpoint做过详细的介绍。

大数据真好玩

2021-11-23

5.2K0

Flink 1.10+之改进的TaskManager内存模型与配置

jvm 缓存 flink 大数据容器

Flink社区在FLIP-49提出了新版统一的TaskManager内存模型及配置，这也是Flink 1.10版本最主要的改进与优化点之一。根据社区的说法，该proposal致力于解决1.9版本及之前的TM内存配置的三个缺点：

大数据真好玩

2021-11-05

6090

Apache Spark 内存管理(堆内/堆外)详解

文件存储存储 jvm 缓存 spark

本文旨在梳理出Spark内存管理的脉络，抛砖引玉，引出读者对这个话题的深入探讨。本文中阐述的原理基于Spark 2.1版本，阅读本文需要读者有一定的Spark和Java基础，了解RDD、Shuffle、JVM等相关概念。

大数据真好玩

2021-09-18

1.1K0

学不会去当产品吧？Flink实战任务调优

flink 大数据 jvm

在大数据领域我们都知道，开发是最简单，任务的合理调优、问题排查才是最重要的。我们在之前的文章《Flink面试通关手册》中也讲解过，作者结合线上出现的一些问题，总结了一些任务调优需要注意的点。

大数据真好玩

2021-01-26

7210

万字精美图文 | JVM学习面试大总结

jvm java 编程算法 linux

本JVM系列属于本人学习过程当中总结的一些知识点，目的是想让读者更快地掌握JVM相关的知识要点，难免会有所侧重，若想要更加系统更加详细的学习JVM知识，还是需要去阅读专业的书籍和文档。

大数据真好玩

2020-02-19

3070

以后千万别面试卡壳 | Hive调优的12种方式

mapreduce jvm hive 大数据

distinct会将b列所有的数据保存到内存中，形成一个类似hash的结构，速度是十分的块；但是在大数据背景下，因为b列所有的值都会形成以key值，极有可能发生OOM

大数据真好玩

2020-02-11

9170

Flink1.9.0源码调试介绍&增加调试超时时间

大数据 yarn jvm node.js 编程算法

在Flink1.9.0源码研究过程中，调试源码是一个非常重要的手段，通过查看真实的运行数据和变量，来了解源码内部运行逻辑

大数据真好玩

2019-12-05

2.7K0

如何做好 Elasticsearch 性能指标监控

Elasticsearch Service 缓存 jvm 搜索引擎

场景描述：本文是较早的一篇关于Elasticsearch性能指标监控的博文，内容总结全面，作者 Emily Chang，原文地址：https://www.datadoghq.com/blog/monitor-elasticsearch-performance-metrics，由杨文波同学翻译。

大数据真好玩

2019-10-23

1.5K0

Java 的 Checked 和 Unchecked Exception

jvm 打包 ide 编程算法

本文作者：王蒙(Matt) http://matt33.com/2016/12/13/java-exception/

大数据真好玩

2019-08-21

5.7K0

没有更多了

社区活动

RAG七天入门训练营

鹅厂大牛手把手带你上手实战，赢鹅厂证书、公仔好礼！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态