腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
kk大数据
专栏成员
举报
116
文章
219384
阅读量
43
订阅数
订阅专栏
申请加入专栏
全部文章(116)
大数据(51)
编程算法(22)
flink(19)
java(16)
数据库(15)
sql(15)
hive(12)
kafka(12)
存储(11)
spark(10)
node.js(9)
分布式(9)
python(8)
api(8)
mapreduce(7)
缓存(7)
数据处理(7)
unix(6)
apache(6)
hadoop(6)
数据分析(6)
文件存储(5)
jvm(5)
scala(4)
linux(4)
网站(4)
shell(4)
网络安全(4)
zookeeper(4)
windows(4)
javascript(3)
css(3)
打包(3)
ide(3)
jar(3)
http(3)
rpc(3)
数据结构(3)
https(3)
微服务(3)
自动驾驶(2)
bash(2)
json(2)
git(2)
github(2)
批量计算(2)
yarn(2)
ssh(2)
面向对象编程(2)
tcp/ip(2)
安全(2)
数据湖(2)
join(2)
区块链(1)
数据挖掘(1)
机器学习(1)
c++(1)
xml(1)
html(1)
云数据库 SQL Server(1)
云数据库 Redis(1)
tomcat(1)
maven(1)
windows server(1)
bash 指令(1)
专用宿主机(1)
云数据库 MongoDB(1)
vr 视频解决方案(1)
游戏(1)
开源(1)
wordpress(1)
sql server(1)
jdbc(1)
cdn(1)
dubbo(1)
socket编程(1)
物联网(1)
processing(1)
云计算(1)
实时数仓(1)
Elasticsearch Service(1)
数据集成(1)
大数据存储(1)
class(1)
data(1)
debug(1)
driver(1)
endpoint(1)
exit(1)
hash(1)
lag(1)
load(1)
lock(1)
partition(1)
ps(1)
rank(1)
return(1)
row(1)
system(1)
task(1)
wait(1)
window(1)
worker(1)
连接(1)
排序(1)
数据(1)
同步(1)
线程(1)
性能(1)
搜索文章
搜索
搜索
关闭
浅谈 Flink 窗口
mapreduce
编程算法
flink
windows
大数据
https://blog.csdn.net/mynameisgt/article/details/124223193
kk大数据
2023-03-03
450
0
Spark 源码(8) - Master分配资源并在Worker上启动Executor ,逐行代码注释版
linux
编程算法
spark
上一次阅读到了 SparkContext 初始化,继续往下之前,先温故一下之前的内容。
kk大数据
2021-11-05
637
0
Spark 源码(4) - Worker 启动流程
编程算法
shell
网站
今天来看看 Worker 的启动流程,Worker 的启动是从 Shell 脚本开始的,Shell 脚本中就是从 Worker 类的 main 方法开始执行的,所以就从 main 方法开始看。
kk大数据
2021-10-12
467
0
面试大数据必问的一道题,这次不死记硬背,直接看源码,惊艳一下面试官
编程算法
bash
大数据
那每次准备面试前,自然是先百度一番,复制一下答案,1 2 3 4 5 6 点,背一背完事。但是面试完,还是不了解 HDFS 写数据流程内部究竟是怎么实现的。
kk大数据
2021-04-22
553
0
NameNode 用了什么神秘技术来支撑元数据百万并发读写的
编程算法
大数据
zookeeper
我们都知道,HDFS 是大数据存储的基石,所有的离线数据都存储在 HDFS 上,而 NameNode 是存储所有元数据的地方(所谓元数据就是描述数据的数据,比如文件的大小,文件都存储在哪些 DataNode 上,文件在目录树的位置等),所以 NameNode 便成为了 HDFS 最关键的部分。
kk大数据
2021-03-30
627
0
心跳在分布式系统中多重要?谈一谈 DataNode 如何向 NameNode 发送心跳的
编程算法
心跳是分布式技术中常用的技术手段。心跳,顾名思义,就是以固定的频率向其他节点汇报当前节点状态的方式。收到心跳,一般可以认为发送心跳的这个节点在当前的网络拓扑中是良好的。
kk大数据
2021-03-30
1.3K
0
我发现了 高性能异步编程 和 实时流模型 那千丝万缕的联系!
自动驾驶
编程算法
java
flink
大数据
本次我们来实现一个支持百万并发连接数的采集服务器,并且找到异步+ NIO 的编程方式和实时流模型的那些千丝万缕的联系。
kk大数据
2021-03-15
385
0
Flink 是如何将你的代码生成 StreamGraph 的(下篇)
css
数据结构
编程算法
python
上次说到了所有的算子都会转化成 transformation ,并放到一个 List 列表中,那么今天我们开始遍历这个列表,来生成 StreamGraph。
kk大数据
2021-03-13
1.1K
0
阅读 Flink 源码前必会的知识 - Java 8 异步编程 CompletableFuture 全解析
javascript
node.js
编程算法
unix
api
通常来说,程序都是顺序执行,同一时刻只会发生一件事情。如果一个函数依赖于另一个函数的结果,它只能等待那个函数结束才能继续执行,从用户角度来说,整个程序才算执行完毕。
kk大数据
2021-03-13
1.1K
0
Flink Client 实现原理与源码解析(保姆级教学)
flink
大数据
面向对象编程
编程算法
ide
这次我们的目的是,在本地的 IDEA 中去 debug flink-clients 代码,然后远程提交给 flink standalone 集群上去执行,看一看 flink 客户端在提交代码之前都干了什么。
kk大数据
2021-02-07
2.4K
0
Flink SQL 核心概念剖析与编程案例实战
sql
flink
大数据
文件存储
编程算法
本次,我们从 0 开始逐步剖析 Flink SQL 的来龙去脉以及核心概念,并附带完整的示例程序,希望对大家有帮助!
kk大数据
2021-01-12
678
0
图解 Flink Checkpoint 原理及在 1.11 版本的优化
flink
大数据
编程算法
node.js
上次发文,提到了 Flink 可以非常高效的进行有状态流的计算,通过使用 Flink 内置的 Keyed State 和 Operator State,保存每个算子的状态。
kk大数据
2020-12-29
2.5K
0
一句话说清楚 CountDownLatch 和 CyclicBarrier 的区别
node.js
javascript
编程算法
日常工作中,经常会碰到这样的场景:有时候数据量特别大,任务量特别多,我们通常会开启多线程去分批执行任务,在所有任务执行完了之后,再去执行接下来的作业。
kk大数据
2020-09-23
3.2K
0
【编程语言】Java虚拟机垃圾回收算法,2020年的面试你准备好了吗
编程算法
java
熟悉 Java 的朋友一定知道 Java 虚拟机了,熟练掌握 Java 虚拟机是一个高级工程师的基础素养哦,当然面试官在问到 Java 虚拟机的时候,一定会问到 垃圾回收算法的。
kk大数据
2020-02-14
390
0
从硬件角度看 Java 高并发编程bug的源头
缓存
面向对象编程
java
编程算法
ide
高并发编程一直是 Java 领域的高阶内容,有时候 bug 诡异的出现,又诡异的消失,很难重现,很难追踪,让人抓狂。
kk大数据
2020-02-14
717
0
Flink-Kafka 连接器及exactly-once 语义保证
大数据
kafka
文件存储
编程算法
在 Flink 中,Source 代表从外部获取数据源,Transfromation 代表了对数据进行转换操作,Sink 代表将内部数据写到外部数据源
kk大数据
2019-12-18
1.6K
0
Flink 16种数据转换操作,满足所有数据处理场景
mapreduce
编程算法
数据转换(Transformation),即通过从一个或多个 DataStream 生成新的DataStream 的过程,是主要的数据处理的手段。Flink 提供了多种数据转换操作,基本可以满足所有的日常使用场景。
kk大数据
2019-10-15
3K
0
Flink 数据类型 以及 第一阶段小结
大数据
java
编程算法
python
在 Flink 中,数据类型的描述信息都是定义在 TypeInformation 中,比较常用的 TypeInformatica 有 BasicTypeInfo、TupleTypeInfo、CaseClassTypeInfo、PojoTypeInfo 等
kk大数据
2019-10-08
941
0
Hive 系列 之 基础知识和操作合集
编程算法
大数据
hive
数据库
sql
今天,朋友圈和公众号被鸿蒙刷屏,作为开发者,由衷感叹人类科技已经发展得这么先进了,基于微内核的全场景分布式OS,虽然不太懂是什么意思,但仍然觉得高大上。
kk大数据
2019-08-14
617
0
分布式弹性数据集(下)
spark
缓存
java
编程算法
文章概述:RDD的其他几个知识点,依赖关系(Dependencies)、检查点(Checkpoint)、存储级别(Storage Level)和迭代函数(Iterator)。
kk大数据
2019-08-14
390
0
点击加载更多
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪,探寻中国数据库50年的发展历程
立即查看
Python精品学习库
代码在线跑,知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档