腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
大数据进阶
专栏作者
举报
95
文章
136939
阅读量
19
订阅数
订阅专栏
申请加入专栏
全部文章(95)
大数据(27)
java(15)
编程算法(12)
flink(10)
node.js(9)
kafka(9)
sql(7)
数据库(6)
容器镜像服务(6)
http(6)
容器(6)
linux(5)
unix(5)
文件存储(5)
dubbo(5)
https(5)
ide(4)
yarn(4)
网络安全(4)
hadoop(4)
zookeeper(4)
javascript(3)
scala(3)
xml(3)
jar(3)
apache(3)
网站(3)
spark(3)
hive(3)
uml(3)
windows(3)
数据结构(3)
php(2)
go(2)
json(2)
git(2)
github(2)
spring(2)
企业(2)
存储(2)
开源(2)
缓存(2)
jdk(2)
jvm(2)
tcp/ip(2)
接口(2)
系统(2)
费用中心(1)
ios(1)
mac os(1)
iphone(1)
python(1)
ruby(1)
servlet(1)
html(1)
ecmascript(1)
android(1)
云数据库 SQL Server(1)
mapreduce(1)
日志服务(1)
TDSQL MySQL 版(1)
消息队列 CMQ 版(1)
SSL 证书(1)
腾讯云测试服务(1)
kubernetes(1)
分布式(1)
运维(1)
压力测试(1)
shell(1)
正则表达式(1)
面向对象编程(1)
jenkins(1)
socket编程(1)
安全(1)
hbase(1)
es(1)
Elasticsearch Service(1)
数据湖(1)
argv(1)
cas(1)
config(1)
data(1)
function(1)
identity(1)
lambda(1)
lock(1)
map(1)
median(1)
ps(1)
setter(1)
storm(1)
stream(1)
supervisor(1)
synchronized(1)
sys(1)
ui(1)
volatile(1)
编译器(1)
测试(1)
基础(1)
命令行(1)
排序(1)
数据(1)
算法(1)
搜索文章
搜索
搜索
关闭
flinkx数据同步
flink
大数据
hadoop
javascript
json
git clone https://github.com/DTStack/flinkx.git
yiduwangkai
2021-11-22
1.9K
0
spark submit读写hudi
hive
kafka
hadoop
spark
javascript
数据导入:cat batch_1.json | kafkacat -b localhost:9092 -t stock_ticks -P
yiduwangkai
2021-09-10
1.1K
0
hadoop ha搭建
node.js
hadoop
修改zoo.cfg,创建对应的目录,在data目录下创建myid文件,一切完毕后进行启动
yiduwangkai
2020-04-24
627
0
flink系列(3)-基于k8s的环境搭建
xml
hadoop
大数据
tcp/ip
前面写了一些flink的基础组件,但是还没有说过flink的环境搭建,现在我们来说下基本的环境搭建 1. 使用StatefulSet的原因 对于Flink来说,使用sts的最大的原因是pod的hostname是有序的;这样潜在的好处有 hostname为-0和-1的pod可以直接指定为jobmanager;可以使用一个statefulset启动一个cluster,而deployment必须2个;Jobmanager和TaskManager分别独立的deployment pod由于各种原因fail后,由于StatefulSet重新拉起的pod的hostname不变,集群recover的速度理论上可以比deployment更快(deployment每次主机名随机) 2.使用StatefulSet部署Flink 2.1 docker的entrypoint 由于要由主机名来判断是启动jobmanager还是taskmanager,因此需要在entrypoint中去匹配设置的jobmanager的主机名是否有一致 传入参数为:cluster ha;则自动根据主机名判断启动那个角色;也可以直接指定角色名称 docker-entrypoint.sh的脚本内容如下:
yiduwangkai
2019-09-17
2.4K
0
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
立即发文
Python精品学习库
代码在线跑,知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档