腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何
获取
作业
提交
时间
并在
Flink
应用程序
中
使用
?
、
、
、
、
我目前正在开发一个流处理
应用程序
,其中一个功能是
获取
在
提交
作业
的时区
时间
内发生的事件,
提交
作业
的
时间
+T。谢谢。
浏览 14
提问于2020-05-24
得票数 0
1
回答
如何
使
Flink
任务管理器在K8s上运行
、
、
我
使用
以下命令在本机K8s上
使用
会话模式创建了一个
Flink
集群:基于。 我能够向集群
提交
作业
并查看
Flink
UI。但是,我注意到,
Flink
只在
作业
提交
时创建一个任务管理器结荚,
并在
作业
完成后立即删除它。
浏览 10
提问于2022-08-30
得票数 1
回答已采纳
1
回答
在kubernetes上运行
flink
作业
、
我正在用最新版本的
flink
1.5在kubernetes上试用
flink
作业
。我的问题是
如何
在上面的
flink
集群上运行一个示例
应用程序
。提供了
如何
使用
flink
应用程序
构建docker镜像并将该
应
浏览 0
提问于2018-06-22
得票数 1
1
回答
如何
使用
单
Flink
应用程序
提交
多个
Flink
作业
、
假设我有一个
Flink
应用程序
来过滤、转换和处理流。有关数据流,请参阅下面的图像。用例的原因:为了有效地
使用
Java在任何给定的
时间
存储更多的事件,需要转换。在单个TaskManager上完成这三项操作也有一个缺点,即存储摄入的事件,而在这些事件
中
,几乎不需要80
浏览 3
提问于2020-08-02
得票数 0
回答已采纳
3
回答
关于卡夫卡
Flink
流的几个问题
、
我有一个Java
应用程序
午餐,一个
flink
作业
来处理Kafka流。在flinkEnv.execute("
flink
job name")
提交
作业
时,
应用程序
在这里挂起,因为
作业
将永远运行,以
获取
从kafka传入的流。 在这种情况下,
如何
从执行过程
中
返回
作业
id?只是想知道,
如何
得到flinkEnv.execute还没有回来的情况下的工作身份。
浏览 3
提问于2016-09-16
得票数 0
1
回答
在EMR上运行带有
flink
纱线会话的束流管道
、
、
、
我正在尝试从python SDK运行一个基本的字数束管道,
并在
AWS EMR上
使用
flink
yarn会话。我同时
使用
了
flink
runner和便携runner,得到了下面列出的两个不同的错误。这两种类型的运行器的
作业
都会显示在
flink
UI
中
,
并在
我的笔记本电脑上
使用
本地
flink
会话成功运行。PortableRunner,
作业
以BeamApp-root-0617202248
浏览 17
提问于2020-06-18
得票数 2
回答已采纳
1
回答
Flink
作业
自动
提交
的查询
、
、
我试图
使用
Flink
REST通过管道自动化
Flink
作业
提交
过程。要调用任何
Flink
Rest端点,我们应该了解接口IP。对于我的POC,在CLI上运行
flink
-session命令之后,我得到了IP,但是从代码
中
获得它的方法是什么呢? requests.post('
浏览 9
提问于2022-10-12
得票数 0
1
回答
Kubernetes
中
的
Flink
会话集群和
作业
提交
、
我们的团队在我们的K8S集群
中
设置了一个
Flink
会话集群。我们选择
Flink
会话集群而不是工作集群,因为我们有许多不同的
Flink
作业
,因此我们希望将
Flink
的开发和部署与我们的
作业
分离开来。我们的
Flink
设置包含: 我们在单独的存储库
中
开发
作业
,
并在
代码合
浏览 0
提问于2020-02-27
得票数 1
回答已采纳
1
回答
如何
在独立
flink
集群中
提交
flink
作业
时指定与守护进程日志文件不同的日志文件
、
当我启动一个
flink
独立集群时,它会在conf/log4j.properties文件中提到的文件
中
记录守护进程日志,当我在该集群中
提交
flink
作业
时,它会
使用
相同的属性文件来记录
应用程序
日志
并在
任务管理器上写入相同的日志文件我希望为在
flink
独立集群中
提交
的每个
应用程序
都有单独的日志文件。有什么办法可以做到这一点吗?
浏览 1
提问于2016-11-08
得票数 1
1
回答
EKS上的
Flink
集群
、
、
、
、
现在我试图在kubernetes主持这项工作,并希望在AWS中
使用
EKS。 我已经阅读了关于
如何
设置
flink
集群的官方
flink
文档。我尝试
使用
minikube在本地设置它,并启动了会话集群,并
提交
了工作正常的
作业
。我的问题是:1)在两个选项
中
,
作业
集群和会话集群,因为
作业
是流
作业
,应该保持对文件系统的监视,当新文件传入时,它应该流到目的地,在这种情况下,我可以
使用
作业<
浏览 9
提问于2020-01-08
得票数 0
回答已采纳
1
回答
纱线接头
作业
Flink
检查点的路径动态设置
、
、
我
使用
Yarn来运行
Flink
作业
。对于每个
Flink
作业
,我都要创建一个检查点。 我
提交
一个在我的Yarn集群
中
运行的
Flink
作业
。我有一个轮询
作业
,它检查一个
作业
是否在Yarn上失败并重新启动它。当
作业
再次
提交
时,Yarn为该
Flink
作业
创建一个新的application_id。
如何
配置重新
提交
浏览 0
提问于2018-05-22
得票数 0
回答已采纳
1
回答
通过Rest
提交
作业
,
并在
运行
中
的Kubernetes集群上部署
Flink
(本机方式)
、
我试图为
Flink
实现一个Rest客户端,通过Restful服务发送
作业
。我也想把
Flink
和Kubernetes结合起来。根据
Flink
文档,我决定
使用
“
应用程序
模式”作为部署模式。我已经实现了一个
作业
,并将其打包为jar。我已经在独立的
Flink
上测试过了。但是我的目标是通过
Flink
的Rest在
应用程序
模式下继续
使用
Kubernetes并部署我的
应用程序
。对于
应用程序
浏览 10
提问于2022-04-04
得票数 0
2
回答
如何
使用
Java代码将
作业
提交
给
Flink
集群?
、
、
、
我已经将包含
应用程序
代码的胖jar上载到
Flink
集群中所有节点的/lib文件夹
中
。我正在尝试从一个单独的java
应用程序
启动
Flink
作业
,但是找不到一个很好的方法。但是,这只允许您运行通过
作业
上载函数
提交
的
作业
。 我在
flink
客户端模块中看到了ClusterClient.java,但没有看到
如何
使用
它的任何示例。如果有人通过java代码成功地
提交
了
浏览 12
提问于2020-01-28
得票数 4
1
回答
如何
从会话模式切换到
Flink
应用部署的
作业
模式?
、
在配置文件(job-manager- config /
flink
-conf.yaml,task-manager-config/
flink
-conf.yaml,job-manager-config/zoo.cfg,...)为了将
Flink
应用程序
部署从会话模式更改为
作业
模式?此外,我们通过一个ansible角色在openshift上设置了
flink
集群,但不幸的是,它不是从ansible galaxy存储库
中
获取
的,所以我不
浏览 33
提问于2019-09-06
得票数 1
回答已采纳
1
回答
Kubernetes和Native Kubernetes上的
Flink
部署有何不同
、
、
我是Kubernetes的新手,并试图了解
Flink
在它们上的部署有何不同。如果对内部结构有任何了解,这将是非常有帮助的。
浏览 53
提问于2020-08-06
得票数 3
回答已采纳
1
回答
在
flink
中
测量
作业
执行
时间
在
使用
命令行将
作业
提交
给
Flink
时,是否有任何方法来测量Apache
中
的
作业
执行
时间
? PS。我希望
flink
API给我
时间
,而不是通过记录开始和结束
时间
来自己用bash度量它。
浏览 3
提问于2015-12-12
得票数 7
回答已采纳
1
回答
Flink
client不设置环境变量
、
我正在尝试
使用
Flink
客户端向Kubernetes集群(会话模式)
提交
一个
Flink
作业
。问题是,当我尝试
使用
Stringvalue=System.getenv(name)读取java代码
中
的环境变量时,它返回null。那么,当
使用
Flink</em
浏览 0
提问于2021-04-29
得票数 0
2
回答
如何
在
应用程序
模式下将java参数传递给
Flink
作业
工件
、
、
我刚刚将
Flink
从版本1.10升级到1.11。在1.11
中
,
Flink
提供了新功能,用户可以在Kubernetes上以
应用程序
模式部署
作业
。https://ci.apache.org/projects/
flink
/
flink
-docs-release-1.11/ops/deployment/kubernetes.html#deploy-session-cluster在V1.10
中<
浏览 74
提问于2020-09-02
得票数 1
回答已采纳
1
回答
为
Flink
开发工作
、
我有来自Kafka的实时数据,我想
使用
Flink
进行一些转换。
Flink
应用程序
群集是运行单个
作业
的专用群集。在这种情况下,您可以将
作业
部署到集群
中
,这样就不需要额外的
作业
提交
了。
作业
工件包
浏览 5
提问于2022-01-08
得票数 0
回答已采纳
1
回答
通过SCALA (非命令行)控制Apache-Kafka和
Flink
、
、
、
在SCALA代码中
使用
Kafka/
FLink
命令行-“命令”Starting
Flink
Se
浏览 7
提问于2017-10-09
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
热门
标签
更多标签
云服务器
ICP备案
对象存储
云直播
实时音视频
活动推荐
运营活动
广告
关闭
领券