腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9037)
视频
沙龙
1
回答
是否
可以
在
apache
storm
中
动态地
在运
行时
添加
任务
,
而
不仅仅是
重新
平衡
执行器
、
、
我需要一个功能,
在
风暴
中
,我知道(基于文档)尚未实现。我需要
在运
行时
添加
更多的
任务
,
而
不需要拥有大量的初始
任务
,因为这可能会导致性能问题。因为每个executor运行多个
任务
不会增加并行级别-- executor总是有一个线程用于它的所有
任务
,这意味着
任务
在
executor上串行运行。我知道rebalance命令
可以
用来
在运
行时
浏览 5
提问于2017-02-27
得票数 0
1
回答
Apache
Storm
中
的再
平衡
执行程序
我试图
在运
行的
Apache
(0.9.5)拓扑
中
重新
平衡
螺栓的
执行器
数量。当我对Nimbus节点./
storm
rebalance MyTopology -n 2 -e GreenBolt=4执行命令时,它接受命令行输入,但是当我
在
Storm
中
查看时,执行者的数量不会改变。
是否
有一个限制,我不知道,就像一个再
平衡
不能增加总数的执行者,只把他们从一个螺栓到另一个?
浏览 0
提问于2015-08-11
得票数 1
回答已采纳
2
回答
Apache
storm
在
不同的机器上执行螺栓(指定节点)
、
我想创建一个拓扑,其中一个喷嘴发出单词,
而
一个基于这些单词的螺栓创建一个名为word的目录。请建议一种配置
storm
的方法来实现这一点。 我还想知道,如果一个螺栓是足够的,或者如果部署了两个螺栓,如何管理一个螺栓
在
一台机器上运行,而在另一台机器上运行。
浏览 3
提问于2015-02-22
得票数 0
1
回答
覆盖Java螺栓/喷口中的
storm
.yaml /设置
需要帮助调优
apache
风暴。我已经
在
nimbus服务器上运行了一个命令来增加喷管
执行器
&以及一个螺栓。风暴再
平衡
TopologyName -e喷口/或螺栓=我运行了这个程序,没有看到web界面
中
的任何变化。还有一种方法
可以
覆盖
storm
.yaml文件
中
的参数吗? topology.max.spout.pending: 100
浏览 1
提问于2015-08-30
得票数 0
3
回答
如何调整
storm
中
的并行度提示
、
在
storm
中使用“并行提示”来并行化正
在运
行的
storm
拓扑。我知道有一些概念,比如工作进程、
执行器
和
任务
。让并行度提示尽可能大,以便尽可能多地并行化拓扑
是否
有意义?我的问题是如何为我的
storm
拓扑找到一个完美的并行提示数。它是取决于我的
storm
集群的规模,还是更像是拓扑/作业特定的设置,不同的拓扑会有所不同?或者这取决于两者?
浏览 3
提问于2013-12-04
得票数 16
回答已采纳
3
回答
如何在风暴
中
获得
任务
号和非执行者身份?
我想知道用什么方法来获取
任务
信息,
而
不是执行者信息。我
可以
做执行者号>
任务
号,看来
任务
号是无用的。我已经
在
getComponentTasks()中使用了Topologycontext,但是我只能得到执行者。 有人能帮我吗?
浏览 11
提问于2015-12-16
得票数 1
回答已采纳
3
回答
Esper和
Apache
Storm
的区别?
Esper和
Apache
Storm
有什么区别?我很困惑,我以为Esper提供了同样的功能。
浏览 8
提问于2017-03-07
得票数 3
回答已采纳
2
回答
风暴:什么时候使用setNumTasks?
文档说,默认情况下每个
执行器
都有一个
任务
。 如果我有一个“昂贵的”db
任务
(调用外部dbs需要时间)
在
螺栓
中
运行,两边都有“快速”
任务
,那么我应该为此
添加
额外的
任务
吗?
浏览 4
提问于2015-06-15
得票数 4
回答已采纳
1
回答
风暴并行
中
的“
任务
”是什么?
、
、
我正试图通过关注"“这篇伟大的文章来学习推特风暴 然而,我对“
任务
”的概念有点困惑。
任务
是组件(喷口或螺栓)的运行实例吗?一个具有多个
任务
的执行者实际上是说同一个组件被
执行器
执行了多次,我是正确的吗?此外,
在
一般的并行性意义上,
Storm
会为一个喷口或螺栓生成一个专用线程(
执行器
),但是具有多
任务
的
执行器
(线程)对并行性有什么贡献呢?我认为
在
一个线程中有多个
任务
,因为一个线程是按顺序执行的
浏览 3
提问于2013-06-23
得票数 50
回答已采纳
1
回答
Apache
Storm
将
任务
分配给同一个executor线程
、
我一直
在
探索
Apache
Storm
作为我的一个用例。Spout将从我自己的kafka实现
中
读取数据,并将其传递给bolts。我怀疑由于这个原因,可能会发生上下文切换,并且由于cpu线程缓存未命中,可能会增加延迟。 我的假设
是否</
浏览 4
提问于2021-02-17
得票数 0
2
回答
Storm
UI未启动
、
、
我正在将
apache
-
storm
版本从1.1.1升级到2.0.0。我已经
在
我的代码库和pom.xml
中
做了必要的更改。整个项目正在完美地构建,拓扑也开始了,没有任何例外。= -Dstorm.home=/home/user/apps/
apache
-
storm
-2.0.0 -Dstorm.log.dir=/home/user/apps/
apache
-
storm
-2.0.0
浏览 30
提问于2019-07-31
得票数 1
回答已采纳
2
回答
风暴
中
的执行者
、
、
我有一个关于
Storm
功能的问题。假设我有一个喷口,它读取一个csv文件,并逐个释放记录。也就是说,它一次发出100个记录到螺栓上。我的问题是,当螺栓接收到一块碎片时,
是否
只会发送给一个执行者,还是为了并行性而将其分配给不同的执行者。 注:螺栓有5个
执行器
。
浏览 4
提问于2015-07-29
得票数 0
回答已采纳
4
回答
当您
添加
更多节点时,
Storm
如何处理字段分组?
、
只需阅读更多关于风暴的详细信息,就会发现它能够对字段进行分组,因此,例如,如果您将每个用户的tweet数在哪里,并且您有两个字段分组为用户id,那么相同的用户id将被发送到相同的
任务
中
。因此
任务
1
可以
在内存中有以下计数: bob: 10,alice: 5如果我
在
集群
中
添加
了一台新机器来增加容量并运行
重新
平衡
,那么内存
中
的计
浏览 6
提问于2013-12-07
得票数 2
回答已采纳
6
回答
风暴用户界面不工作
我们
在
伪模式下执行
Storm
拓扑。但是
Storm
没有显示正
在运
行的拓扑信息。
重新
启动的暴风UI进程也没有用。
是否
需要特殊的配置来显示
storm
中
运行的拓扑?
浏览 3
提问于2015-02-12
得票数 2
回答已采纳
1
回答
哪个类
在
风暴
中
实例化每个螺栓和喷口的线程数?
、
我需要知道
Storm
如何管理每个螺栓
中
的并行工作人员的数量。IrichBolt类和IRichSpout类都不实现可运行类。我真的需要知道风暴是如何处理多线程的?
浏览 2
提问于2013-11-30
得票数 3
回答已采纳
2
回答
Parallel.for()循环创建错误的线程ID
、
、
Windows 7 我使用了ParallelOptions()类,这个类的"MaxDegreeOfParallelism“属性设置为5,我
在
日志文件
中
记录了"Thread.CurrentThread.ManagedThreadId”,以检查
是否
在运
行时
创建了5个线程。我
在
两个不同的环境
中
测试了这个应用程序。当应用程序
在
开发它的环境
中
运
行时
,
浏览 4
提问于2011-10-28
得票数 4
回答已采纳
2
回答
在运
行时
在
应用程序
中
添加
类
,如下所示: public abstract addAlgo(Object o); 我希望由不同的人实现不同的Foo,以便
在运
行时
由我的软件
动态地
保存和运行我有一个主修班如下: Foo f;我希望我的用户
在运
行时
给出他们的Foo实现。我面临以下困难: 如何在Main类
浏览 2
提问于2014-05-24
得票数 0
1
回答
在
Azure Kubernetes服务上将所有TCP和UDP端口从负载均衡器转发到nginx入口
、
、
我正在尝试使用kubernetes实现TCP/UDP网关,我希望
动态地
打开和关闭许多端口。containerA之间的连接,我们将提供一个新容器( containerB ),但是使用相同的端口8080,我们将在负载均衡器
中
添加
一个新端口(端口-> 1.1.1.1:9092 -> nginx流9092如果不时
添加
新端口,然后
添加
,这种行为是不可取的。 根据我的观察,当向nginx configmap
添加
一个新端口时,更改将被成功地
重新
加载,并且端口将被
浏览 2
提问于2019-11-27
得票数 2
2
回答
运
行时
修改Spring Cloud Gateway路由
我想要在服务器运
行时
添加
或删除Spring Cloud Gateway路由。我正在使用初始化网关路由。这是完美的工作。但是,现在我想在Spring Cloud Gateway服务器运
行时
修改、
添加
和删除路由。我
可以
看到包含我的路由,但我看不到修改其内容的方法。尽管我
在
执行器
中看到了一些
添加
功能,但我需要使用代码来
添加
它们,
而
不是REST调用。
在
我的设置
中
,是空的,所以我看不到<em
浏览 5
提问于2020-10-01
得票数 0
2
回答
操作/函数的通用列表
、
、
我想知道
是否
有可能创建某种通用的操作/函数列表,每个操作/函数都有不同的输入/输出参数。我需要这样做的原因是,我有一个
执行器
,它的
任务
是从API获取数据,该
执行器
中
的每个方法都转到该API
中
的不同路径,我希望能够调度这些请求,这样我就不会重载该API (如果我超过了它们的请求阈值,它们就会阻塞我因此,每次调用该executer
中
的方法时,我都会将该方法及其参数
添加
到一个列表
中
,另一个线程将在该列表
浏览 2
提问于2015-08-16
得票数 3
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Flink与storm的主要区别译文
Heron:来自Twitter的新一代流处理引擎应用篇
像Apache Storm一样简单的分布式图计算
Python中的元类和元编程是什么
想成为大数据开发工程师,你必须掌握的开发流程图是这样的
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券