apache storm是否允许处理存储在HDFS上的大量文件？ 知道我的目标是有一个实时响应(秒或毫秒)， 或者apache storm仅专用于流式处理!！ 谢谢
浏览 9提问于2019-01-08得票数 0
回答已采纳
我在谷歌上搜索了一下，没有找到任何关于如何从trident storm连接到memory grid的信息/文档。
浏览 5提问于2015-01-01得票数 0
3回答
层板对风暴
、、、、
我正在设计一个原型实时监视器，用于处理相当大数量(>30g/天)的流式数字数据。我想用Clojure编写这篇文章，因为该语言似乎非常适合这种“观察者+状态机”系统，而这种系统很可能会以这种方式结束。我为框架找到的两位主要候选人是Lamina和Storm。也有Riemann和Pulse，但前者似乎更像是一个完整的解决方案，而不是一个框架，我宁愿现在还不致力于最终的设计；Pulse的回购看起来有点缺乏维护吗？Storm似乎更成熟，但是Lamina看起来更容易组合和"Clojureic
浏览 7提问于2013-06-17得票数 5
回答已采纳
我对使用storm感到困惑。我将使用其流式数据来测量数据源的状态。通过合并某些字段来计算状态，这些字段可以在不同的时间间隔内实现。这就是为什么我需要保存字段来衡量数据源的状态。
浏览 6提问于2017-03-28得票数 0
我需要轮询一个表，并为Apache Storm中用于流式传输的每一行创建一个元组。
我在哪里可以找到一个例子？
浏览 0提问于2015-04-02得票数 0
1回答
我正在考虑把像Storm这样的东西放在两者之间，但也找到了像Flafka这样的选项。
有什么方法存在，使用它们的积极/消极因素是什么？
浏览 0提问于2015-12-21得票数 1
我正在搜索一个分布式实时计算系统，该系统将从kafka服务器收集数据，以便处理数据，然后将其存储在ElasticSearch中。
浏览 0提问于2016-07-11得票数 0
回答已采纳
2回答
使用案例如下:将车辆传感器数据流式传输到Kafka。然后，必须对这些传感器数据进行转换(即，将protobuf反序列化为人类可读的数据)，并将其存储在HBase中。1)您推荐哪个工具集(如Kafka --> Flume --> HBase、Kafka --> Storm --> HBase、Kafka --> Spark Streaming --> HBase、Kafka
浏览 1提问于2015-08-18得票数 6
1回答
我想要连续地将日志流式传输到HDFS，并解析数据并存储在Hive中以供进一步分析。1) Apache KAFKA或Apache Flume是正确的选择请提供任何建议，以及此类问题陈述的任何信息。
谢谢
浏览 1提问于2016-11-10得票数 0
将数据从Couchbase流式传输到R Shiny最简单的方法是什么--我可以使用CB的N1QL来实现吗？我是否需要使用Storm或Spark Streaming，或者我可以使用R的"stream“库？
浏览 7提问于2017-08-15得票数 0
我偶然发现声称将Samza与Storm进行了对比，但它似乎只解决了实现细节问题。
这两个分布式计算引擎的用例有什么不同？每个工具适合哪种类型的工作？
浏览 0提问于2015-03-18得票数 31
回答已采纳
您知道在Apache Storm中，您可以让Spout将数据流式传输到多个螺栓。有没有办法在Apache Spark中做类似的事情？x将处理数据以计算一种类型的指标(在我的情况下，它将计算用户活动)，而y将计算另一种类型的指标(在我的情况下，这将是基于不同设备的检查活动)。
有人能告诉我这是怎么在Spark中实现的吗？
浏览 0提问于2015-09-24得票数 4
我想知道是否有任何spout实现将数据从HDFS流式传输到Storm (类似于HDFS的Spark streaming )。我知道有用于将数据写入HDFS (和)的螺栓实现，但反过来我却找不到。
浏览 0提问于2015-05-14得票数 3
1回答
我们正在寻找是否可以使用map-reduce / Hadoop框架来实现视频转换，因为它是完全分布式的。
使用map-reduce进行视频实时转换是个不错的选择吗？如果是这样的话，如何实现呢？
浏览 2提问于2014-03-17得票数 1
对于ElasticSearch、Neo4J等消费者来说，这是一个很好的Kafka / Storm用例吗？此外，我还想从初始流中为我的监控系统派生一些信息，这样我也可能有一个监控消费者。如果这个用例看起来像Kafka和Storm这样的东西，那么这更多的是一个架构问题。谢谢Philipp
浏览 14提问于2016-08-23得票数 0
比较Flink和Spark Streaming，Flink和Storm，Storm和Heron有很多问题。这个问题的来源是Apache Flink和Twitter Heron都是真正的流处理框架(而不是像Spark Streaming这样的微批处理框架)。Storm已于去年被Twitter淘汰，他们改用Heron (基本上是Storm重新制作的版本)。在Flink和Flink vs Spark上有斯利姆·巴尔塔吉的精彩演讲：
Ilya Ganelin对各种流媒体框架的出
浏览 27提问于2016-06-05得票数 9
这是否意味着Storm的“并行计算”集中在“并行机器”上。正如Miguno所提到的，它为我们提供了扩展集群机器的灵活性。然而，计算机正在变得越来越多的CPU核心集成，如果我们使用并行计算对集群中的每台机器，它会更有效吗？(在某种程度上，我觉得每台机器中的多核也是一个“集群”)。我不确定我是否误解了有关Storm框架的一些东西(或者这种可以计算的框架)？
谢谢,
浏览 2提问于2013-10-20得票数 0
有人能好心地告诉我，在Hadoop集群中选择Storm和MapReduce进行数据处理时所涉及的权衡吗？当然，除了明显的一个，Hadoop (通过Hadoop集群中的MapReduce处理)是一个批处理系统，而Storm是一个实时处理系统。我在Hadoop系统上做过一些工作，但我没有和Storm一起工作。在浏览了大量的演讲和文章之后，我仍然没有找到一个令人满意和全面的答案。
注意:这里的“权衡”一词并不意味着与类似的事物相比较。
浏览 0提问于2014-06-01得票数 12
回答已采纳
2回答
AWS中Mesos上的Strom
、、、、
但我希望storm集群在需要时自动扩展。我发现mesos就是这样的。但我对mesos及其在AWS上的部署知之甚少。
浏览 0提问于2015-04-08得票数 2
云服务器
ICP备案
对象存储
云直播
腾讯会议
腾讯云开发者
