Druid如何在将实时摄取的数据移交到深度存储之前进行持久化？ 在文档中，Druid有关于intermedatepersistperiod的配置，并且maxpendingpersists持久化。但它并没有太多地说明什么是中间持久化，它是如何工作的。 从字面上看，我假设它周期性地将实时数据保存在内存中。给定以小时
浏览 20提问于2019-09-13得票数 3
数字值是随机的。字符串值是从10k随机20个字符字符串池中提取的。我有每个数字列的sum、min和最大值聚合。配置如下：德鲁伊医生说，理智的
浏览 3提问于2021-06-15得票数 0
我已经建立了一个多节点的德鲁伊集群，其中: 1) 1节点作为协调器运行，2)每个节点运行历史管理器和中间管理器。(r3.2xl) 3) 1节点运行代理(r3.2xl)
现在，我已经运行了一个EMR集群，我想将它用于摄取任务，问题是每当我试图通过CURL命令提交作业时，作业总是以本地hadoop作业的形式在两个中间管理器中启动我的数据位于S3中，S3也被配置为深度存储。我也把所有的罐子从电子病历母版复制到hadoop-dependencies/
浏览 4提问于2017-01-11得票数 0
1回答
如何访问或查看德鲁伊的本地存储空间？我想查看段或将段复制到文件中。我在对kubernetes进行德鲁伊操作。我曾尝试过执行命令，用于历史舱和中层经理舱，但我无法进入任何德鲁伊舱。
浏览 11提问于2022-09-07得票数 0
回答已采纳
我想知道如何将德鲁伊连接到超集，这样我就可以探索和查询我在德鲁伊中拥有的数据。我感觉你只能连接一个druid集群，而不是独立的，或者当我试图在超集UI上添加一个druid集群时，我只是不理解所有的配置，比如broker主机和端口。有什么想法吗？
浏览 19提问于2019-06-18得票数 1
当我试图向德鲁伊用户界面(通过路由器)提交摄取规范时，我得到了“未能提交主管:状态代码502的请求失败”的错误。摄入规范在独立的德鲁伊服务器中工作。我使用4台机器设置了集群--1台用于协调器和霸主(主)，1台用于历史和中间管理器(数据)，1台用于代理(查询)，1台用于路由器，其中包含一个单独的用于动物园管理员的实例。日志中没有错误。=["org.apache.druid.java.util.metrics.
浏览 1提问于2019-05-20得票数 1
回答已采纳
有没有人可以通过docker-compose文件使用MySql来存储德鲁伊的元数据？我已经花了几个小时，但我仍然在德鲁伊代理组件中得到错误。我想使用mysql而不是postgres的原因是因为一个供应商的docker容器错误地连接到了Druid的postgres服务器，而不是它自己的服务器，并且更改postgres的端口也没有帮助。下面是我在'broker‘中看到的错误。2021-02-23T15:15:2
浏览 10提问于2021-03-05得票数 0
druid hive处理程序的jar文件就在那里。Clients表已在包含数据的配置单元中。配置单元库文件夹hive-druid-handler-3.1.2.jar中的文件名。当我尝试为德鲁伊在hive中创建表时，我得到了错误an
FAILED: SemanticException Cannot find class 'org.apache.hadoop.hive.druid.DruidStorageHan
浏览 5提问于2019-12-17得票数 3
目标： 我正在测试Apache Druid的不同发行版。我的目标是最终在docker-compose设置中使用Druid。预期结果： 在本地安装并运行(使用start-micro-quickstart)的Druid 0.21.1与使用docker-compose运行的Druid 0.21.1相同。来自Druid存储库的docker-compose.yml没有按原样运行，因为当0.2
浏览 28提问于2021-08-30得票数 0
回答已采纳
即: Flink 1.8 -> (宁静，正式支持Druid0.9.2) -> Druid 0.20.1
未来: Flink 1.11 -> Kafka -> Druid 0.20.1使用推荐的.Flink应用程序生成Scala类的DataStream (在下面的代码中为ExampleData)。根据，Scala类属于“Flink提供的特殊序列化器”，但我不确定它是如何被序列化的，因此当<e
浏览 5提问于2021-08-06得票数 0
回答已采纳
我是第一次设置德鲁伊，在尝试使用docker-compose启动德鲁伊时遇到了以下问题， 2020-04-10T14:40:01,837错误qtp1667348377-84 org.apache.druid.server.router.QueryHostFinder-0.17.1.jar:0.17.1 这是我正在使用的cmd vm:~$ sudo docker-compose -f发行版/docker/docker-compose.yml up 我已经从https://github.
浏览 159提问于2020-04-11得票数 5
2回答
我有来自Kafka的具有以下结构的事件数据，我想在Druid中摄取这些数据 { "id": "1", "other_stuff": "important_info" } 具体地说
浏览 18提问于2019-06-21得票数 1
我将apache 0.22.1安装为集群(主节点、数据和查询节点)，并将其添加到common.runtime.properties中的数组common.runtime.properties中，从而启用了最后，我将GOOGLE_APPLICATION_CREDENTIALS (它的值为中定义的服务帐户json )定义为运行德鲁伊服务的用户的环境变量。然而，当我尝试从GCR桶中摄取数据时，我得到了以下错误：
org.<e
浏览 13提问于2022-01-11得票数 0
回答已采纳
我对Apache Kafka和数据分析都是新手。现在，我想获取这些实时数据，并将其显示为仪表板。我想使用任何开源工具来可视化所有这些数据。我还了解到，在生产环境中安装和部署Druid非常困难。
还有没有其他工具可以做到这一点？任何帮助都是非常感谢的。
浏览 2提问于2017-03-06得票数 2
我在Kubernetes上部署了一个没有路由器(因此没有UI)的Druid平台。我注意到一些数据源消失了(很可能是手动删除的)。有没有一种方法可以在不重新部署整个平台的情况下手动重新创建它们(例如，通过重新启动摄取服务器，通过API调用等)？谢谢--克里斯蒂安
浏览 1提问于2021-02-12得票数 0
我在/apache-druid-0.16.0-incubating/conf/druid/single-server/micro-quickstart/_common/common.runtime.properties中做了以下修改
druid.extensions.loadList=["druid-hdfs-storage", "druid-kafka-indexing
浏览 9提问于2019-12-03得票数 0
回答已采纳
我已经使用quickstart compose文件做了一个简单的德鲁伊设置。我想从卡夫卡那里摄取protobuf给德鲁伊。我遵循了这个link，但无论我在描述符文件URL中使用什么路径，它都不会拾取，但在任务中它显示正在运行。这是我的撰写文件 version: "2.2"
metadata_data: {} historical_var: {} - kafka-1:127.0.0
浏览 7提问于2020-12-15得票数 1
回答已采纳
我的EJB都使用了如下的持久化上下文：private EntityManager em;我使用JUnit来测试和运行Payara Embedded上的所有测试。Payara embedded使用这种格式进行JNDI查找(在我的persistence.xml文件<e
浏览 12提问于2019-08-07得票数 0
回答已采纳
一切按预期工作，直到德鲁伊击中，在某些偏移，一个坏的记录，没有有效的数据，因为它已损坏。) ~[druid-core-0.22.1.jar:0.22.1]异常说的是真的，在某个偏移处有一个记录，其中模式id的字节为1786271608，这是注册表中的<
浏览 6提问于2022-03-14得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
