电子病历集群监控配置: Ganglia + InfluxDb

文章/答案/技术大牛

发布

0回答

emr、amazon-emr、influxdb、terraform、ganglia

我有一个电子病历集群。., "Ganglia", ...]}这需要更新主节点上的gmetad.conf文件。电子病历步骤？

浏览 9提问于2017-12-04得票数 1

1回答

如何向EMR提交flink流作业？

apache-flink、airflow、amazon-emr、flink-streaming

我有几个要在AWS EMR上运行的长时间运行(流) flink作业。我从AWS控制台或使用aws cli阅读了执行此操作的步骤。但这是手动的。在生产环境中(在生产环境中，我可以有多个作业，可能还需要处理故障情况)，有哪些方法可以实现自动化？

浏览 28提问于2019-12-11得票数 1

2回答

弹性MapReduce的Post钩子

hadoop、amazon-web-services、hadoop-streaming、emr

我想知道是否有电子病历(弹性MapReduce)的后期处理的例子？我试图实现的是在亚马逊的Hadoop完成工作后立即发送一封电子邮件给一群人。

浏览 1提问于2013-04-04得票数 4

回答已采纳

3回答

AWS EMR自动故障切换到另一个EMR群集

amazon-web-services、emr、high-availability

我们目前正在为我们的一个应用程序建立电子病历集群，由于我们希望电子病历设置具有弹性，因此我们希望在不同于主要电子病历集群AZ的AZ中创建一个StandBy电子病历集群。

浏览 1提问于2017-06-14得票数 1

1回答

AWS EMR Ganglia仪表板不可及- 403禁忌

amazon-emr

我有一个电子病历集群 Name="Test dashboards", Applications=[ {"Name": "JupyterHub"}, {"

浏览 8提问于2021-02-05得票数 5

回答已采纳

2回答

使用ganglia监控hadoop集群

hadoop、metrics、slave、ganglia

我是hadoop的新手，正在尝试使用ganglia监控多节点集群的工作，gmond的设置是在所有节点上完成的，ganglia监视器只在master.However上完成，只有主节点的hadoop指标图和从节点的系统指标或者配置文件中是否有任何错误？任何帮助都将不胜感激。

浏览 0提问于2014-04-15得票数 0

1回答

AWS使用KMS加密S3桶

amazon-web-services、hadoop、amazon-s3、amazon-emr、aws-kms

我有下面的情况，我的电子病历，请有人指导如何进行配置相同？EMR集群跨数据管道执行多个操作：如何在电子病历中配置上述内容？只有我知道的配置电子病历的选项是在emrfs-site.xml & /etc/hadoo

浏览 1提问于2019-06-28得票数 4

3回答

如何修复电火花EMR笔记本- org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient :无法实例化org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient的错误

apache-spark、hadoop、pyspark、amazon-emr、hive-metastore

这个星火EMR集群没有安装单独的Hive组件，我不打算使用它。我已经尝试寻找这个问题的各种原因，其中一个原因可能是电子病历笔记本可能没有创建metastore_db的写入许可。然而，我无法证实这一点。我试图在集群中的日志文件中找到此错误，但找不到它，也不确定哪个文件可能包含此错误，以便获得更多的详细信息。重现问题的步骤：使用控制台并使用快速启动视图创建AWS EMR集群，选择spark选项。它将包括星火2.4.3的Hadoop 2.8.5纱与Ganglia 3.7.2和齐柏林飞艇0

浏览 0提问于2019-09-04得票数 5

1回答

Nagios vs Ganglia

nagios、ganglia

还有什么是Nagios或Ganglia可以做到的，而其他人做不到的吗？我正在为我学校的计算机俱乐部寻找一个通用的解决方案，在我看来，这就像是比较诺顿和先进。

浏览 0提问于2013-01-24得票数 25

回答已采纳

3回答

如何在电子病历集群引导上设置livy.server.session.timeout？

configuration、amazon-emr、livy

我正在创建一个EMR集群，并使用jupyter notebook运行一些spark任务。我的理解是它与Livy config livy.server.session.timeout相关，但是我不知道如何在集群的引导程序中设置它(我需要在引导程序中设置，因为集群是在没有ssh访问权限的情况下创建的

浏览 2提问于2019-01-16得票数 13

回答已采纳

1回答

在Amazon EMR中查找配置单元UDF的控制台输出的位置

amazon-web-services、hadoop、hive、amazon-emr

我在java中创建了一个可以在配置单元查询中调用的UDF，在我放在System.out.prinln(msg)中的UDF中，希望在控制台中输出一些东西。

浏览 19提问于2013-09-04得票数 2

1回答

如何在influxdb/grafana中计算两个查询的值

grafana、influxdb

我使用InfluxDB/Grafana监控由2个Linux节点组成的集群。我用telegraf http插件收集指标。指标的格式如下：我已经在Grafana中配置了可以监控单个节点的error参数，如下所示： Query A: SELECT我如何在Grafana中配置它？

浏览 3提问于2018-12-20得票数 0

1回答

在AWS上设置2-3个节点的hadoop集群应该采用什么配置？

amazon-web-services、amazon-ec2、amazon-emr

在AWS上设置2-3个节点的hadoop集群应该采用什么配置？我想在hadoop集群上设置Hive，HBase，Solr，Tomcat，目的是做小的POC。此外，请建议使用电子病历或EC2的选项，并手动设置群集。

浏览 0提问于2016-05-18得票数 0

3回答

亚马逊EC2与亚马逊电子病历

amazon-ec2、amazon-web-services、hive、amazon-emr

目前，它在我的单节点集群上运行良好。现在我正计划在AWS上部署它。我想提高我的任务的表现。

浏览 0提问于2012-04-11得票数 24

回答已采纳

1回答

重新启动终止的emr集群

amazon-web-services

我终止了一个现有的集群，以避免产生成本。我能不能重新启动这个集群。克隆=重新启动吗？感谢并为我的无知感到抱歉。

浏览 0提问于2017-04-02得票数 1

回答已采纳

1回答

AWS IAM用户角色或策略自包含

amazon-web-services、aws-sdk、amazon-iam

目的是能够创建一个CloudFormation模板，该模板可以由非管理员用户运行，但仍然可以创建所需的所有资源(包括实例配置文件和lambda执行角色等内容)。

浏览 5提问于2016-04-29得票数 2

1回答

在管道的EMR集群中标记EC2机器( S3->DynamoDB示例中的ImportCluster)

amazon-ec2、amazon-cloudformation、amazon-data-pipeline

我正在尝试运行S3->DynamoDB示例，但在运行为MyImportJob活动创建的EMR集群时遇到一些问题。我们配置了我们的IAM帐户，这样每个用户都可以创建带有(他的团队的)特定'team_id‘标签的EC2机器。这有助于我们控制资源，防止错误并监控使用情况。当管道尝试启动电子病历集群时，它(可能)在没有标签的情况下启动，因此使用Terminated with errors: User account is not authorized to call EC2我试图

浏览 0提问于2014-11-11得票数 0

2回答