腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
从
作业
日志
中
获取
特定
字符串
jenkins
、
groovy
如何
从
日志
中
获取
包含某个单词的
特定
字符串
并打印?
浏览 11
提问于2019-06-05
得票数 0
3
回答
Java MapReduce计数器- Oozie
java
、
hadoop
、
mapreduce
、
bigdata
、
oozie
Java应用程序是在Hadoop集群
中
执行的,只需一个Mapper任务就可以作为map-还原
作业
执行。如果一个java
作业
(不是单元
作业
或任何其他
作业
,只是一个直接的mapreduce
作业
)是oozie的一部分,那么我们得到一个映射器启动程序,并且实际的mapreduce
作业
独立运行。那么,是否有办法将启动程序和实际的mapreduce
作业
运行连接起来呢?比如用发射器得到实际运行的
作业
of?有什么命令要知道吗?
浏览 8
提问于2015-12-18
得票数 1
回答已采纳
2
回答
如何准确地
从
BASH
中
的
日志
文件
中
抓取过去一小时的
日志
?
linux
、
bash
、
unix
、
awk
我有一个cron
作业
的
日志
文件,其中的条目使用我希望能够定期检查
日志
,以查看某个
特定
的CRON
作业
(每小时运行)是否运行。通过grep很容易找到我想要的
日志
。但是,我不知道如何才能准确地
从
过去的
中
抓取
日志
,看看
浏览 0
提问于2016-03-08
得票数 0
回答已采纳
1
回答
为for
作业
配置
日志
记录位置
azure
、
logging
、
azure-webjobs
我很难弄清楚为什么这个why
作业
会将所有的
日志
都存储在同一个容器
中
,这使得在
特定
时间很难在
日志
中
搜索来自所选webjob的
特定
消息。我的存储帐户由5个容器组成,其中4个已由app服务在给定存储帐户的连接
字符串
时自动创建( AzureWebJobsDashboard和AzureWebJobsStorage应用程序密钥设置为共享存储帐户的连接
字符串
储存账户
中
的集装箱:
浏览 0
提问于2017-09-01
得票数 3
回答已采纳
1
回答
查找Hadoop
日志
并将其设置为详细级别
hadoop
、
bigdata
我需要跟踪在运行
作业
或将文件上传到HDFS时发生的情况。我在sql server中使用sql profiler来完成此操作。但是,我很怀念用于hadoop的这样一个工具,所以我假设我可以
从
logs获得一些信息。我认为所有
日志
都存储在/var/ logs /hadoop/
中
,但我不知道需要查看什么文件,以及如何设置该文件来捕获详细的级别信息。谢谢,Sree
浏览 0
提问于2016-07-07
得票数 0
2
回答
更好地可视化jenkins多配置
作业
jenkins
我有一个普通的jenkins maven
作业
,如果成功,它会触发一个多配置
作业
。多配置
作业
在3个
从
设备上执行一个简单的构建步骤。我对如何
获取
在
特定
从
机上运行的构建步骤的
日志
以及如何查看
从
机上的构建步骤的状态不太满意。有没有人遇到同样的挑战,找到了一些
浏览 2
提问于2013-10-19
得票数 1
1
回答
如何获得基于批处理
作业
的异常、错误、
日志
?
shell
、
hadoop
、
hive
、
sqoop
、
hiveql
我在蜂箱
中
没有几个
作业
,每天运行,并使用sqoop将一些数据
从
日志
文件推送到我们的OLPT数据库。我没有在环境
中
安装oozie。所有这些都是用单元脚本文件(.sql文件)编写的,我
从
unix (.sh文件)运行这些脚本。这些shell脚本文件以不同的OS cron
作业
附加在不同的时间运行这些脚本文件。现在的要求是: 每天分别为每个
作业
生成
日志
/状态。以便在一天结束时查看这些
日志
,我们可以确定哪些
作业
浏览 5
提问于2016-06-27
得票数 0
1
回答
使用存储在数据库
中
的Java类名运行Quartz
作业
java
、
class
、
quartz-scheduler
、
casting
;我必须硬编码PollJob.class来运行
作业
,而sj是
从
包含PollJob的详细信息的数据库
中
读取的对象。但我也想从数据库
中
设置PollJob.class。new JobDetail(sj.getJobName(), scheduler.DEFAULT_GROUP, Class.forName sj.getJobJavaClassFile())); 但是
作业
根本不会执行
浏览 0
提问于2010-07-06
得票数 0
1
回答
从
Azure HDInsight
中
获取
Spark
日志
azure
、
apache-spark
、
azure-hdinsight
、
livy
目前,我正在通过LIVY发布/提交火花
作业
到Azure HDInsight集群。
作业
完成后,我正在查看Spark的纱线
日志
。 每个火花
作业
的Livy
日志
不提供纱线
日志
。我们可以
从
Azure HDInsight
中
以编程方式
获取
Spark
日志
吗?我们在Azure
中
是否有REST调用或自定义工具来
获取
Yarn
日志
?
浏览 2
提问于2020-12-08
得票数 1
回答已采纳
2
回答
使用docker
日志
从
Gitlab CI获得输出
docker
、
gitlab
、
gitlab-ci
、
gitlab-ci-runner
我正在编写一个脚本,该脚本聚合了管道
作业
的所有
作业
跟踪。我的目标是: echo "My output" >> /proc/1/fd/1 但是<em
浏览 19
提问于2022-08-10
得票数 1
回答已采纳
1
回答
如何通过API或消息队列
获取
Databricks工作区火花
作业
日志
apache-spark
、
databricks
、
azure-databricks
、
spark-structured-streaming
我正在尝试创建一个服务,查找
特定
databricks工作区的所有火花
作业
日志
。假设我已经在databricks工作空间中部署了两个星火流
作业
--我希望通过任何API或像kafka/eventhubs这样的消息队列
获取
这两个
作业
的
日志
。这样,我就可以订阅那些流
日志
,并实时地采取一些基于事件的操作。 在Databricks工作区
中
是否有任何API可以提供每个火花
作业
的
日志
,或者我们可以在事件中
浏览 5
提问于2022-09-19
得票数 1
1
回答
如何在显示亚马逊S3分区表的计数和模式时修复亚马逊网络服务胶水代码
python
、
amazon-web-services
、
pyspark
、
etl
、
aws-glue
我正在尝试对记录进行计数并打印我的分区表的模式(以拼接的形式)。我只是在AWS Glue控制台中执行此操作(因为我无法连接到开发人员端点)。然而,我认为我的查询没有产生任何结果。请参阅下面的代码。有什么建议吗? %pysparkfrom awsglue.transforms import * datasource0 =
浏览 19
提问于2019-06-28
得票数 0
2
回答
的Cron
作业
日志
文件
google-app-engine
、
cron
在哪里可以找到由执行的cron
作业
的
日志
文件?我找遍了仪表盘,没有任何运气。
浏览 4
提问于2015-09-05
得票数 1
回答已采纳
1
回答
Azure管道-查看以前运行的参数
azure-pipelines
不确定是否有办法做到这一点,但我希望看到以前运行的yaml管道
中
的参数,这样我就可以看到在运行管道时输入或选择了什么。这有可能吗?我发现的唯一解决办法是根据每个参数添加标记。
浏览 2
提问于2020-06-10
得票数 6
回答已采纳
1
回答
以编程方式检索
特定
作业
的tasktracker
日志
hadoop
、
hdfs
、
bigdata
、
oozie
、
webhdfs
我需要使用OozieClient应用程序接口检索
特定
工作流
作业
的任务跟踪器
日志
。如果不是使用OozieClient应用程序接口,也可以通过其他方式使用程序。到目前为止,使用OozieClient我可以使用client.getJobLog()
获取
作业
日志
,但我需要任务跟踪器
日志
,而不是
作业
日志
。请帮帮忙。
浏览 2
提问于2013-12-07
得票数 3
1
回答
在Hadoop
作业
执行后保留该
作业
的
日志
hadoop
我想知道是否有一种简单的方法来
获取
特定
运行的所有
作业
日志
/任务尝试
日志
,并将它们保存在某个地方(也许是HDFS)?我知道任何
特定
作业
的任务尝试的
日志
都在/var/log/hadoop-0.20-mapreduce/userlogs的本地文件系统上,而且我可以编写一个脚本,将它们全部收集到每个
从
节点上。默认情况下,mapreduce.job.userlog.retain.hours设置为
浏览 3
提问于2013-08-28
得票数 1
2
回答
如何
从
单独的Jenkins管道平行区块
中
获得标准和标准?
jenkins
、
jenkins-workflow
、
jenkins-pipeline
oracleIT: { executeOracleIT() }请注意,正如建议的一样,我正在每个parallel
中
运行一个新的
浏览 2
提问于2016-05-05
得票数 7
回答已采纳
6
回答
如何在Perl
中
以电子邮件的形式发送文件内容?
perl
、
email
、
file
我有一个
日志
,它是从一堆cron
作业
创建的。我现在的任务是以电子邮件的形式发送
特定
的
日志
(例如错误输出)。
从
文件
中
获取
内容并将其作为电子邮件发送的最佳方法是什么?
浏览 0
提问于2009-08-25
得票数 5
回答已采纳
2
回答
谷歌云
作业
提交培训卡住了
machine-learning
、
neural-network
、
google-cloud-platform
、
google-cloud-ml
您好,当我设置google cloud机器学习来训练神经网络时,突然我无法向google cloud提交
作业
。
浏览 19
提问于2018-06-11
得票数 0
6
回答
如何在C#
中
监控Server代理
作业
信息
c#
、
sql-server-2000
、
sql-server-agent
我需要创建一个用于监视Server 2000代理
作业
状态和信息的应用程序,当
作业
发生时与Windows应用程序事件
日志
显示相同。现在,我已经通过一个连接
字符串
连接到数据库,但我不知道如何
从
作业
中
获取
状态和信息。你有什么建议怎么做。
浏览 5
提问于2010-09-21
得票数 9
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
python获取字符串中的特定位置的数据
Python实现获取字符串中特定位置的数据方法详解
python实现自动化Teradata跑批程序测试
三分钟使用 Python 处理 Nginx 日志
肝了3天,整理了90个Pandas案例
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券