获取翻滚窗口触发器的实际触发器运行开始时间

文章/答案/技术大牛

发布

1回答

azure-data-factory、azure-data-factory-2

我感兴趣的是获得翻滚窗口触发器的实际运行开始时间。我不想要日程安排触发器。我的场景需要特别的翻滚窗口触发器，但一些逻辑也需要确切地知道触发的运行开始的时间。根据我尝试使用@pipeline().TriggerTime的，基本上我将它作为值传

浏览 7提问于2019-11-23得票数 0

1回答

Azure数据工厂触发器窗口的触发器限制是什么？

azure、azure-data-factory、azure-data-factory-2、azure-data-factory-pipeline

我有一个相互依赖的多个管道，我想使用触发器窗口，请求您的建议，这是正确的方法吗？使用拇指窗口触发器有什么限制吗？问候你，阿肖克

浏览 2提问于2021-03-17得票数 0

1回答

Azure Data翻掉的窗口触发器不会启动(停留在过去)

azure-data-factory、azure-data-factory-2、azure-data-factory-pipeline

我有需要按顺序运行的管道。第一个是“生到铜”，每天凌晨4点。一旦完成，我要我的“铜牌到银牌”开球。原始到青铜正在按预期运行(每24小时翻一次车窗)，并成功完成。青铜到银被配置成一个翻滚的窗口触发器，依赖于生到铜，但它的窗口在2021年11月卡住了。我尝试了偏移量和窗口大小的组合(0偏移立即触发，并在接下来的4小时内运行+4小时窗口</em

浏览 9提问于2022-01-14得票数 0

回答已采纳

1回答

翻滚窗口触发器取消过去的执行Azure数据工厂

triggers、azure-data-factory

由于重试策略，我们需要使用翻滚窗口触发器，但我们的prod部署将在开发部署1个月后进行，我们不想在生产中手动终止这30个执行，因为翻滚窗口触发器的功能可以运行那些错过的天数。有没有办法避免这种情况？

浏览 1提问于2021-01-14得票数 0

1回答

如何使Azure数据工厂滚动窗口触发器与日光节省时间一起工作

triggers、azure-data-factory、dst

我有一些翻滚窗口触发器，设置为运行在特定的间隔6小时。它们需要在指定的时间运行(比如凌晨5点和11点，等等)--我已经设置了它们，以便它们是独立的，并且依赖于连接检查触发器。翻转窗口触发器仅在UTC中工作，当时钟在我们的时区发生变化时，触发时间会改变一个小时(向前或返回取决于一年中的时间)。这会导致数据晚到目的

浏览 4提问于2022-05-23得票数 0

1回答

Azure数据工厂中的翻滚窗口触发器

triggers、azure-data-factory、azure-data-factory-2

如何将ADF中的翻滚窗口触发器参数化为每天在特定时间(9am-10am)之间运行。是否可以通过MyWindowStart和MyWindowEnd参数来实现？你好，桑迪普

浏览 4提问于2020-05-07得票数 0

1回答

我已经创建了一个重复性为1小时的翻滚窗口触发器，并将其附加到管道上。每当管道运行时，我想要处理前2小时，之后我想要处理当前小时。同样，当上午11点到下午12点窗口开始工作时，我希望上午9点到11点在处理上午11点到下午12点之前进行处理为了实现这个功能，我创建了一个自依赖，偏移量为-0.02:00:00，窗口大小为0.02:00但是当管道被触发时，它会从之前的运行中寻找之前的依赖窗口</e

浏览 22提问于2021-07-08得票数 0

1回答

出错时如何暂停数据工厂翻滚窗口触发器

azure-data-factory

我有一个管道的翻滚窗口触发器。如果一个窗口出现故障，我不想运行任何额外的窗口，直到故障窗口得到解决。处理这个问题的最好方法是什么？

浏览 1提问于2018-11-20得票数 0

2回答

ADF滚动窗口触发器:依赖触发器无法按预期工作

azure-data-factory、azure-data-factory-2

我为我的Azure Data管道Test_Daily创建了一个翻滚的窗口触发器，重复时间为24小时。对于这个管道，我添加了一个依赖触发器，比如Test_Hourly (它每小时运行一次)，偏移量为1.00:00:00(1天)。 Test_Daily管道不会触发，即使依赖触发器已成功运行。例如，如果每日管道windowStartTime为2020-09-20 00:00:00，而具有WindowStartTime 20

浏览 3提问于2020-09-23得票数 1

1回答

ADF Tumpling窗口触发器更新startTime属性行为

azure、azure-data-factory

我将直奔主题-我不能更新现有ADF Tumpling窗口触发器的startTime属性，我总是得到这个错误：为了解决这个问题，我必须重新创建Tumpling窗口</

浏览 28提问于2020-05-26得票数 2

1回答

Azure Data Factory中的翻滚窗口触发器-自运行

azure、triggers、azure-data-factory、azure-data-factory-pipeline

我有一个ADF V2管道，每小时运行在上午7点到下午5点之间。到目前为止，我一直在使用每小时运行一次的“事件”触发器，它很好。但不知何故，负载开始运行了一个多小时。因此，下一次加载将在前一次加载仍在运行时开始。我一直在尝试使用“翻滚窗口”触发器来创建对此管道的自我依赖，以便它在运行之前等待前一个管道完成，但无法使其工作。

浏览 1提问于2020-10-14得票数 0

1回答

翻滚窗口触发器依赖限制为5的解决方法

azure-data-factory、azure-data-factory-2

我有一种情况，我有10个拇指窗口触发器，将遥测数据摄取到数据库中。当所有这些触发器都成功时，我想运行一个依赖于所有这些输入的管道。翻滚窗口依赖功能非常完美。除了它有5个依赖项的限制。对于复杂的数据情况，这个限制似乎很小。

浏览 8提问于2021-10-20得票数 0

2回答

我是否可以在每小时上午9点到下午6点之间的5个工作日内触发Azure数据工厂管道

azure、azure-data-factory

我有一个Azure数据工厂管道，它加载每个工作日的数据(每个工作日运行)。我想在每个工作日(周一至周五)从工作时间(上午9点到下午6点)到每小时触发我的管道。它应该像每天上午9点、10点、11点那样运行-下午6点我尝试过翻滚窗口触发器，但我认为它不支持触发间隔的时间段

浏览 2提问于2020-06-01得票数 1

1回答

即使在计划时间禁用触发器，TeamCity也使用调度触发器启动生成。

teamcity、teamcity-7.0

我有一个6点的时间表触发器的版本，因为我不希望这个版本运行在一个特别指定的窗口之外。如果我根本不想让这个版本运行，我就禁用6PM的调度触发器。实际上，构建是立即触发的，我想是因为它知道，如

浏览 4提问于2015-10-29得票数 1

回答已采纳

1回答

在ADFv2中创建每日到每月的触发器依赖项

azure-data-factory、azure-data-factory-2

我有一个翻滚窗口触发trg-Daily，它的开始日期边界是12:00，它每24小时执行一次(频率是Hour，间隔是24)。所以基本上它每天执行一项任务。现在，我想每个月执行一次管道，所以基本上我想创建另一个滚动窗口触发器trg-月，它将依赖于每日触发器trg-Daily，这样它应该在处理给定月份的所有日子时执行。如何定义这个？具体来说，我想知道触发器trg的以下值应该是什么-每月才能实现？频率

浏览 1提问于2019-12-13得票数 1

回答已采纳

1回答

ADF管道和触发器

azure、azure-data-factory

让我们假设这样一个场景:流水线A每天运行，流水线B每月运行一次，并且依赖于流水线A(流水线B应该在流水线A成功完成后触发)。使用预定触发器，我们不能在两个管道之间有硬依赖关系，就像翻滚窗口一样，我们不能精确地指定管道B应该运行的日期(它只有两个选项，分钟和小时，而预定触发器也有月和周) 在这种情况下，这两个触发器都有其缺点。对于这种情况，可能的最佳解决方案是什么？

浏览 25提问于2021-09-01得票数 0

1回答

Azure数据工厂-使用动态时间戳查询Cosmos DB

azure-data-factory

我希望使用文档的_ts成员来获取增量。换句话说，我将只获取_ts在某个范围内的记录。该范围将是时间窗口的范围，我使用数据工厂中的翻滚窗口触发器获得该范围。问题是，如果我打印我在查询中创建的动态时间戳，并将它们硬编码到查询中，它就可以工作。但是如果我让查询生成它们，我不会得到任何结果。例如：我使用这些值来模拟触发器的

浏览 16提问于2020-08-22得票数 0

1回答

用于触发器时间戳的Azure数据工厂v2管道API调用

api、triggers、pipeline、azure-data-factory、azure-data-factory-2

我刚开始使用azure数据工厂，我正在尝试建立一个从API获取特定时间范围内的数据的管道。以下是我到目前为止一直在做的事情:我为API调用创建了一个翻滚窗口管道，以JSON文件的形式引入数据，并以特定的时间戳存储在ADL文件夹中。问题是，我只想要当前日期和小时的数据，并将其存储在特定的文件夹中，例如年/月/日/小时/ jso

浏览 2提问于2018-05-23得票数 0

1回答

如何在Azure数据工厂V2中设置看似循环但实际上不是循环的依赖关系

azure、azure-data-factory、azure-data-factory-2

以下是场景：由翻滚窗口触发的管道B触发器B-每周运行。a.最后一次运行A成功。(自我依赖-可行)。b.最后一次运行B成功。(这也是可行的，但由于下面几行中的b点，可能会进入循环依赖)a.最后一次<

浏览 9提问于2020-02-14得票数 1

回答已采纳

1回答

用ADFV2创建带有预定触发器的管道

azure、triggers、azure-pipelines、azure-data-factory

我尝试将ADFV1中已经存在的管道迁移到ADFV2，并对触发器的概念存在一些问题。我的管道有两个活动，第一个是Azure数据湖分析活动，第二个是复制活动。第一个活动运行usql脚本，其中从分区文件夹/{yyyy}/{MM}/{dd}/读取数据，对其进行处理并写入文件夹/{yyyy}-{MM}-{dd}/。下面是我工厂的一些JSON文件(管道、触发器和数据集)。, "parameters&quo

浏览 0提问于2018-11-13得票数 0

回答已采纳

点击加载更多