我使用Azure数据工厂和Azure数据仓库,我想增加我的连接的资源类。为了避免任务被迫等待并发时隙可以访问数据库,我想知道是否可以告诉数据工厂,它一次只能对定义的数据源运行2个活动。希望这有助于防止在数据库中暂停等待并发插槽可用的任务的任何超时。
我的数据工厂有两个并行管道,它们可能同时使用相同的db。
是否可以为链接服务设置全局并发限制?
发布于 2017-06-20 00:58:44
简而言之,no。
目前,ADF并发只设置在活动级别。
选项1
您可以创建一些假数据集来强制ADF中的依赖项来链接跨管道的活动。不理想也有点凌乱。
选项2
在SQL中限制ADF连接用户的资源类,让它处理查询队列而不是ADF。但是,要小心ADF超时值,如果这样做,ADF将在超过超时的情况下终止执行,因为它不知道其调用的服务中的操作。
希望这能有所帮助。
https://stackoverflow.com/questions/44526766
复制