我正在使用批处理服务在ADF v2中运行自定义代码活动。无论何时运行它，都只在我的批处理作业中创建一个CloudTask，尽管我有二十多个parallel.Invoke方法在运行。有没有一种方法可以从ADF中的一个自定义活动创建多个任务，以便可以跨批处理池中的所有节点进行处理 我有两个节点的固定池。每个节点的最
浏览 18提问于2019-01-17得票数 1
回答已采纳
我是Azure的新手，正在从事数据工厂和自定义活动的工作。我正在创建一个只有一个自定义活动的管道(该活动实际上什么也不做，并且立即返回)。有什么我漏掉的吗？作业:已创建且属于所需的</em
浏览 12提问于2018-01-17得票数 0
1回答
我在ADLA中使用U-SQL脚本运行作业，这些脚本是通过数据工厂管道调度的。作业名称在ADLA中显示为e.g"ADF-das783bb-9dsb-4123-9420-ddaklsdlm65c1".的某个id。有没有办法重命名这些作业，以便我可以区分它们？
浏览 3提问于2018-04-04得票数 0
1回答
最初，它是一次性转换，但稍后我们将收到每日文件，因此我实现了一个自定义C#活动以在数据工厂中运行。当我第一次使用D14 v2 VM的批处理帐户运行此活动时，它一次转换一个文件，每个文件需要20-25分钟才能转换。这加起来超过了一周，如果我们出于某种原因需要重新运行转换，那么这个时间就太长了。有没有什么好的方法来并行化这个转换？
输入和输出文件都存储在blob存储中的两个单独
浏览 0提问于2017-05-18得票数 0
我想设置一个Azure数据工厂管道，它在Blob Storage和Data Lake Store之间执行移动(即复制、验证、删除)操作，而不仅仅是复制操作。我似乎找不到任何关于如何做到这一点的细节。
浏览 2提问于2017-01-19得票数 6
我正在将ADFv1下的一些管道迁移到ADFv2。"activities": [ "type": "CosmosToBlobCopyActivity",
"
浏览 3提问于2020-06-01得票数 0
1回答
我有大约120个管道，几乎400个活动在一起，我想把它们记录在我们的数据存储系统中，这样我们就可以使用powerBI报告性能了。我偶然遇到了，但在我看来，它似乎是在使用单个管道，但我想知道我是否能够在一个调用和活动中在ADF中获得整个管道。
特纳克
浏览 0提问于2021-09-06得票数 0
回答已采纳
我试图通过调用azure ML批处理来创建ADF管道，但我无法找到azure ML批处理任务。谁能帮助我如何在AZURE数据工厂V2中使用AZURE ML Batch process？
浏览 2提问于2018-01-24得票数 0
我已经把我的文件上传到那里了。我想使用azure数据工厂与SFTP服务器连接，从SFTP服务器读取文件并将它们保存在Azure Blob存储中。
有没有办法使用azure管道/活动配置来执行此操作？
浏览 0提问于2016-05-04得票数 2
6回答
我在Azure数据工厂中定义了25条管道和大量数据集。将这些管道/数据集/链接服务从一个订阅复制/复制(而不是移动)到另一个订阅的最佳方式是什么？感谢您的帮助！
浏览 1提问于2017-03-29得票数 2
我一直试图找到一种方法来使用Azure Data V2对我现有的Azure V2运行一个简单的命令。到目前为止的备选方案：
任务调
浏览 0提问于2019-05-07得票数 2
回答已采纳
是否有可能在azure数据工厂中将已经编写的azure函数打包并执行为自定义活动？我想使用ADF管道中的azure函数(它正在做一些数据处理)作为一个自定义活动。这个自定义活动只是管道中的活动之一，但它的关键是要执行。
浏览 1提问于2018-10-19得票数 1
回答已采纳
在post中由webapi处理的管道活动登录。(200或400)
活动1如何检测400错误？我需要实现.net CustomActivity吗？
浏览 0提问于2017-10-24得票数 1
回答已采纳
1回答
试着自学一些ETL技能，需要一些帮助，用最好的方法来完成某些任务。我试图将来自我们的客户服务平台Freshdesk的数据导入到我们的SQL数据仓库中。我们是微软的一家公司，我使用microsoft Azure Data和Microsoft逻辑应用程序完成了一些类似的任务。逻辑应用程序是低/无代码，更直观一点，所以我现在试着使用。然而，我觉得Data可能是最有效的方法(尽管目前还不确定如何做
浏览 0提问于2021-08-24得票数 2
目标我不喜欢用额外的审核活动来结束每个管道活动。我想为所有活动做一些共同的方面/建议。但我认为这不是ADF应该使用的一种
浏览 1提问于2020-02-23得票数 1
回答已采纳
我在Azure Data中有一个自定义活动，它试图执行以下命令：一些站点提到指定一个包(.zip文件)，该包包含了执行exe所需的所有内容。但是，由于PowerShell来自微软，我认为将PowerShell目录指定为自定义活动的</em
浏览 3提问于2019-09-03得票数 0
3回答
在Azure Data v2中，我创建了许多管道。我注意到，我创建的每个管道都创建了一个源和目标数据集。根据ADF文档：数据集是一个命名的数据视图，它简单地指向或引用您想要作为输入和输出在活动中使用的数据。
这些数据集在我的数据工厂中可见。我很好奇为什么我会在乎这些？这些看起来就像ADF创建<
浏览 1提问于2018-06-13得票数 1
回答已采纳
1回答
我很少有蓝色的数据工厂活动，需要传递用户名和密码才能执行。我试图保持这个用户名和密码在天蓝色金库，并希望使用这个ADF活动。在ADF管道任务中，我们还有其他方
浏览 13提问于2022-11-21得票数 0
1回答
我们正在使用ADF V2我们正在运行‘主’管道，启动其他管道。在监视选项卡中，我可以看到每个管道运行的活动数量等等。在Azure本身的成本分析中，我们只看到每个数据工厂的细分，低于这个水平的任何东西对我们来说都是看不见的。我们需要知道每个“主”管道的成本是多少。 有没有办法按“主”管道对这些信息进行分组?或者我们应该创建多个数据工厂</e
浏览 15提问于2020-11-11得票数 0
回答已采纳
我有一个ADF解决方案，它是元数据驱动的。它传递一个连接字符串，源和接收器作为参数。我担心的是，我在管道和子管道中也有SQL日志记录步骤，现在对于一个简单的Azure DB表拷贝到ADSL Parquet，它受到日志记录步骤和子管道的瓶颈。我尝试了以下几点：
似乎没有什么能减少运
浏览 4提问于2021-12-13得票数 2
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
云直播
实时音视频活动推荐
腾讯云开发者
