Purview是否通过ADF管道的数据流显示自动创建的表的谱系？
Purview是微软Azure云计算平台上的一项数据治理服务，它可以帮助用户发现、分类、管理和保护数据资产。ADF（Azure Data Factory）是Azure提供的一种云数据集成服务，用于构建、调度和监视数据集成和数据管道。
根据提供的问答内容，Purview是否通过ADF管道的数据流显示自动创建的表的谱系，答案是肯定的。Purview可以通过与ADF管道的集成，自动创建表的谱系，以展示数据流的关系和血缘。
具体来说，当使用ADF管道将数据从源系统移动到目标系统时，Purview可以自动识别和捕获数据流的元数据信息，包括数据源、数据目标、数据转换等。通过分析这些元数据，Purview可以自动创建表的谱系，展示数据流的整个过程和数据之间的关系。
这种自动创建的表谱系可以帮助用户更好地理解数据流的结构和数据之间的依赖关系。用户可以通过Purview的界面或API来查看和浏览这些表谱系，以便更好地管理和维护数据资产。
对于Purview的具体应用场景，它可以用于数据治理、数据发现、数据分类、数据保护等方面。用户可以通过Purview来管理和保护数据资产，确保数据的合规性和安全性。
推荐的腾讯云相关产品是Azure Purview，它是微软Azure云计算平台上的数据治理服务。您可以通过以下链接了解更多关于Azure Purview的信息：https://azure.microsoft.com/zh-cn/services/purview/
相关·内容
1回答
Azure Purview目前显示了ADF的数据谱系，仅用于复制活动。这足够了吗？在这个中给出了：“通过将元数据从Azure Data Factory推送到Azure Purview，可以实现可靠和透明的世系跟踪。”这是否超出了复制活动的范围？如果是，我们如何实现这一点？
在Azure中有没有其他方法可以查看完整的数据谱系？假设我们正在使用ADF/Synapse/Azure Databricks。
浏览 6提问于2021-07-01得票数 0
我已经调试了我的ADF流水线，这个流水线包含4个复制活动和两个DataFlows。调试完成后，我切换到Azure权限来查看对Datafactory所做的更改，并且我能够看到Pipeline。但是当我进入Azure Purview中的管道时，除了一个数据流之外，所有的活动和数据流都显示为谱系。该数据流沉入一个不存在的SQL表中，因此它会自动创建该表。这是它没有出现在权限范围内的原因吗？
浏览 16提问于2020-12-14得票数 0
回答已采纳
我有-前提Server>ADF->存储->ADF->Azure SQL管道。我用的是Azure DevOps。ADF管道每晚执行，如果存在ADF监视器显示错误。
我想知道是否存在ADF或其他框架，用于在功能测试之前进行特定的烟雾测试等等。
浏览 6提问于2021-11-01得票数 0
回答已采纳
我没有几个excel文件需要是processed..either，将它们发送到一个基于前提的sql数据库或输出更结构化的csv文件。这些文件可以运行到100 and，并且有多个工作表。表格和数据是动态的。有些文件可能会或不会得到一些工作表。列也是相同的。此外，每个文件都有一个数据字典表，用于解释结构(工作表和相应的列)。
这肯定不能仅仅通过ADF中的简单复制活动来处理。我在databricks中编写了scala代码，它处理了大部分处理过程。
我正在考虑使用ADF与Databricks一起编排流程。
我还想到了Azure函数应用程序，而不是databricks。
我对整个Azure领域都很陌生。
浏览 20提问于2022-03-20得票数 0
2回答
我想在雪花表中实现scd2。我的源表和目标表只存在于snowflake中。整个过程必须使用Azure数据工厂来完成。我浏览了azure提供的使用数据流实现scd2的文档，但当我尝试为snowflake connection创建数据集时，它显示为禁用。 有没有任何方法或任何文档，我可以看到步骤，在adf中创建雪花表的SCD2。 感谢vipendra
浏览 33提问于2020-06-10得票数 0
1回答
我最近在探索Azure purview，并试图将谱系信息从ADF推送到Azure Purview。然而，当我们在ADF (一种数据流的内联格式)中使用dataflow接收Delta格式的数据时，它似乎没有捕获谱系信息。然而，它捕获了使用“拼图”格式的“数据集”下沉时的谱系信息。是我在这里遗漏了什么，还是它是一个bug或需要解决的特性？
浏览 31提问于2020-12-10得票数 1
回答已采纳
ADF管道和ADF数据流有什么区别？为什么管道和数据流支持的汇/源是不同的？是否有可能创建一个管道来读取来自源的数据、筛选、使用连接并将数据存储到没有数据流的接收器中？请让我知道。
浏览 0提问于2020-05-14得票数 8
回答已采纳
2回答
我已经看到了许多在映射数据流中连接两个源的例子，但是不能清楚地理解这个概念，而且可能join毕竟不是我的问题的答案。
我在blob存储器中没有几个csv文件。
不同的名字和不同的列。例如：
CustomerSiteserviceVendor
从数据的角度来看，所有的表都与另一个表有某种连接。您可以使用Pk和FK轻松地在sql中将这些表连接在一起。
我想要的是，把所有这些表放到一个输出文件中。
我不确定是否应该在ADF数据流中使用Join，还是在复制活动中使用联合或合并？
有人能帮忙吗！
谢谢
浏览 0提问于2021-11-17得票数 0
2回答
我使用ADF管道将数据从数据湖复制到blob存储，然后从blob存储复制到表存储。
如下所示，下面是ADF数据流Sink - Blob存储(整数、字符串、时间戳)中的列类型：
以下是复制数据活动中的映射设置：
在检查表存储中的输出时，我看到所有列都是字符串类型的：
为什么表存储在字符串值中保存数据？如何在表存储中解决此问题，以便它将接受正确类型的列(整数、字符串、时间戳)？请让我知道。谢谢!
浏览 1提问于2020-06-02得票数 0
回答已采纳
2回答
下面是我的ADF管道的样子。在数据流中，我从源读取一些数据，执行筛选和连接，并将数据存储到接收器。我的计划是使用Azure Table Storage作为接收器。然而，根据的说法，ADF数据流不支持Azure Table Storage作为接收器。是否有其他方法可以使用Azure表存储作为数据流中的接收器？
浏览 1提问于2020-05-14得票数 1
1回答
我有一个ADF管道，它使用数据流中的基本转换。因此，数据流是非常简单的，这里没有什么复杂的事情。只有几个查找和派生列。
直到今天早些时候，它一直运行良好，但从下午开始，在超时的每一步都要预览输出数据。其中一个查找表有大约700万条记录，但直到今天早些时候它仍然显示得很好。我在Debug设置中更改了行限制，但输出数据预览仍在超时，没有任何结果。甚至派生列的数据预览也是超时。
无论如何，我想运行这个管道来查看加载到最后一个表中的内容。但这失败了，因为显然派生列获得了一些空值，并将其传递到接收器表结构中的NULL字段。所以，现在我真的需要预览步骤输出。
数据预览需要花费很长时间，然后就会出现错误和超
浏览 0提问于2021-09-11得票数 0
回答已采纳
1回答
我正在努力将一个SSIS包提升到Azure Data Factory V2中，并且我已经成功地设置了一个IR并执行了这个包。
现在，我正在尝试处理ADF格式的结果。此包最初设计为将记录集返回给调用客户端。现在我在ADF中，我想将包生成的记录集复制到表存储中。但是，我看不到从ADF管道中访问此记录集的方法。
是否可以从主机ADF管道访问和处理此记录集，或者是否必须修改包本身以不再返回记录集并执行复制？
浏览 0提问于2019-06-14得票数 2
我需要一个我正在做的项目的专家意见。目前，我们使用调用存储过程的本地脚本将数据文件加载到Azure sql数据库中。我计划用ssis作业替换脚本，将数据加载到Azure Sql中，但考虑到我们的需求，这是否是一个好的选择，我也可以接受不同的建议。我们所经历的过程是在对活动表进行更新之前将数据文件加载到暂存表并进行验证。验证和更新是通过调用存储的procedures...so来完成的，ssis包将只加载数据并调用这些存储过程。我看过ADF、IR和Databricks，但它们似乎有些过火，但我愿意听到有经验的人也使用这些工具。我目前也在本地运行ssis包。对于这个场景有什么更好的架构或工具的建议吗
浏览 5提问于2019-11-08得票数 2
回答已采纳
我们有500个CSV文件上传到Azure存储容器。这些文件使用4种不同的模式，这意味着它们有几个不同的列，有些列在所有文件中都是通用的。 我们使用ADF和模式漂移来映射接收器和源中的列，并能够写入文件。 但是这是不起作用的，它只对它为每个文件处理的第一个文件使用模式，这导致了数据问题。请在这个问题上提供建议。 我们运行了三种情况的管道，但问题没有得到解决。下面提到的问题在所有三种情况下都会发生： 1.不正确的映射，即来自A类型的Description和PayClass被映射到WBSname和Activity Name。2.如果其中一个文件(缺少列)中少了一列，也会干扰映射，即一个文件没有将组
浏览 19提问于2020-11-26得票数 2
2回答
我可以很容易地使用ADF UI为一个表设置SCD Type2流程，但我没有看到一种简单的方法来扩展到我们已经拥有的数千个数据源。我没有看到任何允许我编写ADF Pipeline/Dataflow并动态配置和触发它们的Java API。我查看了Azure Datalake Gen 2，Azure Databricks等。我在Azure中没有看到任何工具可以让我们取代我们内部构建的UI驱动的数据湖摄取过程。我是不是漏掉了什么？ 顺便说一句，我们有一个旧的数据湖应用程序，它从数千个数据源(如数据库、日志文件、web应用程序等)中摄取数据，并使用Java、Spark、Kafka等技术在HDFS (一
浏览 13提问于2020-01-11得票数 0
问题
为了在ADF中清晰地进行版本控制和代码评审开发，需要显示的可读性/可理解性差异。
ADF支持版本控制，方法是在不同的.jsons中定义所有对象，而在“脚本”中提供的SQL-查询格式是笨拙的:数据流.json的“查询”格式很笨拙(单行、换行符、与其他参数混淆等)。因此，在新添加或更改的情况下，不适合为适当的代码评审/版本控制显示很好的差异，参见下面的示例：
{
"name": "computeDataFlowName",
"properties": {
"type": "MappingD
浏览 4提问于2021-08-03得票数 0
在Azure Data v2 (通过Azure )中，我使用一个csv文件作为我的源文件，使用一个Azure表作为目标。在ADF中，我如何将csv文件中3列的值连接到数据库表中的一个字段中？它只给了我1到1列映射的选项。是否需要数据流元素，或者所有这些都可以在复制数据管道中完成？
FYI:这不是我问题的答案：
浏览 4提问于2019-09-25得票数 1
回答已采纳
很难为这篇文章想出一个合理的标题！
我正在从一个具有枚举列(Category)的源表(让我们称之为Books)复制数据：
ID Title Category
----------------------------
1 Test1 Education
2 Blah Leisure
3 Brown fox Leisure
...
所以在这个例子中，有两个枚举成员，教育和休闲。
接收器是SQL，我将获取不同的枚举值集合，并将它们放入查找表(本例中为Categories)。接收器中的Books表应该有一个名为CategoryId的外键列，该列引
浏览 15提问于2021-05-15得票数 0
1回答
尝试使用ARM模板将ADF数据流部署到多个环境。我能够部署数据流的硬编码脚本。但是我需要将脚本中的存储帐户容器参数化。
这是脚本的一部分
源( 'containerName'，)(allowSchemaDrift: true，\n\tvalidateSchema: false，\n\tignoreNoFilesFound: false，\n\tformat：'delimited'，\n\tcontainer：'，\n\true：'\'，\n\tquoteChar：‘\’'，\n \n\tcolumnNamesAsHeader: f
浏览 1提问于2022-03-24得票数 0
当我试图将datetime参数从管道传递到数据流存储过程时，我遇到了这个问题。我使用存储过程来获取完整或增量数据集。在查找中，管道看起来像这个pipeline，我得到的是'n/a‘或上次加载日期。要确定我需要完全加载还是增量加载。之后，我使用以下表达式将其传递给dataflow： LoadStartDate activity('GetLastLoadData').output.value[0].LastLoadedDate LoadEndDate if(equals(activity('GetLastLoadData').output.value[0]
浏览 32提问于2021-03-26得票数 1
回答已采纳
2回答
我有一个ADF管道，需要基于包含零星日期的csv文件来运行。
是否有这方面的实现？我唯一的想法是每天触发一个管道，它有一个databricks脚本来检查当前日期是否与文件中的日期匹配？
谢谢
浏览 4提问于2021-12-06得票数 1
我在ADF中有以下设置，我想将一个在set变量活动中设置的变量传递给我的数据流活动。我尝试过创建参数，但我无法这样做。有人能解释一下是怎么做的吗？
如您所见，我无法在数据流中的源选项中获得$token1值。
浏览 4提问于2021-11-18得票数 0
回答已采纳
1回答
我们如何在adf复制活动中访问预复制脚本的动态表达式中的列，因为我需要在加载到sql db之前修剪)子串来自源的多余字符。
有没有人能帮我学表达。
例如:假设我有一个名为'address‘的列，它的数据超过50个字符。是否可以在加载到接收器之前修剪此数据。
因为我不想在目标dB中进行更改，并且希望在加载之前处理它。
提前谢谢。
浏览 8提问于2020-05-06得票数 0
2回答
我有一个需求，需要在ADF管道中映射数据流与SQL存储过程之间进行选择，以实现一些业务场景。现在的数据量并不太大，但在稍后阶段可能会变大。业务逻辑有时很复杂，我必须连接多个表、编写子查询、使用windows函数、嵌套case语句等等。
我的所有业务需求都可以很容易地通过SP实现，但是考虑到数据流在下面运行，并且可以根据需要进行扩展，所以有一点倾向于映射数据流。ADF映射数据流在ADF管道中使用时是否优于SQL存储过程？我对映射数据流的一些关注如下。
使用数据流实现复杂逻辑所需的时间比存储过程要长得多，映射数据流的执行时间要高得多，考虑到旋转星星团所需的时间。
现在，如果我决定在管道中使用SQL
浏览 7提问于2020-09-15得票数 3
在我的数据流中，我有很多场景，我只是将数据从一个数据库插入到另一个数据库(表的名称在这两个数据库中都是相同的)。我希望避免重复操作，只需使用ADF ForEach即可。
因此，我用表名定义了管道的变量。然后，在ForEach活动中，我使用@item()作为我的数据流的参数，它是嵌套在其中的数据流。然而，我的问题在于：
我的键列总是表+ "ID“的名称，所以我想做一些类似于concat(@item()、"ID")的操作来使其工作。然而，这种“添加动态内容”不允许这样做。
在这个场景中，有什么方法可以引用ForEach活动中的项吗？
提前谢谢你！
浏览 1提问于2020-03-02得票数 0
回答已采纳
我最近开始学习Azure Data Factory，我使用了Informatica Powercenter for ETL。当我浏览本教程时，我遇到了ADF组件，如Pipeline、Dataset、Dataflow、Trigger、Integration runtime等，我如何将这些组件中的每一个都映射到Powercenter组件。例如，ADF中的数据流就像Powercenter中的映射。使用过这两种工具的人能帮助我理解这一点吗？
浏览 1提问于2021-09-27得票数 0
作为我们的治理计划和法规要求的一部分，我们需要生成一个世系(可处理性)报告，概述进入我们的仓库的数据流，以及使用其数据的报告或服务。我们知道，当DataStage将数据写入仓库时，信息治理目录可以自动生成这样的报告。当我们使用SQL脚本或其他工具向我们的仓库读取或写入信息时，信息治理目录可以做同样的事情吗？我可以查看包含这些不同信息的完整谱系报告吗？
IGC中有哪些步骤来记录或以其他方式定义信息的使用，以支持数据谱系和监管报告？
浏览 14提问于2019-07-13得票数 1
回答已采纳
我有一个数据流，它有一个参数：TableName。流中用作源的数据集将为TableName参数( Server数据集)进行参数化。在ADF数据流中选择源设置中的此数据集时，它不允许我设置TableName参数，就像在标准CopyActivity中设置源时一样。
那么，如果数据流不允许您设置参数，那么如何在数据流中使用参数化数据集呢？
UPDATE:设置实际上在DataFlow活动本身上。
浏览 0提问于2020-08-06得票数 2
回答已采纳
1回答
我的实际(工作不正常)设置有两个管道：
获取API数据到API :对于SQL中的元数据表中的每一行，调用REST并将应答(json-file)复制到。
将数据从湖泊复制到SQL:对于每个文件，在SQL中自动创建表。
结果是SQL中正确的表数。只有表格的内容不是我所希望的。它们都包含一个名为odata.metadata的列和一个条目，即元数据的链接。如果我手动从datalake中的JSON中删除元数据，然后运行第二个管道，那么SQL表就是我想要的。
拥有：
{ "odata.metadata":"https://test.com",
"
浏览 4提问于2021-07-14得票数 0
1回答
目标：
让我们考虑一个大规模的企业，我们有一个异构的数据存储，比如SQL服务器，非SQL存储，大数据存储，比如ADL，ADF..etc分布在不同的业务组中。
我们的目标是在企业级别构建一个谱系服务，它将提供对企业内不同数据存储实例之间的数据谱系的洞察。这将帮助我们深入了解企业中的数据激增。
为此，作为阶段1，我们希望以SQL server为例，并希望在SQL server及其数据库内部和跨SQL server及其数据库构建谱系。
有没有一种方法可以通过在实例内或跨实例利用SQL性能分析或事务日志，从SQL server构建/提取(如果可用)数据谱系(表和列级)。
我查看了，看起来SQL ser
浏览 18提问于2018-02-16得票数 0
4回答
我有和ADF管道，它从copies源读取数据，并将其复制到数据集中。
我想做一些数据检查：
如果数据包含我需要的功能
如果某些特性中为空
如果特性全部为空，则如果上述条件不满足，则应失败。
是否有一种方法可以在数据工厂中不使用批处理服务和仅在数据工厂中进行活动，或者不使用数据流。
浏览 13提问于2022-03-21得票数 1
回答已采纳
我一直在检查ADF提供的一些结果。我是这个工具的新手，我想更多地了解在使用触发器或调试选项运行ETL后看到的执行时间。 ? 我的问题是，为什么在过程结束时会有差异？Debug几乎是另一个的25%。当我执行一个带有触发器选项的ETL时，与调试相比，这会增加处理时间。
浏览 21提问于2020-06-18得票数 1
回答已采纳
我的管道应该首先检查表是否存在或not.If是否存在，它应该删除表并用相同的name.How加载新表，我可以在管道中获得这个要求吗？
浏览 3提问于2022-07-22得票数 0
如何将datetime参数传递给ADF/synapse分析中数据流活动源中的SQL查询？ 我正在构建一个在事实数据表中执行增量加载的synapse分析管道。首先，使用查找活动来查询表，以获得最新的LoadDate值。然后将返回值设置为变量，并将其作为参数传递给数据流活动。 ? 我正在努力让数据流正常运行。我尝试将SQL查询与'SetVariable‘活动中的筛选器值连接在一起，但得到的是’未定义存储配置‘。错误。当我只将转换后的LoadDate值传递给数据流活动中的源查询时，也会发生同样的情况： "SELECT top 10 * FROM dbo.facts WHER
浏览 43提问于2021-04-29得票数 0
回答已采纳
2回答
我在blob中有两个示例文件，分别为sample1.csv和sample2.csv，如下所示
SQL表名sample2，具有列名、id、姓氏、数量
创建一个没有模式的ADF流，其结果如下
源设置允许架构漂移检查。接收器设置是自动映射打开的。允许插入检查。表操作无。
我还尝试在dataset中设置定义架构，其结果是相同的。
这里有什么帮助吗？
我的预期结果是，sample1中的数据将插入null到列“姓氏”中。
浏览 2提问于2020-06-10得票数 0
回答已采纳
1回答
我正在执行以下查询：
select * from schema.country where country_code='abc' and country='INDIA'
在ADF数据流中。我从数据库中得到这个查询，所以我不想在数据流中硬编码它。所有数据流输入都是在执行时添加一个单引号。由于解析错误，数据流正在失败。
怎样才能避开单引号呢？
浏览 4提问于2022-07-15得票数 0
1回答
有没有一种方法来测试ADF中的表达式函数？
我想在触发器参数中添加这个表达式：@{adddays(utcNow(),-10)}
测试它的唯一方法是创建一个1分钟的触发器并查看它是否执行。相同的表达式不会在调试或手动触发器上工作，因为那里的文本框不会展开。
还有其他方法可以很容易地测试这些吗？
浏览 4提问于2021-02-25得票数 2
回答已采纳
1回答
我想更新目标csv文件(位于Azure中)，每天更新增量记录(delta文件位于blob中)。如果已存在的记录已更新，那么我希望在目标文件中更新相同的记录，或者如果增量记录是新的记录，则希望将该记录附加到蔚蓝数据湖存储中的Target文件中。我想用Azure数据工厂来实现这一点，最好是使用ADF数据流。
我正在尝试使用Azure Data数据流任务来完成这个任务，但我注意到可以创建新的目标文件，将合并后发布，但无法更新现有的文件。
如果我们可以更新目标文件，请告诉我是否有任何powershell或其他方式。
浏览 2提问于2019-07-26得票数 3
回答已采纳
通过编写以下活动，我将ADF用作将数据从Cosmos写入Kusto数据库的管道：
database.Rename 在Kusto数据库中创建临时表。将数据从cosmos复制到临时表。删除原始表，如果存在于Kusto 临时表中，则删除原始表。
所有这些更改都是我的GIT中JSON文件的一部分。
我在网上看到ADF中的调试过程没有发布更改，所以我无法看到Kusto数据库中的更改(临时表创建、数据复制、旧表删除、临时表重命名)。
如何在ADF中查看管道调试过程中的所有更改并进行验证(验证是否创建了正确的表名，并在临时表中正确转储数据)？
浏览 2提问于2021-06-11得票数 0
回答已采纳
1回答
我有下面的JSON结构，它由Azure表单Recognizer返回。
columnCount键提供了实际的列数。
我想将columnHeader =的单元格转换为Azure表的列
和其他单元格，在这些单元格中，有机物= null应该转换为行。
在ADF中实现这一目标的最佳方法是什么？
在ADF中使用扁平活动
在Azure函数中使用循环写入转换逻辑并返回CSV字符串
在Azure函数中使用像JUST.NET这样的库
备注：表单识别器返回的行数和列数将是动态的
{ "rowCount"：9，"columnCount"：2，“单元格”：[{“类”：
浏览 3提问于2022-03-20得票数 0
回答已采纳
我在ADF数据流中使用一个存储过程。我希望能够传递参数(AccountingPeriod)，只检索最后4个月的事务。
在SQL存储的Proc中，AccountingPeriod参数的格式是: MMM，多个可以加入“，例如Jun 2019，Jun 2021。
如何在ADF数据流表达式生成器中为该参数编写表达式以给出最后4个月的数据？我使用了下面的表达式，但我不认为它在我的情况下有效，因为在加载预览时我会得到一个错误。
浏览 10提问于2022-01-13得票数 0
3回答
条件分裂谱系错误
、、、、
我试图通过SSIS包和3个节点运行Excel表，它有一个条件拆分。我使用的是以前已知的工作电子表格，其中添加了一些数据。
具体而言，我遇到的错误是：
条件Split.InputsSplit Input.ColumnsColumnName具有以前未使用的血统ID 147。
我试过几个电子表格，但没有用。我刚拿到的是105号身份证。
我的具体问题是:ID对应于什么？我在哪里试着对它们进行故障排除？
一些额外的原木。
输出：
数据流任务1 SSIS.Pipeline中的错误:条件Split.InputsConditional拆分Input.ColumnsColumnName具有以前未在数据
浏览 7提问于2017-04-27得票数 4
回答已采纳
我对Azure的权限有疑问。如果您在Azure权限中添加了，并触发了，Azure权限将显示数据工厂和源以及水槽的详细信息。是在数据目录中搜索，还是我们需要在权限中注册这些源和接收器数据库并运行扫描。问这个问题是因为我的应用程序通过REST和REST与Azure集成，不是Azure权限中的一个源，而是Azure Data中的一个源。
浏览 3提问于2022-05-24得票数 0
我想通过Azure data Factory将我的数据从Oracle DB复制到Sink，这是ADLS Gen2。但我希望此复制是实时的，这意味着每当我的Oracle数据库发生更改时，都应该将其填充到ADLS存储中。如何通过ADF实现这一点？有什么好的建议吗？
浏览 34提问于2021-03-25得票数 0
2回答
Azure数据工厂在10毫秒内以Db传输数据，但我面临的问题是，等待几分钟才能触发下一条管道，并以40分钟结束--所有管道传输数据的时间都不到20 ms。但不知何故，它正等着几分钟才能触发下一次。
我还使用了调试模式，并使用Logic触发ADF，而没有调试情绪。有什么方法可以优化它吗?我们想要从SSIS转移到数据流，但是有时间问题，40分钟是那么多，在下一步我们有数百万的记录。
因此花了7秒时间将数据传输到dataBase，但它等待了6分钟:(查看下面的图像
浏览 1提问于2019-09-04得票数 1
回答已采纳
2回答
我对Integration Services还很陌生。是否可以有一个数据源将数据传输到多个数据目标，或者我是否必须创建与目标一样多的源？我有一个包含数据的CSV文件，我必须将这些数据分发到不同的表中。
浏览 1提问于2013-06-07得票数 23
回答已采纳
1回答
Azure Data数据流的成本是多少？账单是否取决于我们创建的数据流/集成运行时？此外，账单是否取决于我们从创建ADF数据流时开始运行管道还是开始计费？如果是这样的话，在Azure中是否有禁用/暂停ADF数据流帐户的选项？
浏览 4提问于2020-04-30得票数 2
回答已采纳
我尝试在ADF (Gen 2)数据流中使用派生列转换，其中我已经摄取了一个具有嵌套结构的Delta表。我正在努力解决展开这些结构所需的语法问题，尽管我能够预览数据，但没有显示任何列信息。
这样的结构将是：
{
"ContactId":"1002657",
"Name":{
"FirstName":"Donna",
"FullName":"Donna Brittain",
"LastName":"Brittain"
浏览 1提问于2020-10-28得票数 0
我需要一些明确的数据工厂和数据移动-数据工厂(v1和v2)都是只有在选定的少数几个区域，但数据移动在许多地区可用。我想了解Azure数据工厂和Azure数据运动之间的关系，因为它们与Azure区域()有关，如果它们是相关的或完全不同的产品。
例如，如果我在北欧有一个数据工厂，那么这个数据工厂处理的所有数据是否都会通过北欧地区，即使源和目的地都是在美国东部？我想要理解的是，Data是否在幕后做了什么聪明的事情，根据数据从和流向的位置，在最合适的区域使用数据移动服务。
第二个抽象示例是将数据从澳大利亚的blob存储加载到澳大利亚的SQL。我知道还有其他方法可以做到这一点，但是说我必须使用。ADF在
浏览 1提问于2018-05-09得票数 0
回答已采纳
2回答
我需要处理Azure数据工厂数据流中的减号操作。数据流是否支持此功能，或者是否有解决此问题的方法。请提供输入。我知道这可以使用SP活动或Databricks转换活动或其他方式来完成，但我想知道是否可以使用ADF中的数据流本身来完成。我有两个表，一个包含昨天的数据，另一个包含今天的数据，在使用减号的数据库中，我可以找到两个表之间的差异。例如，在表A中，记录存在为A，123，并且表B记录存在为A，456。当我执行减号操作时，它将获取此记录。
浏览 1提问于2020-01-13得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
