腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何
通过
管道
传递
用于
映射
CSV
文件
中
的
数据流
派生
列
的
列
模式
匹配
的
数组
?
azure-data-factory
、
azure-data-factory-2
我有一个带有
派生
列
的
映射
数据流
,其中我希望使用
列
模式
与使用in()
的
列
数组
进行
匹配
。 ?
数据流
在
管道
中
执行,在该
管道
中
,我根据一个变量设置参数$owColList_md5,该变量是从包含逗号分隔字符串
的
单行
CSV
文件
填充
的
?
浏览 24
提问于2020-04-16
得票数 0
回答已采纳
1
回答
在Azure Data中将
csv
中
的
两个或更多
列
的
值连接到单个
列
azure-data-factory
在Azure Data v2 (
通过
Azure )
中
,我使用一个
csv
文件
作为我
的
源
文件
,使用一个Azure表作为目标。在ADF
中
,我
如何
将
csv
文件
中
3
列
的
值连接到数据库表
中
的
一个字段
中
?它只给了我1到1
列
映射
的
选项。是否需要
数据流
元素,
浏览 4
提问于2019-09-25
得票数 1
回答已采纳
2
回答
在Azure数据工厂
映射
数据流
中使用参数化数据集
azure-data-factory
、
azure-data-factory-2
当
通过
数据工厂
映射
数据流
引用时,我在使用参数化数据集时遇到了问题。从blob存储
中
读取
CSV
文件
(作为参数<
浏览 1
提问于2019-11-02
得票数 4
2
回答
SSIS -从.
csv
导出到SQL
sql-server-2005
、
sql-server-2008
、
ssis
SQL 2008 : SSIS包我
的
SQL Table有一个额外
的
列
: SortCode。此列
的
值是
通过
变量追加
的
。
浏览 0
提问于2011-06-23
得票数 0
回答已采纳
2
回答
是否可以
通过
参数向md5函数
传递
列
的
动态列表
expression
、
md5
、
azure-data-factory
、
azure-data-factory-2
在Azure Data Factory v2
中
,我调用了一个来自
管道
的
映射
数据流
。
数据流
中
的
源和宿连接是参数化
的
,因此我可以对多个源/目标组合重用
管道
/
数据流
。但是,我想在
数据流
中
创建一个
派生
列
,它是特定源/目标组合
的
适当
列
的
md5散
列<
浏览 4
提问于2019-10-30
得票数 2
2
回答
Azure
如何
使用ForEach循环迭代
CSV
文件
中
的
记录
azure
、
csv
、
azure-data-factory
、
azure-data-flow
我所要达到
的
目标是:DocumentKey,DocumentName12212,银河系12233徒步旅行者指南,MoneyBall 我必须为
CSV
文件
中
的
每个行创建一个JSON
文件
,该
文件
将由另一个实用程序使用(每一行一个
文件
)。
浏览 0
提问于2020-09-18
得票数 0
1
回答
是否有方法将元数据从Azure Datafactory导出到
CSV
文件
?
azure-data-factory
、
azure-data-lake
、
azure-synapse
我打算使用Azure DataFactory将ADLS
文件
夹
中
的
文件
列表导出到
CSV
文件
中
。 File2现在,我正在使用Azure DataFactory
中
的
Get元数据活动来获取子项effectiveIntegrationRuntime":
浏览 16
提问于2022-01-12
得票数 1
2
回答
Azure Data
数据流
CSV
模式
漂移到地板静态目标删除
列
。有可能吗?
azure-data-factory
、
azure-data-flow
试图编写Azure Data
数据流
,以处理两个类似版本
的
CSV
文件
。Version 1
文件
有48
列
。Version 2
文件
有50
列
--与版本1相同
的
48
列
,但在末尾附加了2
列
。我想要创建一个目标拼板
文件
,其中包含所有50
列
加载到我
的
SQLDW
通过
多基地。历史上,我们在同一个blob源
文件
中有6000多个
浏览 3
提问于2020-01-27
得票数 0
1
回答
json对象上
的
数据流
转换,其中每个元素都是一个
数组
azure
、
azure-data-factory-2
、
azure-data-flow
、
data-transform
如何
转换以下json对象: {"IDpol": [406.0, 407.0, 412.0], "ClaimNb": [1, 1, 1], "Exposure": [0.77, 0.07, 0.84],Regular", "Regular", "Regular"], "Density": [360, 360, 5746], "Region": ["R91", "R91", "R11
浏览 3
提问于2022-10-13
得票数 0
回答已采纳
1
回答
在SSIS Foreach循环容器中提取
文件
名和更新表
sql-server
、
ssis
、
etl
、
foreach-loop-container
、
execute-sql-task
我有一个SSIS包,它有这个Foreach循环容器(带有
文件
枚举器),它从一个包含多个
CSV
文件
的
文件
夹
中
读取,然后将数据上传到一个平面表
中
。这很好,但是我
的
问题是还试图提取
文件
的
文件
名,然后在插入一行后填充平面表
中
的
最后一
列
。我还在
数据流
任务(在ForEach循环容器
中
)之后添加了一个执行SQL任务,希望它能
浏览 15
提问于2022-02-01
得票数 2
回答已采纳
1
回答
ADF
数据流
:无效列名
azure
、
azure-data-factory
我希望创建一个简单
的
azure数据工厂进程,从blob存储读取
文件
(
csv
),并使用
数据流
将其写入azure sql数据库。 源数据集有一个名为"myTime“类型为"string”
的
列
。我添加了一个“
派生
列
”,以添加一个名为"customTime“
的
新
列
,其表达式为"currentTimestamp()”。最后,在SQL接收器
中
,我将"custom
浏览 2
提问于2019-07-08
得票数 2
回答已采纳
2
回答
Azure Data -我们可以在
数据流
中
的
派生
列
中使用局部变量吗?
azure
、
variables
、
azure-data-factory
专家们,创建了一个新
管道
,并创建了一个变量"createDate“,值为”@utcNow“--我创建了一个”
数据流
“任务,在该任务
中
配置了我
的
源(一个简单
的
CSV
文件
),并添加了一个”
派生
列
“任务,因为我想在”
派生<
浏览 2
提问于2021-02-04
得票数 0
1
回答
我无法
映射
Azure (ADF)
中
的
漂移
列
azure
、
azure-data-factory
、
azure-data-flow
我无法在ADF
数据流
中
映射
漂移
列
。我可以手动,但这是不可能
的
,因为我有1020
列
。
文件
是.
csv
我看到一条消息:“这个漂移
的
列
不在源
模式
中
,因此只能用
模式
匹配
表达式引用。”我希望有一个地图漂移
数据流
从我
的
源数据。
浏览 5
提问于2022-11-29
得票数 0
1
回答
使用
数据流
以分层格式存储
文件
时发生Azure数据工厂错误
azure-data-factory
、
azure-data-factory-2
、
azure-blob-storage
、
dataflow
我正在使用Azure
的
数据流
活动来转换我
的
数据,并以分层格式将清理后
的
文件
作为
csv
存储在blob存储
中
。这是我
的
数据流
活动,在其中
的
派生
列
中
,我添加了年、月和日
的
列
,因为我希望我
的
文件
夹以这种格式构造 ? 添加了
列
以动态接受
列
中
<em
浏览 15
提问于2021-04-24
得票数 0
1
回答
自定义正在记录
的
OnError数据以在SSIS
中
执行Sql
ssis
我
的
SSIS包中有一个OnError处理程序。在
传递
给处理程序
中
的
执行SQL任务之前,我希望修改系统变量。在普通
数据流
任务上,我可以将数据源
传递
给另一个任务,
用于
派生
新
列
。这是我想要
的
这个功能,但是在错误处理程序
中
。但是,拖动
派生
列
任务需要输入,而我无法提供这些输入。
如何
使OnError系统变量
映射
到一些新
的
浏览 3
提问于2016-05-19
得票数 0
回答已采纳
1
回答
Azure数据工厂
中
的
缓存查找属性
azure
、
etl
、
azure-data-factory
、
azure-data-factory-2
、
azure-data-factory-pipeline
我有一个需求,在其中我有一个源
文件
,其中包含
映射
数据流
中
的
表名。基于
文件
中
的
表名-需要一个动态查询,其中
列
元数据以及其他一些属性从数据字典表
中
检索并插入到不同
的
接收器表
中
。
文件
中
的
表名将用作where条件筛选器。由于输入
文件
中
可以列出多个表(假设它是一个
csv
,其中只有一个<
浏览 0
提问于2021-03-05
得票数 0
2
回答
导出到
CSV
文件
时,SSIS
派生
列
中等于运算符in ="XXXX“
的
操作是什么?
ssis
、
transformation
我收到了一个由其他人构建
的
SSIS包。在其中一个控件
中
,从oledb数据源获取数据并将其放入
csv
文件
。它们是oledb数据源任务和平面
文件
目标任务之间
的
派生
列
。 然后将这些
列
重定向到
CSV
文件
。该
文件
再次被另一个
数据流
任务读取,该任务读取此创建
浏览 5
提问于2017-05-18
得票数 2
回答已采纳
1
回答
如何
在Az数据工厂
中
为嵌套Json
数组
创建独立
的
CSV
azure-data-factory
我可以使用DataFlow在ADF中将其扁平化,但是subject details
数组
可以保存很多值,我想为这些值创建单独
的
CSV
。
浏览 4
提问于2022-06-24
得票数 0
2
回答
架构漂移未按预期工作Azure DF (2种不同架构格式
的
多个
文件
)
azure
、
azure-data-factory
目标:我们有两个具有不同
模式
格式
的
样本数据集。我们
的
目标是使用单个
管道
加载源代码
中
存在
的
不同
模式
格式
的
文件
,因为我们不可能根据它们
的
模式
来分离源
文件
。数据被加载到具有附加结构
的
数据库
中
。我们已经在Azure数据工厂
中
创建了一个
管道
,它连接到源,并使用
派生
列
转换加载源
中
浏览 0
提问于2020-11-26
得票数 0
2
回答
使用天蓝色数据工厂在复制前使用剪裁
azure-data-factory-2
我有一个
管道
将
文件
从azure datalake复制到azure SQL。 - file `B.
csv
` is copied to `dbo.[B]` 问题 是否有一种通用方法可以在要复制
的
列
值上定义trim?
浏览 0
提问于2019-08-23
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
使用Pandas&NumPy进行数据清洗的6大常用方法
划重点!12种高效Numpy&Pandas使用技巧!
最全攻略:数据分析师必备Python编程基础知识
pandas入门教程
数据分析工具Pandas的数据结构学习
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券