腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何使用SAS代码更新另一个表中的
数据
sql
、
sas
我正在做
ETL
从第三方应用
数据
库到自己的
数据
库。这个
ETL
将每天执行。因此,我需要插入新的记录,并更新现有的记录到我的
数据
库。插入并不是问题,但我不太确定如何使用SAS代码进行更新。
浏览 20
提问于2022-06-02
得票数 0
2
回答
在
数据
仓库中同步
ETL
和读取
sql-server
、
synchronization
、
data-warehouse
、
etl
我有下面的场景 如果正在加载
ETL
并请求报表,则报表必须等待
ETL
完成。如果
ETL
正在等待加载并请求报表,则报表必须等待
ETL
运行并完成-
ETL
始终比
浏览 3
提问于2012-08-21
得票数 1
回答已采纳
1
回答
创建通用PowerBI模型,以便在多个客户端站点部署和填充
ssis
、
ssas
、
powerbi
每个客户端将以不同的方式存储
数据
的版本(ERP、SQL、Excel、CSV等)。 我的问题是如何&在哪里构建这个模型,以及如何填充它。应该在PowerBI桌面中构建模型,然后使用PowerQuery附加查询加载
数据
吗?或者,是否应该在Server中构建模型,而更传统的
ETL
脚本应该先填充它,然后导入到PowerBI中呢?
浏览 3
提问于2017-05-16
得票数 2
1
回答
显式跳过DAG时的松弛通知
airflow
、
slack
、
slack-api
在我的用例中,如果当前的
数据
是空的,并且正常工作,我的
ETL
将引发AirflowSkipException。但这将向我的松懈发送成功通知。我想知道是否有类似于on_skip_callback的东西,或者有一种方法可以将我的DAG跳过当前的
数据
发送到我的空闲时间。任何帮助都会是appreciated.Thanks 编辑:为我的
ETL
添加了代码引用。
数据
点是从
数据
库中获取的,它可以日复一日地更改,有时如果没有要处理的
数据
,则
数据
点将为空,反之亦然。
浏览 9
提问于2020-05-15
得票数 3
回答已采纳
1
回答
ETL
在各种算法处理方面的局限性
java
、
mapreduce
、
apache-pig
、
etl
、
talend
我想知道
ETL
不能解决的问题。正如我们都知道的,我们可以提取
数据
,进行一些转换和处理,并将转换后的
数据
存储到
数据
存储中,在
ETL
中处理也可能非常复杂。那么,如果除了使用J2EE构建UI应用程序之外,一切都可以使用
ETL
完成,那么编写Java代码的范围是什么呢? 哪种算法在
ETL
中运行良好,哪种类型的算法应该在
ETL
之外运行。在这方面,我更喜欢谈论
ETL
工具,而不是
ETL
这个概念,比如Talend是一个自动生成代码(特
浏览 0
提问于2015-08-14
得票数 0
2
回答
没有
数据
库引擎安装集成服务有什么意义?
sql-server
、
ssis
我的理解是,sql server的
数据
库引擎特性使我们能够创建
数据
库。在“实例功能”下,可选择“
数据
库引擎服务”来承载SSIS目录
数据
库SSISDB,以存储、管理、运行和监视SSIS包。 在安装集成服务时,不选择
数据
库引擎服务的目的是什么?从上面引用的文档中可以清楚地看到--如果我们不选择
数据
库引擎,那么我们就不能承载SSIS目录
数据
库(ssisdb)。那么,这种安装的目的是什么呢?
浏览 0
提问于2021-08-17
得票数 0
1
回答
触发物化视图刷新- AWS Lambda
amazon-web-services
、
aws-lambda
、
amazon-redshift
我希望物化视图在Redshift集群上完成每日
ETL
进程之后刷新。是否有一种方法可以在Redshift集群上的特定SQL命令完成后触发lambda函数?
浏览 4
提问于2021-06-18
得票数 0
回答已采纳
1
回答
您可以在ScalaTest中多次运行测试套件吗?
scala
、
scalatest
但是,我希望创建一个通过
ETL
过程运行两次的测试--例如:我从Reporter那里得到了一个错误,因为它不能运行与以前运行的套件同名的套件(例如,我不能运行名为<em
浏览 1
提问于2020-04-06
得票数 0
2
回答
数据
仓库-构建
ETL
模板
sql-server
、
etl
、
data-warehouse
我的公司正试图建立一个庞大的企业
数据
仓库,我们公司决定聘请一家咨询公司来建立它。想出一个
ETL
模板需要多长时间?我们正在构建一个sql server 2012
数据
仓库。我们正处于获得项目计划的阶段,我们对
数据
仓库周期非常陌生。任何帮助都将不胜感激。
浏览 1
提问于2014-03-19
得票数 0
回答已采纳
6
回答
我需要
ETL
吗?
etl
我们目前每天使用Datastage
ETL
从15个表(3个不同的模式)导出包含
数据
的CSV/文本文件。 我想知道是否有一种更简单的方法来完成这一点,而不是使用
ETL
。我试过斯克里泰拉。它看起来简单/快速,但它又是一个
ETL
。请建议..
浏览 18
提问于2011-02-24
得票数 4
回答已采纳
1
回答
雪花故障转移-复制机制
amazon-web-services
、
data-warehouse
、
snowflake-cloud-data-platform
、
snowflake-schema
--基本上,故障转移策略是基于
数据
库在同一组织位于不同区域的两个不同帐户之间的复制特性。不过,在发生意外事件时,我的二级
数据
库一旦被提升为主
数据
库,将有基于上次完成的更新的
数据
版本,这意味着我可能会部分丢失在中断之前执行的整个新
数据
/转换。这让我思考: 有什么方法可以将丢失的
数据
尽可能地减少到雪花中的故障转移设计中,而不只是将复制任务安排在1分钟?在已经解决了中断并需要将主DB带回的场景中,如何管理无法复制到辅助DB但与我可以生成的新
数据
合并的部分
浏览 3
提问于2019-11-18
得票数 0
回答已采纳
1
回答
由于
数据
源不同,事实表没有连接到dim。
data-modeling
、
data-warehouse
、
snowflake-cloud-data-platform
我有一个事实表,用于从源A获取
数据
。这不仅仅是一个简单的
数据
拉扯,因为它需要一些认真的清理。将
数据
从源B中提取到暂存表。 通过代理键将点心表与事实表连接起来?
浏览 0
提问于2019-05-16
得票数 0
回答已采纳
2
回答
是否需要
ETL
测试环境?
etl
我们是否需要为
ETL
测试建立单独的测试环境? 第二,一旦
数据
加载到暂存阶段,测试就开始了,还是等到它到达目标为止?同样,应该在哪个环境中进行测试?
浏览 0
提问于2016-09-01
得票数 3
1
回答
将
数据
从2个MySQL
数据
库查询到一个新的MySQL
数据
库
mysql
、
sql
、
database
、
merge
、
data-warehouse
我希望将来自两个不同MySQL
数据
库的
数据
查询到一个新的MySQL
数据
库。 我有两个
数据
库,里面有很多不相关的
数据
,我想要创建一个
数据
仓库,其中只有相关的
数据
来自这两个
数据
库。到目前为止,所有的
数据
都被发送到两个旧的
数据
库,但是我希望有计划的更新,这样新的
数据
库就能跟上速度。这两个
数据
库之间有一个键,所以在最好的情况下,我希望所有的
数据
都出现在一个表中,但是这并不
浏览 1
提问于2018-06-21
得票数 0
回答已采纳
1
回答
跨多个SQL
数据
库并行执行SSIS (
ETL
)
sql
、
performance
、
ssis
我有多租户
数据
库(每个客户一个DB )。目前,我们已经将SQL内存设置为60 %的RAM,并一次在一个站点上运行
ETL
。 是否可以同时跨多个站点/
数据
库运行
ETL
?注:在
ETL
执行过程中,由于
ETL
使用最大RAM,其他操作将很慢,因此想知道两个
ETL
能否在不同的
数据
库中在相同的位置运行。
浏览 8
提问于2022-03-17
得票数 0
2
回答
构建
ETL
用于将
数据
加载到Snowflake -存储
ETL
元
数据
etl
、
snowflake-cloud-data-platform
当构建
ETL
/ELT进程将
数据
加载到Snowflake
数据
仓库(在Azure上运行)时,我正在寻找关于在哪里最好地存储
ETL
元
数据
的建议。
ETL
元
数据
指的是编排复杂
ETL
工作流所需的表格
数据
--例如,进程之间的依赖关系,每个进程的当前状态信息,我们可以在
ETL
中用来迭代要加载的各个
数据
源的“控制表”,等等。在构建于SQL Server之上的遗留EDW中,我们不仅可以使用SQL Server
浏览 4
提问于2021-01-08
得票数 2
2
回答
使用logman收集
数据
windows
、
logging
我尝试使用logman而不是DDK tracelog来收集使用WPP的应用程序生成的*.
etl
数据
,但在读取
etl
文件并使用traceview解码*.fmt信息后,无法看到任何
数据
(在*.
etl
中)。我像这样生成*
etl
logman start "Session“-o "Trace.
etl
”-p "{28EE579B-CF67-43b6-9D19-8930E7AAA131}“-ets logmanstop "Session”-e
浏览 0
提问于2012-04-19
得票数 0
回答已采纳
2
回答
Spark能否取代
ETL
工具
amazon-web-services
、
apache-spark
、
etl
、
data-warehouse
、
pyspark-sql
现有的流程原始结构
数据
被复制到Redshift的登台层。然后使用Informatica、Telend等
ETL
工具对
数据
仓库/
数据
仓库的事实表和维度表进行增量加载。所有的连接都发生在
数据
库层(
ETL
将查询推到
数据
库中)- Spark可以取代
ETL
工具并进行相同的处理并将
数据
加载到Redshift中吗?-这种架构的优点和缺点是什么?
浏览 1
提问于2016-11-26
得票数 10
1
回答
数据
转换和传输有什么区别?
migration
、
data-warehouse
、
etl
ETL
过程和
数据
仓库中的“
数据
转换”和“
数据
传输”在含义上是否有区别?或者这两个概念都可以在这种情况下互换使用? 谢谢
浏览 0
提问于2016-04-23
得票数 0
2
回答
在Oracle 9i中的两个
数据
库之间迁移
数据
oracle
、
oracle9i
由于我们重写了早期的应用程序,因此必须将
数据
从Oracle 9i中的早期
数据
库迁移到具有完全不同结构的新
数据
库,也是在9i中。列名和类型将完全不同。我们需要映射表和列,尝试导出尽可能多的
数据
,消除重复项,并用默认值填充空值。谢谢, 查克。
浏览 3
提问于2009-11-06
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
ETL-数据清洗过程
走进大数据 ETL-Load
大数据平台架构+ETL
数据准备:让ETL敏捷起来
走进大数据 ETL-Transform
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券