在过去的几年里，我一直在使用DataStage、Kettle等ETL工具。现在，我在一家没有任何ETL工具的公司工作，该公司的ETL流程采用遗留的RPG (IBM )。他们想要迁移到ETL工具，所以我正在研究哪种工具是正确的。但问题是，从RPG转移到ETL工具将意味着重写所有ETL流程，因为我找不到可以
浏览 12提问于2019-09-09得票数 0
我有关于自动化数据转换过程的方法的问题。
我通常做的是使用python或postgresql转换数据，然后将处理后的数据导出为csv。之后，我将csv文件连接到Tableau。我做了一些研究，发现ETL可以提供帮助。然而，我看过一些ETL工具的演示视频，我不确定这些工具的转换功能是否能满足我的需求。例如，我已经为我的一个数据转换任务编写了ETL行；如果我可以使用PostgreSQL来运行查询，而不是使用100+<em
浏览 0提问于2021-02-20得票数 0
2回答
我知道，在ETL中，我们转换数据并在数据仓库中加载。除了上述两行外，它们究竟有何不同？
一个比另一个有什么优势？为什么仓库提供转换优势？在我的用例中，我在源ADLS (源层)中有源数据，当它使用azure Databricks时，我再次将数据摄取到我的ADLS (原始层)中，然后获取原始层数据并使用azure databricks转换数据现在，将最终层数据从ADLS复制到azure sql server db，如下所示。源ADLS
浏览 4提问于2022-10-10得票数 3
我非常了解SSIS，Informatica，用于执行ETL过程&将数据加载到数据仓库。我们可以用Hadoop代替ETL工具，比如Informatica用于ETL过程吗?
在这里，我基本上是在谈论关系表结构。我知道hadoop可以用于从非结构化数据中提取信息。
浏览 7提问于2014-05-29得票数 1
2回答
视图还是持久化表？
、、、、
在构建数据仓库时，我通常看到ETL过程的两种主要方法：方法一显然在数据库中，它的优点是您没有那么多冗余数据，但可能会导致性能问题。第二种方法可以通过存储过程和作业等许多工具或者像SSIS这样的ETL工具来完成。这里的优点是很容易理解这个过程，因为你可以很好地想象它。您通常也有一个非常好的整体ETL-性能和许多预定义的任务等。一个问题可能是，一个过程的改变是更复杂的，因为持久化的表必须
浏览 7提问于2015-05-30得票数 4
我想知道自动提取、转换和加载数据的非正式方法是否构成“ETL”。例如，我编写Excel代码，将数据库中的数据提取到电子表格中，将数据转换为所需的格式，并通过将Excel文件移动到正确的文件夹来加载。将此作为ETL展示给简历是否不正确？这有术语或行话吗？
浏览 0提问于2015-09-21得票数 5
1回答
寻找适用于200+分布式系统(Windows，AS400，Linux等)的ETL系统的任何建议。我没有从其中提取数据的任何系统，这使得这项任务变得更加困难，但可以安装客户端。
我用Java创建了一个原型客户机/服务器体系结构，并使用FTP进行传输，但我觉得它很脆弱。
浏览 2提问于2010-03-19得票数 0
嗨，有人能告诉我哪些ETL工具可以与hadoop的数据库Hbase一起使用吗？我的意思是说，像oracle数据库中的数据是如何被用来拉取数据和在Informatica和SSIS这样的工具中工作的，有没有什么ETL工具可以用于Hbase？请帮帮我。
浏览 0提问于2011-03-25得票数 1
1回答
数据库将处理客户数据(客户id、地址、电话号码等)以及关于特定客户受到了哪种广告的一些基本信息，以及他们对此的反应。
数据将从中央数据仓库维护，但有关客户和广告的其他信息也将从其他来源更新。我想我需要的是一个可以轻松分发给任何数量的代理的应用程序接口。所以我的问题是，这里的最佳实践是什么？我需要一个足够简单的解决方案为广告机构(可能与中等熟练的IT人员)来使用。简单性是最重要的-在这种情况下，我的意思是“简单性优于性能”。有什么建议吗？
浏览 4提问于2010-05-11得票数 0
回答已采纳
3回答
数据仓库的实际实现
、、、
我试图使自己熟悉它的概念，并遇到了一个问题，“从树林中看到森林”，因为我可以在网上找到的所有数据仓库模型和描述都是理论性的，但不要给出实际使用的技术的例子。然后，被称为"ETL“的过程将ODS中的数据转换为”数据库“，并再次转换为”数据“和/或”策略集市“。我想，一旦我看到一个具体的例子，在每一步的道路上，我
浏览 5提问于2011-09-30得票数 2
回答已采纳
1回答
我的东西是使用任何ETL工具，如kettle pentaho，它将实际做数据映射。我们有没有其他更好的选择来处理这种情况。
浏览 32提问于2020-07-09得票数 0
1回答
我的意思是，有一些转换，可以将信息添加到具有更正的表中，或者公司需要添加和修改的任何内容。它们具有server 2000转换，我需要将转换为选择、插入、更新到MySQL。如果是这样的话，我就不需要修改任何东西了，我可以复制那些选择等等。转化为MySQL。非常感谢你的回答！
浏览 5提问于2013-04-03得票数 0
2回答
Redshift中的增量加载
、、、、
如果OLTP数据库是驻留在本地的SQL Server，那么我们可以考虑像Attunity这样的工具，它可以帮助通过S3将数据加载到Redshift。Attunity在CDC中是智能的，它可以识别读取事务日志的更改，并可以相应地将更改应用到目标。但这种工具在ETL过程中应用转换逻辑的能力较差。我们可以使用Attunity在Redshift中的登台区域加载数据，并且可以从登台区域使用其
浏览 8提问于2014-12-14得票数 0
1回答
Hadoop会取代ETL吗？
、、、、
然后利用Informatica、Telend等ETL工具对Datamart/datawarehouse的事实表和维度表进行增量加载。所有连接都发生在数据库层(ETL将查询推入DB)这种架构的优点和缺点是什么？
浏览 2提问于2017-07-11得票数 0
回答已采纳
1回答
我们正在使用etl工具将数据从oracle迁移到mysql，其中源和目标位于不同的主机中。如果可能，请解释一个可行的解决方案
浏览 0提问于2014-03-25得票数 0
1回答
请有人指导我如何提取.docx文件并使用ETL(提取-转换-加载)或ELT(提取-加载-转换)工具将其加载到数据库中。假设.docx文件主要包含非结构化数据，那么它不是我应该使用的ELT工具而不是ETL吗
到目前为止，我发现的ETL和ELT工具不支持MS Word组件。还有什么方法可以提取.docx文件中的内容并将其存储到数据库中呢？这就像电子商务公司如何将客户评论转化为有意义的数据，这样他们就可以做出决定来提升自己
浏览 1提问于2021-09-10得票数 0
6回答
我们目前每天使用Datastage ETL从15个表(3个不同的模式)导出包含数据的CSV/文本文件。
我想知道是否有一种更简单的方法来完成这一点，而不是使用ETL。我试过斯克里泰拉。它看起来简单/快速，但它又是一个ETL。请建议..
浏览 18提问于2011-02-24得票数 4
回答已采纳
我需要获取数据，将其插入数据库，处理数据库(ETL)中的数据，然后使用“抛光”数据进行分析。--> wait for upload finish (run the two above u
浏览 16提问于2012-02-22得票数 0
回答已采纳
2回答
Spark能否取代ETL工具
、、、、
然后使用Informatica、Telend等ETL工具对数据仓库/数据仓库的事实表和维度表进行增量加载。所有的连接都发生在数据库层( ETL将查询推到数据库中)- Spark可以取代ETL工具并进行相同的处理并将数据加载到Redshift中吗？-这种架构的优点和缺点是什么？
浏览 1提问于2016-11-26得票数 10
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
