腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
在不符合ODBC的V2$文件上执行
ETL
我正在重新发布,因为我的上一个问题由于格式问题而被关闭… 我正在尝试从V2$文件格式中提取数据,一些常用的
ETL
工具,如Talend,
自定义
脚本等都不起作用,这些都是不符合odbc的文件。我一直无法找到专门做
ETL
的脚本或工具。该文件由一个名为Avimark的兽医实践管理系统使用。我正在寻找关于如何做
ETL
的建议。谢谢&节日快乐!
浏览 3
提问于2015-12-21
得票数 0
2
回答
使用Amazon Kinesis Firehose按同一密钥聚合数据
、
是否可以使用AWS Kinesis firehose
自定义
分区执行此操作?
浏览 0
提问于2021-01-20
得票数 0
1
回答
ETL
在各种算法处理方面的局限性
、
、
、
、
我想知道
ETL
不能解决的问题。正如我们都知道的,我们可以提取数据,进行一些转换和处理,并将转换后的数据存储到数据存储中,在
ETL
中处理也可能非常复杂。那么,如果除了使用J2EE构建UI应用程序之外,一切都可以使用
ETL
完成,那么编写Java代码的范围是什么呢? 哪种算法在
ETL
中运行良好,哪种类型的算法应该在
ETL
之外运行。在这方面,我更喜欢谈论
ETL
工具,而不是
ETL
这个概念,比如Talend是一个自动生成代码(特定于
ETL
供应商是如何实现的)的工具
浏览 0
提问于2015-08-14
得票数 0
1
回答
如何在完成Python脚本的基础上触发Azure Data?
、
、
之后,我将执行一些
ETL
操作,并在PowerBI中使用该结果。示例::脚本在早上8点结束。为了构建一些空间,预定的Data运行时间是早上8:30。(FYI:之后,当
ETL
操作完成时,PowerBI报告会自动刷新) 使用这些工具的: Microsoft Azure Data Factory 或 Microsoft Azure Synapse Analytics
浏览 10
提问于2022-07-19
得票数 0
回答已采纳
2
回答
Windows中两种
ETL
跟踪文件的比较
我有一个
自定义
ETW日志的应用程序。我使用XPERF侦听这些通道并打开
ETL
跟踪进行分析。谢谢
浏览 1
提问于2012-12-31
得票数 1
回答已采纳
1
回答
AWS Glue S3 VPC端点策略问题
、
、
、
当我为AWS胶水服务创建
ETL
端点以从redshift群集卸载数据时,S3作业仅在VPC端点策略设置为“完全访问”时才起作用。Effect": "Allow", "Principal": "*" ]当策略设置为“
自定义
"arn:aws:s3:::examplebucket/*"],
浏览 14
提问于2017-08-30
得票数 1
2
回答
使用BizTalk 2006连接记录
、
我想用BizTalk来解决一个问题,并希望您能对解决这个问题的最佳方法有一些想法。我正在使用平面文件适配器加载平面文件。此文件包含多个不同类型的记录。类型1记录是父记录。其余类型都使用各种外键链接到父记录。我希望开发一个转换,它将使用通过加载平面文件(包含所有类型的记录)创建的消息,并将其转换为一条消息,该消息是根据外键连接所有记录的结果。因此,结果消息中的每个记录都将包含来自所有记录类型的列,因为消息记录将是连接的结果。* Type1* Type2* Type3* Type4 转换后的消息可能包含如下记
浏览 5
提问于2009-04-17
得票数 1
1
回答
在
ETL
项目中进行自动化端到端测试的最佳方法是什么?
、
、
、
、
我们有一个
ETL
项目,其中数据从一个UI应用程序流到一系列应用程序(转换/逻辑)中。 整体的座右铭是在“UI 2”中看到“UI 1”的数据。
浏览 28
提问于2020-09-04
得票数 0
2
回答
aws胶水python shell作业与火花作业的最佳用例是什么?
、
、
一直使用aws胶水python shell作业来构建简单的数据
etl
作业,对于spark作业,只使用过一两次用于在JDBC数据上转换为orc格式或执行星火sql。
浏览 8
提问于2020-02-07
得票数 6
回答已采纳
1
回答
Grails。如何向我的数据库发送请求也请参阅更改
、
、
如何向我的数据库mySql发送请求,然后检查是否有更改,以便在有更改时可以刷新div?这是我的代码。它只是每隔5秒自动刷新一次加载函数,以便将新的更改应用到表中。我不知道如何向我的数据库发送请求以查看更改。 Loading........ $(function refresh(){ setInterval(function(){refresh()},5000)
浏览 1
提问于2014-03-04
得票数 0
6
回答
我需要
ETL
吗?
我们目前每天使用Datastage
ETL
从15个表(3个不同的模式)导出包含数据的CSV/文本文件。 我想知道是否有一种更简单的方法来完成这一点,而不是使用
ETL
。我试过斯克里泰拉。它看起来简单/快速,但它又是一个
ETL
。请建议..
浏览 18
提问于2011-02-24
得票数 4
回答已采纳
1
回答
将
自定义
遥测发送到Application insighst的过程是否考虑
ETL
?
、
当我们从我们的应用程序中发送
自定义
遥测到应用程序洞察时,它是否会被视为
ETL
过程?
浏览 15
提问于2021-06-16
得票数 0
回答已采纳
1
回答
使用Java
自定义
宾得勺组件
、
、
、
、
在过去,我有很多使用SSIS的糟糕经验,所以当时我决定使用C#开发自己的
ETL
。实际上,.Net只执行提取步骤。数据被插入到DB中,其余的
ETL
由MSSQL查询引擎从txt文件中的普通SQL执行,由.Net在MSSQL中读取和执行。 我的想法是从.Net转到Java,并使用Spoon特性。例如,带有重音的字母被分隔符替换,所以我不能仅仅告诉
ETL
工具使用分隔符来拆分列,我首先需要验证存在多少分隔符,如果有更多的分隔符,就处理它。所以,我的想法是正常使用Spoon的GUI来构建
ETL
。然后使用Eclipse通过其SDK进行开
浏览 2
提问于2017-08-22
得票数 0
回答已采纳
1
回答
如何使用Azure data中的
自定义
脚本来转换数据?
、
、
、
我们目前正在使用DataStage进行
ETL
处理。我们有很多
自定义
脚本来转换数据-例如 我们正在用Azure数据工厂取代DataStage。Azure Data有能力使用
自定义
脚本进行转换吗?如果是的话,请参考.
浏览 3
提问于2022-01-15
得票数 1
回答已采纳
1
回答
使用LINQPad 5+ TX (LINQ to Traces)消费服务结构本地集群ETW事件的指导?
、
、
、
直接或在将它们保存到
etl
文件之后。 我已经使用在使用服务结构有状态服务模板时创建的ServiceEventSource类发送了
自定义
日志消息。我尝试过使用LinqPad,这很不错,但我似乎不能A)找到会话的名称,或者B)在调试我的服务fabric服务时找到任何.
etl
文件的保存位置。我还尝试使用PerfView来捕获和创建.
etl
文件。我使用“机器范围”进行聚焦处理,并将
etl
数据发送到我的桌面。我保留了默认的500mb文件,在Visual Studio诊断事件选项卡中看到消息之前,我没有点击该文件。然
浏览 21
提问于2019-06-01
得票数 1
回答已采纳
1
回答
在两个不同的数据库之间同步数据
、
、
、
如果我使用
自定义
脚本,或者是否有一个工具可以处理preocess,那么可以将数据从SQL推送到MySQL服务器(不需要从MySQL提取数据)。
浏览 1
提问于2012-01-24
得票数 2
1
回答
将liquibase数据更新为大写
、
、
我在liquibase有张桌子。我想从该表中检索特定"type“的" name”字段,然后将name转换为大写。我如何使用changeset或ServletContextListener来做同样的事情?
浏览 3
提问于2014-09-25
得票数 0
1
回答
EclipseLink生成的id,而非jpa进程也在添加记录。
、
、
(optional = false)@Column(name = "ID")问题是无论我使用哪种生成策略,我都会收到错误,因为我有一个插入记录的
ETL
例如,如果JPA生成器刚刚为一条新记录生成了id49,那么
ETL
工具就会生成20条ID为50-70的记录,当我创建另一条eclipse链接记录时,生成器会得出50作为已经使用过的id。
浏览 2
提问于2016-03-04
得票数 0
3
回答
气流-不能导入
自定义
插件
、
、
这里是我的项目的简化版本:├── dags└── plugins └── operatorsname = "custom_plugin" DumpCsvFileToPostgres helpers = [] 破碎的DAG: /root/气流/dags/
etl
浏览 1
提问于2019-08-06
得票数 0
1
回答
OrientDB中的自动边缘创建
我试图使用OrientDB来映射由多个不同系统管理的服务器之间的关系(有一些重叠)。假设来自每个系统的每个服务器都是一个顶点,是否有一种方法可以在具有相同属性的两个服务器(例如IP地址)之间自动创建边缘?System, Name, IPAlpha, compute-1, 192.168.0.1Beta, storage-1, 192.168.0.1 Beta, storage-
浏览 1
提问于2016-06-08
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
什么是ETL
ETL-KETTLE工具使用
Talend ETL 性能调优宝典
信息科技 ETL工程师
ETL-全量与增量
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券