腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
谷歌的BigQuery对Azure
数据
湖
U
azure
、
google-bigquery
、
google-cloud-platform
、
azure-data-lake
、
u-sql
我试图了解谷歌的
大
查询和Azure data之间的区别或利弊。哪个更好?我已经彻底地寻找了什么是巨大的差异,但找不到它。
浏览 0
提问于2016-04-25
得票数 3
回答已采纳
7
回答
Hadoop Vs
数据
湖
hadoop
、
data-warehouse
、
data-lake
我听说了
数据
湖
这个新名词。我在谷歌上查到了
数据
湖
是一个大规模的存储库和处理引擎.
数据
池提供“任何类型的
数据
的大量存储、巨大的处理能力和处理几乎无限并发任务或作业的能力”。术语
数据
湖
通常与面向Hadoop的对象存储相关联。在这种情况下,组织的
数据
首先加载到Hadoop平台,然后将业务分析和
数据
挖掘工具应用于其驻留在Hadoop的商品计算机集群节点上的
数据
。我对Hadoop和
数据
<
浏览 8
提问于2016-03-14
得票数 16
2
回答
从
数据
湖
中检索
数据
到分析系统
hadoop
、
bigdata
、
analytical
我们在Hadoop文件系统中创建了一个新的
数据
湖
。
数据
以ORC的形式存储。目前分析系统直接连接到
数据
湖
来读取这些ORC文件。 有没有办法在
数据
湖
和分析系统之间创建一个中间层来服务
数据
?
浏览 16
提问于2018-10-04
得票数 0
2
回答
如何处理
数据
湖
vs
数据
仓库中的历史化
数据
?
data-warehouse
、
data-lake
在传统
数据
仓库中实现
数据
历史化是可能的(甚至是核心功能)。随着时间的推移,
数据
将被添加到
数据
仓库中,并且可以在
数据
中及时移动。 如果我只想使用
数据
湖
,并为业务用户提供
数据
历史化,这可能吗?
浏览 36
提问于2020-11-30
得票数 0
回答已采纳
2
回答
从头开始建
数据
湖
hadoop
、
data-warehouse
、
data-lake
我正试图从零开始
构建
一个“
数据
湖
”。我理解
数据
湖
是如何工作的,以及它的用途;它遍布互联网。但是,当问题出现时,如何从头开始建立一个,就没有来源了。我想知道如果: 我知道如何运行Hadoop并将
数据
导入Hadoop。我想在前提
数据
湖上建立一个示例来演示我的经理。任何帮助都是非常感谢的。
浏览 1
提问于2019-02-27
得票数 2
回答已采纳
1
回答
在AWS中,具有HDFS或S3的
数据
池之间有什么区别?
amazon-s3
、
amazon-ec2
、
hdfs
、
data-lake
我需要在AWS上
构建
一个
数据
湖
,但是我不知道S3和HDFS到底有什么不同。我在网上找到了一些答案,但我仍然不明白真正的区别。 我还需要知道是否有人在AWS中拥有HDFS和S3的
数据
湖
架构。
浏览 2
提问于2019-07-11
得票数 1
回答已采纳
1
回答
如何
构建
代表Azure的
数据
湖
(gen 2)的Docker镜像?
azure
、
docker
、
azure-data-lake
、
azure-data-lake-gen2
/tests/.my_test_env 如何
构建
Docker镜像来模拟Azure
数据
湖
(第2代)?我使用Python3SDK与
数据
湖
进行交互,文档在这里-- 。
浏览 3
提问于2020-08-27
得票数 2
1
回答
注册源选项中缺少的Azure权限源(SAP、HIVE、S3、“多源”)
azure
、
azure-purview
希望在订阅/帐户中注册所有
数据
源,但是缺少"Azure (多个源)“选项。其他来源(HIVE、SAP、AWS S3)也是如此。
浏览 2
提问于2021-01-19
得票数 1
回答已采纳
2
回答
天蓝色水滴存储与天蓝色
数据
湖
存储的区别
azure-data-lake
、
azure-blob-storage
对于像我这样的用户来说,这似乎是一种困惑,因为azure blob存储和蔚蓝
数据
湖
存储有什么主要区别,在哪个用户情况下,azure blob存储比蔚蓝
数据
湖
存储更适合,反之亦然? 谢谢。
浏览 9
提问于2020-04-05
得票数 4
回答已采纳
1
回答
与CTAS相比,创建外部表的利弊是什么?
sql
、
azure
、
azure-data-factory
、
azure-data-lake
、
azure-sqldw
我正在尝试
构建
一个Azure Data管道,它从Azure
数据
湖
中获取
数据
并对其进行转换。 在我看来,这其中的权衡并不明显。
浏览 0
提问于2019-04-17
得票数 1
回答已采纳
2
回答
HDFS和ADLS有什么区别?
hadoop
、
hadoop2
、
azure-data-lake
与HDFS不同的是,我对天蓝色
数据
湖
的存储方式感到困惑。有谁能简单地解释一下吗?
浏览 2
提问于2020-07-09
得票数 1
回答已采纳
4
回答
如何查询Azure
数据
湖
?
azure
、
azure-data-lake
来自
数据
库世界,当我们有与
数据
相关的东西时,我们使用ui工具来查询
数据
。不管是
大
还是小。有没有类似SSMS、SQL WorkBench (用于大
数据
红移)、雅典娜(查询大
数据
S3)的Azure
数据
湖
? 我看到只是查询
数据
并将其存储在文件中。是否有通过UI工具或WebBased工具查询Azure
数据
湖上的
数据
?
浏览 6
提问于2017-11-17
得票数 9
回答已采纳
1
回答
如何在不与整个
数据
进行比较的情况下进行增量加载?
apache-spark
、
hive
、
azure-data-factory
、
azure-databricks
我试图从我的on
数据
湖
增量加载到蔚蓝
数据
湖
gen2。我的源表非常
大
。当我运行上面的查询时,ADF复制活动需要花费大量的时间来加载。我认为文件处理条件是从源表中的所有记录开始检查的,所以这需要时间。
浏览 4
提问于2022-06-10
得票数 -1
1
回答
Azure Data factory中是否有任何选项可在从源系统复制
数据
时保留相同的日期格式
azure-data-factory-2
我正在使用Azure
数据
工厂复制活动将
数据
从Oracle Table复制到Azure data Lake。 只要我的日期格式是DD-MM-YYYY,azure就会把它们转换成DATE_TIME格式。
浏览 18
提问于2019-09-04
得票数 0
回答已采纳
1
回答
使用Kimball的星型模式和
数据
集市的
数据
湖
database-design
、
architecture
、
data-warehouse
、
databricks
、
data-lake
目标 更具体地说,在我的例子中: 2-3) A
浏览 0
提问于2020-09-15
得票数 1
回答已采纳
1
回答
这是验证Azure服务的正确和完整的身份验证方法列表吗?
java
、
azure
、
authentication
、
service
我使用Azure来
构建
我的Java项目。我需要认证一些Azure服务如下: 我在上找到了一个简短的文档,
浏览 2
提问于2021-01-14
得票数 0
回答已采纳
1
回答
如何在Apache beam中读取带有起始日期的pubsub消息
python
、
google-cloud-dataflow
、
apache-beam
、
google-cloud-pubsub
我有一个简单的工作,从pubsub读取历史
数据
与日期限制例如,我想读取消息从日期2020-04-10到2020-04-20,然后将消息保存在google存储桶中的单个文件中的每一天
浏览 4
提问于2020-06-10
得票数 0
4
回答
什么是
数据
湖
?
bigdata
我熟悉“大
数据
”的概念,但“
数据
湖
”与“大
数据
”有何不同?它是从大
数据
衍生出来的吗?请解释一下。
浏览 0
提问于2019-04-24
得票数 1
回答已采纳
1
回答
在单个事务中将
数据
从Azure Delta Lake和Azure data Brick加载到Postgres SQL (插入10个
数据
表并回滚以防止任何错误)
azure-databricks
、
delta-lake
、
azure-postgresql
我想从Azure delta lake加载
数据
(大约10个表)到azure postgressql。我尝试过在azure data tried中使用jdbc连接,我可以从delta到postgressql中插入和读取
数据
。但不能实现原子性(在单个事务中插入所有表
数据
)。你能帮助更好地连接天蓝色三角洲
湖
和postgressql,以及如何实现原子性吗?
数据
频率是每小时从源馈送的,
数据
量非常
大
。谢谢。
浏览 19
提问于2021-07-23
得票数 1
2
回答
搜索存储在Azure
数据
湖
中的
数据
azure
、
bigdata
、
full-text-search
、
azure-data-lake
、
data-lake
我有以下
构建
数据
湖
的用例(例如在Azure中): 我的组织处理濒临破产的公司。一旦一家公司破产,它需要把他们所有的
数据
交给我们,包括结构化
数据
(例如CSV)以及半结构化和非结构化
数据
(例如PDF、Word文档、图像、JSON、.txt文件等)。在这里拥有一个
数据
湖
会有所帮助,因为
数据
量可能很大,而且不可预测,Azure data看起来是一个相对低成本和可伸缩的存储解决方案。然而,除了存储所有这些
数据
之外,我们还需要为
浏览 1
提问于2020-01-07
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
企业级数据湖构建探索
平塘搭建智慧旅游平台 大数据促大旅游
Uber使用Apache Hudi构建了一个大规模事务型数据湖
数据湖实现商业价值的五大功能
《泰坦尼克号》电影与湖首关系大揭秘!——年度校友故事和湖首大数据汇总
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券