7回答
我听说了数据湖这个新名词。我在谷歌上查到了
数据湖是一个大规模的存储库和处理引擎.数据池提供“任何类型的数据的大量存储、巨大的处理能力和处理几乎无限并发任务或作业的能力”。术语数据湖通常与面向Hadoop的对象存储相关联。在这种情况下，组织的数据首先加载到Hadoop平台，然后将业务分析和数据挖掘工具应用于其驻留在Hadoop的商品计算机集群节点上的数据。我对Hadoop和数据<
浏览 8提问于2016-03-14得票数 16
2回答
我们在Hadoop文件系统中创建了一个新的数据湖。数据以ORC的形式存储。目前分析系统直接连接到数据湖来读取这些ORC文件。
有没有办法在数据湖和分析系统之间创建一个中间层来服务数据？
浏览 16提问于2018-10-04得票数 0
在传统数据仓库中实现数据历史化是可能的(甚至是核心功能)。随着时间的推移，数据将被添加到数据仓库中，并且可以在数据中及时移动。 如果我只想使用数据湖，并为业务用户提供数据历史化，这可能吗？
浏览 36提问于2020-11-30得票数 0
回答已采纳
2回答
从头开始建数据湖
、、
我正试图从零开始构建一个“数据湖”。我理解数据湖是如何工作的，以及它的用途；它遍布互联网。但是，当问题出现时，如何从头开始建立一个，就没有来源了。我想知道如果：
我知道如何运行Hadoop并将数据导入Hadoop。我想在前提数据湖上建立一个示例来演示我的经理。任何帮助都是非常感谢的。
浏览 1提问于2019-02-27得票数 2
回答已采纳
2回答
我想更详细地了解数据仓库和数据湖。
可伸缩的存储存储库，保存大量原生格式的原始数据(“原样”)，直到需要时再加上可以在不损害数
浏览 0提问于2018-12-11得票数 1
我们将构建一个企业级应用程序。我们有一个现有的数据库。最好先使用EF代码，然后手工编写所有代码，这需要更长的时间，但可能更干净吗？或者我们应该使用EF数据库优先方法，使用EDMX (实体数据模型)？EDMX可以用于企业级应用程序，还是存在性能问题等等.？你有什么建议？谢谢!
浏览 4提问于2016-11-01得票数 4
回答已采纳
我需要在AWS上构建一个数据湖，但是我不知道S3和HDFS到底有什么不同。我在网上找到了一些答案，但我仍然不明白真正的区别。
我还需要知道是否有人在AWS中拥有HDFS和S3的数据湖架构。
浏览 2提问于2019-07-11得票数 1
回答已采纳
/tests/.my_test_env
如何构建Docker镜像来模拟Azure数据湖(第2代)？我使用Python3SDK与数据湖进行交互，文档在这里-- 。
浏览 3提问于2020-08-27得票数 2
希望在订阅/帐户中注册所有数据源，但是缺少"Azure (多个源)“选项。其他来源(HIVE、SAP、AWS S3)也是如此。
浏览 2提问于2021-01-19得票数 1
回答已采纳
对于像我这样的用户来说，这似乎是一种困惑，因为azure blob存储和蔚蓝数据湖存储有什么主要区别，在哪个用户情况下，azure blob存储比蔚蓝数据湖存储更适合，反之亦然？
谢谢。
浏览 9提问于2020-04-05得票数 4
回答已采纳
1回答
我正在尝试构建一个Azure Data管道，它从Azure数据湖中获取数据并对其进行转换。
在我看来，这其中的权衡并不明显。
浏览 0提问于2019-04-17得票数 1
回答已采纳
我需要建立一个能够从一个DataLake复制到另一个的管道，但是到目前为止，通过谷歌搜索，我找不到任何与之相关的东西，有人能给我指出正确的方向吗？非常感谢。
浏览 16提问于2018-02-21得票数 0
1回答
我已经成功地在Databricks中挂载了带有服务主体的ADLS，并且能够对数据进行必要的转换。
现在，我正在使用用户分配的托管身份来避免在代码中保留秘密。
浏览 6提问于2022-03-08得票数 0
我正在使用Azure数据工厂复制活动将数据从Oracle Table复制到Azure data Lake。 只要我的日期格式是DD-MM-YYYY，azure就会把它们转换成DATE_TIME格式。
浏览 18提问于2019-09-04得票数 0
回答已采纳
1回答
我们的目标是在企业级别构建一个谱系服务，它将提供对企业内不同数据存储实例之间的数据谱系的洞察。这将帮助我们深入了解企业中的数据激增。为此，作为阶段1，我们希望以SQL server为例，并希望在SQL server及其数据库内部和跨SQL server及其数据库构建谱系。有没有一种方法可以通过在实例内或跨实例利用SQL性能分析或事务日志，从SQL server构建/提取(如果可用)数据谱系(表和列级)。
我
浏览 18提问于2018-02-16得票数 0
我使用Azure来构建我的Java项目。我需要认证一些Azure服务如下：
我在上找到了一个简短的文档，
浏览 2提问于2021-01-14得票数 0
回答已采纳
我对Azure相当陌生，我只是尝试Azure数据湖分析。为了测试目的，我创建了一个新的Azure帐户，并且希望现在就删除它，但是在安装过程中，我使用了一个现有的Azure数据湖存储(ADLS)帐户作为默认的存储帐户。我现在知道我可能应该添加现有的ADLS作为关联的数据存储。
浏览 3提问于2017-08-18得票数 0
我有一个简单的工作，从pubsub读取历史数据与日期限制例如，我想读取消息从日期2020-04-10到2020-04-20，然后将消息保存在google存储桶中的单个文件中的每一天
浏览 4提问于2020-06-10得票数 0
我可以通过azure应用程序洞察力跟踪我的应用程序日志文件，并导出xls工作表( )，但是为了备份跟踪目的，我需要将所有日志文件存储到蔚蓝数据湖存储中。我需要在我的应用程序上调试这个问题，当我面对issues.but时，我得到了和继续导出sql，blob存储的链接，我不想要不必要的存储来将我的数据存储在蔚蓝资源中。因此，如果有任何方式连接应用程序洞察力到Azure数据湖通过连接器或plugins.IF，its，请您分享我的链接。
谢谢。。
浏览 2提问于2017-05-30得票数 5
云服务器
ICP备案
实时音视频
对象存储
云直播
腾讯云开发者
