1回答
湖泊形成控制表的底层格式/技术
amazon-web-services、architecture、aws-lake-formation
湖的治理表使用什么数据格式/技术？会是Hudi吗？如果不是Hudi，新的格式/技术与Hudi相比如何？
浏览 5提问于2021-02-03得票数 3
1回答
您能使用多个EMR集群运行事务性数据池(Hudi、Delta Lake)吗？
amazon-web-services、amazon-emr、delta-lake、apache-hudi
我正在研究几种“事务性数据湖”技术，如Apache、Delta、AWS格式治理表。您发现的任何轶事或性能限制都将不胜感激！
浏览 1提问于2021-10-16得票数 3
2回答
S3湖形成治理表和databricks增量表之间的主要区别是什么？
amazon-s3、databricks、delta-lake、aws-lake-formation
S3湖形成治理表和databricks增量表之间的主要区别是什么？他们看起来很像。
浏览 10提问于2021-12-06得票数 8
回答已采纳
1回答
如何使用用户分配的标识从数据库访问ADLS容器
azure、azure-databricks、azure-managed-identity、azure-data-lake-gen2
我已经成功地在Databricks中挂载了带有服务主体的ADLS，并且能够对数据进行必要的转换。
现在，我正在使用用户分配的托管身份来避免在代码中保留秘密。
浏览 6提问于2022-03-08得票数 0
1回答
使用Kimball的星型模式和数据集市的数据湖
database-design、architecture、data-warehouse、databricks、data-lake
目标
更具体地说，在我的例子中：
2-3) ADLS +
浏览 0提问于2020-09-15得票数 1
回答已采纳
1回答
Azure权限扫描显示“错误：(3913) JavaException:必须安装Java 8或更高版本”。
java、azure、azure-databricks、delta-lake、azure-purview
我们有可以查询数据的三角洲湖。我们还将其与Power连接，以制作交互式仪表板。正在生产中。现在，我们希望使用Azure权限来利用这个三角洲湖之上的所有数据治理和数据目录。
浏览 4提问于2022-08-09得票数 0
回答已采纳
1回答
如何使用python对azure-data-lake中的文件应用elasticsearch？
python、elasticsearch、azure-data-lake
这些文件存在于azure数据湖中，我需要对这些文件应用弹性搜索(这些文件可以是.pdf、.csv、.xlsx、.doc)。使用python django。
浏览 1提问于2019-10-17得票数 0
3回答
数据库、Synapse和ADLS gen2的数据治理解决方案
azure、architecture、databricks、data-lake、azure-data-catalog
我是数据治理的新手，如果你问我缺少一些信息，请原谅。我们正在Azure平台上为中型电信公司从头开始建立数据湖和企业数据仓库。问题我的工作间从数据治理的角度来看，我们只做了以下几件事：
在ADLS中定义数据</e
浏览 7提问于2020-05-11得票数 5
1回答
数据体系结构-全天蓝色堆栈与集成的三角洲湖
azure、databricks、delta-lake
当前架构- Azure Stack多源通过Azure数据库存储到Azure数据湖Gen2 Azure数据库清理数据并将其存储回Azure数据湖Gen2中:原始的、干净的使用摄食层加工和装载层
(相同) Azure数据库清理数据并将其存储回Azure数据湖Gen2中，分
浏览 5提问于2021-12-10得票数 0
3回答
如何将数据从AWS S3加载到Snowflake Internal Stage
database-migration、snowflake-cloud-data-platform
我们正在尝试从亚马逊网络服务S3 (外部阶段)获取数据，并将其加载到雪花内部阶段。Snowflake应该作为我们的数据湖，可以减少我们从AWS使用的存储量。有没有内置的功能可以从外部stage -->内部stage传输数据？ 目标是将数据加载到内部Snowflake阶段，然后从AWS中删除数据。我们希望Snowflake成为数据湖。
浏览 49提问于2020-07-28得票数 0
1回答
如何获取添加到wso2治理注册表中的资源(如wsdl )的物理路径？我想解析它，所以需要它的物理路径。
提前谢谢。
浏览 1提问于2014-01-24得票数 0
回答已采纳
3回答
AWS湖形成: s3://abc/的湖形成许可不足
amazon-web-services、amazon-s3、aws-lake-formation
我正在尝试从AWS湖编队控制台设置一个数据集。我按照下面的资源进行同样的操作：对s3的湖形成许可不足：
有人能帮上忙吗
浏览 0提问于2020-09-15得票数 10
7回答
Hadoop Vs数据湖
hadoop、data-warehouse、data-lake
我听说了数据湖这个新名词。我在谷歌上查到了
数据湖是一个大规模的存储库和处理引擎.数据池提供“任何类型的数据的大量存储、巨大的处理能力和处理几乎无限并发任务或作业的能力”。术语数据湖通常与面向Hadoop的对象存储相关联。在这种情况下，组织的数据首先加载到Hadoop平台，然后将业务分析和数据挖掘工具应用于其驻留在Hadoop的商品计算机集群节点上的数据。我对Hadoop和数据<
浏览 8提问于2016-03-14得票数 16
2回答
从一个DataLake到另一个DataLake的Azure数据工厂复制
azure-data-lake、azure-data-factory-2
我需要建立一个能够从一个DataLake复制到另一个的管道，但是到目前为止，通过谷歌搜索，我找不到任何与之相关的东西，有人能给我指出正确的方向吗？非常感谢。
浏览 16提问于2018-02-21得票数 0
1回答
将Azure应用程序Insight日志文件导出到Azure数据湖存储
azure、azure-application-insights、azure-data-lake
我可以通过azure应用程序洞察力跟踪我的应用程序日志文件，并导出xls工作表( )，但是为了备份跟踪目的，我需要将所有日志文件存储到蔚蓝数据湖存储中。我需要在我的应用程序上调试这个问题，当我面对issues.but时，我得到了和继续导出sql，blob存储的链接，我不想要不必要的存储来将我的数据存储在蔚蓝资源中。因此，如果有任何方式连接应用程序洞察力到Azure数据湖通过连接器或plugins.IF，its，请您分享我的链接。
谢谢。。
浏览 2提问于2017-05-30得票数 5
2回答
如果我删除Azure数据湖分析帐户，它会删除它的默认数据源吗？
azure、azure-data-lake
我对Azure相当陌生，我只是尝试Azure数据湖分析。为了测试目的，我创建了一个新的Azure帐户，并且希望现在就删除它，但是在安装过程中，我使用了一个现有的Azure数据湖存储(ADLS)帐户作为默认的存储帐户。我现在知道我可能应该添加现有的ADLS作为关联的数据存储。
浏览 3提问于2017-08-18得票数 0
1回答
数据存档与数据摄入
bigdata、erp
从大数据或数据湖的角度来看，数据归档和数据摄入到底有什么区别？我推测，在数据湖的上下文中，“摄入”是一个恰当的词，但是如果我们在那里使用'Archival‘而不是’摄入‘，那么我们所缺少的是什么。我认为使用“摄入”而不是“归档”的几个原因是
谢谢
浏览 1提问于2018-09-28得票数 0
1回答
数据湖如何存储数据和格式？
sql、image、nosql、azure-data-lake、data-lake
我听说数据湖可以存储任何类型的数据:关系型，NoSql，图片/图像，Adobe，Excel。如何以无SQL格式或二叉树存储数据？还是把它像普通硬盘一样保存？如果是这样的话，他们为什么不直接称之为存储，而不是数据湖呢？我正在试图找到“数据湖”的确切存储机制。
浏览 0提问于2018-09-09得票数 2
回答已采纳
2回答
如何处理数据湖vs数据仓库中的历史化数据？
data-warehouse、data-lake
在传统数据仓库中实现数据历史化是可能的(甚至是核心功能)。随着时间的推移，数据将被添加到数据仓库中，并且可以在数据中及时移动。 如果我只想使用数据湖，并为业务用户提供数据历史化，这可能吗？
浏览 36提问于2020-11-30得票数 0
回答已采纳
2回答
从数据湖中检索数据到分析系统
hadoop、bigdata、analytical
我们在Hadoop文件系统中创建了一个新的数据湖。数据以ORC的形式存储。目前分析系统直接连接到数据湖来读取这些ORC文件。
有没有办法在数据湖和分析系统之间创建一个中间层来服务数据？
浏览 16提问于2018-10-04得票数 0
云服务器
对象存储
ICP备案
云点播
腾讯会议
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号