我有“斑点容器”和“文件共享”的ADLS Gen2 Datalake。我已经在Databricks笔记本中安装了Blob容器，因此我可以读取databricks笔记本中的所有内容。我在“文件共享”中也有一些文件，但我无法使用pyspark将这些文件读取到dataframe t
浏览 17提问于2020-03-30得票数 0
1回答
我使用天蓝色存储文件数据包与ADLS gen2连接。gen2文件夹结构中，我必须从其中读取拼花文件，如下所示。在ADLS gen2的容器中，我们folder_a，其中包含有拼花文件的folder_b。folder_a parquet_file1
从gen1
浏览 5提问于2020-12-31得票数 1
回答已采纳
在我们的设置中，我们有一个HDInsight集群，我们将数据存储在Hive表中(数据在ADLS中作为外部表，元数据在外部元存储中，并使用我们的Azure集群中的Hive服务进行访问)。与其他Azure群集共享此数据(不一定在同一订阅中)的最佳方式是什么？
Azure具有此服务主体的概念，因此我们需要设置acls以允许其他群集的服
浏览 4提问于2018-11-27得票数 1
要将文件上载到ADL，首先需要：
有一种方法可以告诉服务器，如果数据没有刷新(写)，它应该使用多长时间。因为您需要
浏览 1提问于2020-02-13得票数 1
回答已采纳
我正在尝试使用python将azure datalake gen2中分配的文件读取到spark dataframe中。代码是from pyspark.sql import SparkSession
key =# write csv
df.write.csv(data_ou
浏览 2提问于2021-09-13得票数 0
我想从数据库中读取来自Azure DataLake第2代的数据。我同时拥有所有者角色和读/写/执行权限。DataLake允许从添加了数据库的the进行访问。" has invalid authority# Databricks notebook source# MAGIC ## Azure DataLake
浏览 15提问于2019-07-16得票数 0
我正在使用Azure逻辑应用程序从电子邮件(outlook)获取附件，并将其转储到Azure Datalake Gen2中。我使用http连接器将文件转储到adls中。虽然我可以将文件转储到datalake中，但这个zip文件正在损坏。之前我使用的是Azure datalake Gen1，所以我使用</
浏览 0提问于2020-08-28得票数 0
希望使用python(没有亚行)从ADLS gen2 Azure存储中读取文件(csv或json)。/test.csv", "r") as my_file:错误:出现异常: AttributeError 'DataLakeFileClient‘对象没有属性'read_file’
我
浏览 13提问于2022-06-30得票数 1
我正在尝试使用语法(受mydir/mycsv.csv启发)从Databricks笔记本中读取Azure数据湖存储Gen1中的文件。(10).to_csv("/dbfs/processed.csv")
我的客户端123abc-1e
浏览 0提问于2019-07-25得票数 3
我有一个问题，我应该如何从Auzre数据湖下载一个.csv文件，然后进行一些计算，并将其再次保存在.csv中。我知道在下载.csv时我可以使用：data=pd.read_csv('example.csv') #example
new_data=data//2+data #calculation in databricksnotebook现在的问题是如何
浏览 1提问于2022-08-16得票数 0
1回答
我们找不到连接到互联网或任何可以连接到azure数据湖存储的脚本或代码。这样我们就可以从azure数据湖中检索数据到API。
浏览 20提问于2021-10-05得票数 0
3回答
在尝试从Azure准备Excel文件(.xlsx)时，文件在ADLS 2中。abc.parquet"从路径读取拼花文件可以正常工作srcparquetDF = spark.read.p
浏览 10提问于2020-09-06得票数 5
回答已采纳
请告诉我您是如何通过不使用RBAC来设置ACL的。我尝试了以下步骤：但是，如果我没有在IAM中<
浏览 1提问于2020-09-01得票数 0
1回答
目前评估数据湖Gen2，它既支持对象和文件存储。存储帐户(blob、文件、表、队列)也具有类似的功能，可以处理基于文件和基于对象的存储需求。由于这些相似之处，我对选择一个方案感到有点困惑。除了HDFS支持之外，我还应该对存储帐户使用Data Gen2吗？
具有分层命名空间的存储帐户v2启用了==数据湖Gen2。如果是这样的话，我是否可以使用文件系统来创建文件共享</em
浏览 1提问于2020-06-03得票数 1
回答已采纳
1回答
我正在斯帕克工作，试图从一个目录中读取多个文本文件。我读过关于这个主题的多篇教程和问答课，它应该是简单明了的。尽管如此，我还是不能让它在我的系统上工作。我正在使用Python8.5、Java 8和Anaconda 3开发Windows 10。
为了保持测试的简单性，我所要做的就是将文本文件加载到RDD中并打印出内容。虽然显式列表对于小的情况是可以的，但我需要这样做
浏览 11提问于2022-09-10得票数 0
我试图找到一个解决方案，但一无所获。我是新手，所以如果你知道解决方案，请帮助我。谢谢!
浏览 5提问于2019-10-26得票数 0
我如何在不下载的情况下直接访问Azure datalake gen2中存在的.txt文件。我可以下载和阅读它，但有没有办法直接从gen2读取文件。我使用了read_file方法DataLakeFileClient()，但是这个方法输出了整个数据，有没有办法逐行读取文件？
浏览 18提问于2020-01-06得票数 0
我有一个csv文件在Azure数据湖存储，我需要创建一个HTML报告使用Azure数据砖笔记本(Python)，我应该提供这个CSV文件链接，用户可以点击和下载。例如:我试图在我的HTMl中包含下面的代码，但这并没有帮助
<a href='abfss://testingZone@testingZone.dfs.core.windows.net/Test/Input/TestData.csv</em
浏览 3提问于2022-10-07得票数 0
回答已采纳
我有一个用Azure函数(TypeScript)创建的API。这些函数接收JSON数据数组，将它们转换为TypeORM实体，并将它们插入Azure数据库。Reduce the number of parameters and resend the requestconst connection= await createConnection();处理此问题的最佳可伸缩解决方案
浏览 0提问于2021-03-19得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
