我可以通过azure应用程序洞察力跟踪我的应用程序日志文件，并导出xls工作表( )，但是为了备份跟踪目的，我需要将所有日志文件存储到蔚蓝数据湖存储中。我需要在我的应用程序上调试这个问题，当我面对issues.but时，我得到了和继续导出sql，blob存储的链接，我不想要不必要的存储来将我的数据存储在蔚蓝资源中。因此，如果有任何方式连接应用程序洞察力到Azure数据湖通过连接器或plugins.IF，its，请您分享我的链接。
谢谢。。
浏览 2提问于2017-05-30得票数 5
我正在寻找一个Azure服务，它允许我每月记录2亿个数据集()。这些都是跟踪数据集，所以编写必须要快。有没有人知道一种有意义的Azure服务？
浏览 0提问于2018-10-05得票数 0
你好，Azure数据工厂的专家们，我尝试通过在Azure数据工厂中创建链接服务将Azure数据工厂连接到数据湖Gen2，但是我得到了这个错误。谁能帮上忙呢？这可能是因为服务主体或托管标识没有足够的权限来访问数据。(2)。这可能是因为Azure Data的某些IP地址范围不被Azure存储防火墙设置所允许。Azure Data范围请参考。
浏览 4提问于2021-10-29得票数 0
回答已采纳
api返回的最大页面大小为1000，因此我将其命名为1000，以获得当天所需的数据。这很好用。我希望将数据保存在原始区域中的最小形式中，而不是应用太多的转换。这意味着第二个进程需要将JSON读取到一个数据文件中，在这里我可以转换它并将它写成块(这个
浏览 0提问于2019-04-11得票数 2
回答已采纳
我的要求是我想要创建api/azure函数从SFTP服务器上传文件到蔚蓝数据湖存储，有什么参考项目或指南，请指导我。
浏览 3提问于2022-07-15得票数 0
我在Azure数据湖存储文件夹位置上有一组文件。有没有什么简单的power-shell命令来获取文件中的记录数？我想在不使用Get-AzureRmDataLakeStoreItemContent命令的情况下对文件项使用Get-AzureRmDataLakeStoreItemContent命令。在大文件上使用此命令会产生以下错误。
错误: Get-AzureRmDataLakeStoreItemContent :要预览的剩余数据大于10
浏览 6提问于2017-06-28得票数 0
我必须从Azure数据湖Gen2中读取数据库中的数百个avro文件，从每个文件中的Body字段中提取数据，并将所有提取的数据连接在一个唯一的数据中。要点是，所有要读取的avro文件都是存储在湖中不同子目录中的，如下所示：这迫使我循环摄取和选择数据。我正在使用这个Pyt
浏览 3提问于2020-06-17得票数 0
回答已采纳
2回答
它将数组写入位于/tmp中的新生成的临时文件。然而，它可以在/tmp中以某种方式生成10T大文件，而相应的数组似乎仍然是可访问的。脚本的输出如下：该文件确实存在，并显示为10T大：-rw------- 1 user user 10995116277760Dec 1 15:50 /tmp/
浏览 1提问于2015-12-01得票数 2
回答已采纳
在我的Python Notebook中，我正在从一个存储帐户读取CSV文件，并在经过一些扩充后将其写入另一个存储中。
我在写拼图文件时遇到了下面的错误...
浏览 3提问于2020-10-13得票数 0
我需要一些帮助来转换xslx，csv，它们位于azure存储区(删除某些行，重命名某个列名)，并保存在adls中。有人能给我一些关于如何完成这一任务的一些想法或步骤，这将是非常有帮助的。谢谢你的帮助，真的很感激
浏览 2提问于2021-09-29得票数 1
回答已采纳
3回答
我有一个Azure数据湖gen1和一个Azure数据湖gen2 (Blob /层次结构)，我正在尝试创建一个Databricks笔记本(Scala)，它读取2个文件并将一个新文件写回Data。在Gen1和Gen2中，我都遇到了相同的问题，我指定的输出csv的文件名被保存为一个目录，在该目录中它正在编写4个文件“提交、启动、_SUCCESS和part-00000-tid-为了我的生命，我搞不懂它为什么要这么做，而不
浏览 0提问于2019-05-05得票数 0
在Azure Devops源代码管理中是否可能阻止某些文件类型的签入？例如，要停止检入PowerBi (*.pbix)文件？或者，对于某些文件类型，更好的方法是强制执行额外的审计：(例如，记录签入用户是否删除了文件中包含的个人数据)
浏览 1提问于2019-01-31得票数 0
如果ODATA可以通过REST API建立在azure数据湖分析表的顶部，有没有办法？似乎有REST API来获取ADLA作业信息，帐户信息等，是否有这样的现有API来获取数据，或者是否有可能创建API来通过ODATA概念访问数据？
浏览 7提问于2018-02-01得票数 0
1回答
为什么输出数据来分离文件？
、、、、
为什么在使用Azure数据湖或Azure Blob存储时，要创建单独的文件？有时流在一个文件中运行数天，而另一些时候每天生成几个新文件。看起来很随意吗？我将数据输出到CSV，查询保持不变，并不时生成一个新文件。我更希望它有一个大的CSV文件，因为我希望能够使用Power对数据运行长期统计数据，但当所有文件都具有一个看似随机的名称时，这似乎是不可能的。
浏览 4提问于2017-11-21得票数 0
回答已采纳
我有一个要求，从Hadoop (这是在前提Hortonworks集群)的数据加载到Azure数据湖每8小时。你能告诉我-在实现解决方案时，这里可以尝试哪些不同的方法吗？
浏览 3提问于2016-11-11得票数 0
回答已采纳
2回答
我有几个使用Python脚本访问的外部数据API。我的脚本从就地服务器运行，转换数据，并将其存储在同一服务器上的server数据库中。我认为这是一个基本的ETL系统，使用Python和T运行。随着新API的出现，系统将有相当大的增长，并且需要更复杂的数据管道(例如，一些API数据将分拆到多个表中)。我花了几天时间研究Azure产品，这些产品可以让我运行Python脚本来访问web中的数据，并将处理过的数据存储在云数据库中。我在寻求关于其他人在类似工作中
浏览 0提问于2018-11-07得票数 0
回答已采纳
1回答
在文件中使用getc
、、、
要打印文件的内容，可以使用FILE *file = fopen("file.txt", "r");
while ((ch = getc(file)) !也就是说，它到底多久进行一次操作系统调用，或者需要花费相当长的时间？例如，假设我有一个10 to文件--调用这个函数数万亿次会不会是获取数据的糟糕方法？
浏览 2提问于2021-02-16得票数 0
回答已采纳
1回答
我正在使用TFS API来管理我的应用程序数据的版本。在第一次使用时，我尝试将所有数据库数据转换到TFS工作区，然后签入被卡住了很长一段时间(如果不是永远卡住，可能需要超过几个小时)，我要处理100,000-200,000个文件签入。在TFS中是否有签入文件数量的限制？如果不是，这一行动的瓶颈是什么？将签入拆分成小的文件包会有帮助吗？如果是，有什么推荐的批量大小吗？
浏览 3提问于2016-03-11得票数 0
我试图将名字匹配的文件从一个Azure存储帐户(都在数据湖存储中)复制到另一个。我目前正在尝试使用PySpark来完成这个任务。我列出要查看的文件夹，然后为"from“datalake设置set，并使用dbutils获取相关文件夹中的文件：
spark.conf.set("fs.azure.account.key."list_of_files = dbutils.fs.ls("abfss://mycontain
浏览 7提问于2021-09-07得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
对象存储
云直播活动推荐
腾讯云开发者
