以下是我提出这个问题的用例，如果有帮助的话：要摄取的MyData.csv (Header将在摄取之前被移除)如下：
Date ID
浏览 19提问于2020-02-26得票数 3
1回答
我正在尝试将日常csv数据注入Python。我每天都有不同的文件，如下所示。我需要帮助添加两列，其中来自列的值来自文件名，例如第一列应该获取'_‘之前的值，第二列获取文件名中的日期部分。board_2019-08-08.csv Summary_2019-08-08.csvpath = "C:\xyz\Files\ETL\Dashboard"
all_files =
浏览 8提问于2019-11-08得票数 0
回答已采纳
1回答
目前，我使用以下命令将我的输入从pandas (尝试在这里轻松地使用sklearn预处理)转换为：
modelH2OFrame = h2o.H2OFrame(python_obj = model_data_frame.to_dict
浏览 3提问于2016-03-25得票数 0
我有许多存储在gcs中的.CSV文件，我希望通过使用以下命令将.CSV中的数据存储到创建的表中我试过了，但总是出错如何在导入.CSV之前删除不需要的值？
浏览 0提问于2019-12-22得票数 0
1回答
我一直在寻找一种轻量级的、可伸缩的解决方案，用数据库中的其他元数据来丰富CSV文件。CSV中的每一行表示一个数据项，列表示属于该数据项的元数据。基本上，我有一个CSV摘录，我需要从数据库中添加额外的元数据。元数据可以通过ODBC或REST API调用来访问。将CSV导入到数据库表中，通过使用SELECT语句查找所需的元数据，使用sql UPDATE语句应用附加元数据，然后将数据导出回CSV格式。我还考虑了一个基于NodeJS
浏览 4提问于2015-10-01得票数 1
我尝试执行在Python脚本中执行的数据摄取和转换。现在我试着在Data Factory上做同样的事情，因为它应该更容易。 我有个拉链文件夹。它包含Tar文件。每个文件都包含压缩的cvs文件。通过将csv文件直接摄取到blob中，这当然很容易，但如果我必须自动接收这样一个压缩文件夹，如果我甚至不知道如何解压缩、解压缩和再次解压缩，我如何能够在数据库中加载csv？
浏览 10提问于2019-10-03得票数 0
我正在尝试设置一个简单的过程来修改我的CSV文件，并使用Apache Nifi将其摄取到elasticsearch DB。我不想在将文件从一个处理器传递到另一个处理器时，在Stdout上流式传输我的CSV文件。
我已经做了两个流程。我的第一个流程是使用python处理器获取我的CSV文件，使用ExecuteStreamCommand对其进行定制，我在其中运行我的GetFile脚本来读取、修改和保存我的CSV文
浏览 2提问于2019-08-06得票数 0
该文件是逗号分隔的CSV格式。 存在用于摄取CSV文件的框架。通过以下方式跳过同一文件中的标题： Df.Option(“header”, “true”) 但是预告片记录在同样的火花包中，我无法跳过它同样的逻辑。 请帮助进行此数据摄取。
浏览 8提问于2019-09-23得票数 1
我的任务是使用python执行CSV文件的数据摄取。我正在使用下面的代码块，即使位置正确，也会得到file not found的错误。spark.read.format("Filelocation") \ .option("file.schemaLocation"
浏览 5提问于2022-05-05得票数 0
回答已采纳
2回答
现在，为了创建我自己的数据包，我通过以下链接："zipline ingest -b /home/furqan/Desktop/python_data"Error: No bundle registered with the name'/home/furqan/Desktop&#x
浏览 4提问于2017-09-17得票数 0
我正在尝试使用Polybase将几个CSV文件从Azure Data Lake摄取到Azure Synapse。每个CSV文件中都有一组固定的列，列名称位于第一行。但是，列可以按不同的排序顺序出现。是否有其他方法可以摄取CSV文件？
浏览 12提问于2020-05-07得票数 0
回答已采纳
1回答
感兴趣的elasticsearch和工作与txt文件，而不是json。elasticsearch能支持纯文本文件吗？
浏览 16提问于2019-05-21得票数 1
我正在尝试将excel文件中的数据加载到MySql中的表中。有400个.xlsx格式的excel文件。我已经成功地将一个文件摄取到表中，但问题是需要手动将excel文件转换为csv文件，将其保存在某个位置，然后运行查询以使用LOAD LOCAL INFILE加载。如何对其余的文件执行此操作。如何加载文件夹中的所有400个.xlsx文件，而不是手动将它们转换为.csv文件，然后在th
浏览 29提问于2020-06-23得票数 0
寻找一个等效的GoogleCloud工具，可以在解压前查询压缩的CSV。目前我们使用雅典娜来实现这一点，但正在寻求过渡到GoogleCloud。在GCP中，有没有等同于Athena查询压缩CSV的工具？
浏览 14提问于2020-02-11得票数 3
回答已采纳
我使用的是Python语言。我有csv文件，我需要转换成json，然后发送到kafka，然后发送到ElasticSearch。
我能够将Csv转换为Json并发送给kafka消费者。
浏览 0提问于2018-12-06得票数 3
我有一个CSV文件，其中包含WKT格式的几何图形。我正在尝试使用CSV文件摄取geo_shape数据。我创建了一个映射，如文件"input_mapping.json“中所示 "mappings" : { "properties" : {下面是我尝试使用logstash插入的输入CSV文件：
WKT,Lot_plan,Tenur
浏览 2提问于2019-03-05得票数 0
1回答
我需要创建一个网站，阅读不同网站的内容，并帮助他们进行比较。现在我需要知道: 1.如何从不同的网站读取数据。使用java，我可以读取和获取html数据。但问题来了，解析html内容以获取所需信息的最佳方式是什么？问候你，Jubin
浏览 4提问于2015-02-03得票数 2
1回答
Databricks中的命令COPY INTO提供了一个摄取增量表的幂等文件，请参阅here。在文档中，示例命令如下所示： COPY INTO delta.target_path` FILEFORMAT = CSVPATTERN = 'folder1/file_[a-g].csv'
FORMAT_OP
浏览 12提问于2021-06-16得票数 1
我们在Sharepoint门户中有一些大小在500 MB 20 MB之间的文件。我们希望将这些文件转换为CSV，然后将它们转换到雪花。没有真正的实时摄入的必要。我正在考虑两个选择。哪一种选择更好？将文件(CSV)加载到云提供程序对象存储中。创造一个外部舞台。然后每小时安排一个python程序来摄取从舞台到雪花表的数据使用
我更倾向于#1，主要是因为我将控制仓库。此外，它将允许我堆文件，然后加载到雪花。
浏览 2提问于2020-09-22得票数 0
回答已采纳
云服务器
ICP备案
对象存储
云点播
智聆口语评测
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号