1回答
我使用的是Python 3.7.3，我使用的是pyarrow 2.0.0，并试图打开一个3.7 to的拼图文件。python脚本立即以"Killed“结束，这是我看到的唯一结果。
浏览 14提问于2021-03-12得票数 1
回答已采纳
我有一个大的geotiff文件，我尝试将它分割成小的 png 图像，使用Java语言，我无法将所有的图片读取到BuffredImage中，所以我只想读取它并将它保存为2 png图片。我的问题是如何将这个大的地块分割成2 png或jpeg图像，并将主题保存在磁盘上？
浏览 2提问于2015-06-01得票数 0
回答已采纳
我是德鲁伊的新手，想知道如何将S3上的拼图文件导入到德鲁伊中？我们获得CSV格式的数据，并在数据湖中将其标准化为Parquet格式。然后需要将其加载到Druid中。
浏览 10提问于2020-04-26得票数 0
我正在尝试使用dask_cudf/dask读取单个大的parquet文件(size > gpu_size)，但它当前正在将其读取到单个分区中，我猜测这是从文档字符串推断出的预期行为： dask.dataframe.read_parquet
浏览 18提问于2019-10-18得票数 3
回答已采纳
我有拼图文件，假设文件名为abc/A。parquet和一些记录根据某些条件被过滤出来，并创建DF，我正在尝试用saveMode overwrite选项用结果过滤的DF覆盖文件，但抛出了以下异常：
用于覆盖filterDF.coalesce(Caused不存在，可能底层文件已更新。
浏览 16提问于2019-11-26得票数 0
回答已采纳
我在s3中有一个拼图文件列表，我需要找到其中存储的数据点的数量(即使是近似值也很好)。我知道这个文件的模式和大小。
谢谢
浏览 0提问于2021-06-17得票数 0
1回答
我有18个作业在运行，每个作业都可能有一个数据框，我需要将这些数据框添加到Hive表中，其中包含一个地块文件。<code>A0</code>
但这似乎不太正确。我是否必须添加一些<code>D1</code>文件名，并且每次都要一直添加？我见过一些语法是Scala，但不是Python。
浏览 6提问于2020-08-06得票数 0
如何使用Python3.x将文件夹(由Spark编写)中的所有拼图文件读取到pandas DataFrame中？优选地，由于版本冲突而没有pyarrow。文件夹包含带有pattern part-*.parquet和_SUCCESS文件的地块文件。
浏览 24提问于2021-02-01得票数 0
回答已采纳
1回答
以下是我所尝试的：
例如，如何使用依赖于变量n的文件名导出绘图？
xs2png(0,"C:\directionary\scilab\Frame_n.png")
浏览 5提问于2016-03-13得票数 1
回答已采纳
我正在从pyspark中的s3存储桶中读取镶木地板文件。有一些地块文件具有不同的模式，这会导致作业错误。我想通过预定义的模式和火花作业应该只读取与预定义的scehma匹配的文件。data = spark.read.parquet(*path_list) 上面的parquet spark read命令是批量读取文件。如何能够只读取传递预定义模式的拼图文件，并且只读取那些与所传递的模式匹配的拼图
浏览 21提问于2021-01-12得票数 2
1回答
只是想知道Spark是否使用HDFS集中式缓存，我似乎找不到这方面的问题。 hiveContext.sql("SELECT * FROM A_TABLE")
浏览 7提问于2016-06-16得票数 2
回答已采纳
或者，我是否可以创建一个供所有主机使用的内部存储库，而不是将地块复制到每个主机？ 提前谢谢你
浏览 13提问于2021-08-19得票数 0
回答已采纳
我使用ParquetReader<Group> reader = new ParquetReader<Group>(path, groupReadSupport);从本地读取拼花面板文件。我想知道如何通过网络逐行传输拼花文件
我想知道如何通过客户端套接字逐行传递行数据，但我不想传递字符串格式，我想在服务器套接字中传递parquet格式，然后从服务器套接字中处理它并以字符串格式打印出来
浏览 18提问于2019-11-20得票数 0
这些地块用R生成，并输出到SVG。我想知道是否有一种方法可以直接返回SVG输出流，而不必编写文件并在java中读取该文件。因此，与其做：plot(someData)然后不得不用Java读取文件，我只想将SVG的XML数据打印到控制台。
这个是可能的吗？
浏览 4提问于2013-11-04得票数 2
给定具有两个核心的单个工作人员星火库集群上的PySpark代码：df = df.cache()
当存在缓存时，它生成并执行一个包含200个分区的计划，而在没有df.cache()的情况下，只生成和执行两个分区。使用缓存：
没有缓存：
df.cache似乎对AQE(Adaptive )产生了类似的影响，如果在代价
浏览 3提问于2022-01-26得票数 0
我进一步确认在我的s3存储桶中的预期位置有文件。 但是，这些文件不是地块文件(它们是无扩展名的)。当我尝试使用pd.read_parquet将它们读取到python中时，我得到错误消息：“在footer中找不到拼图魔术字节。要么文件被损坏，要么这不是拼图文件。”当我尝试查询表并使用pd.read_csv读取csv输出时，也会发生类似的错误。在这里，错误是"'utf-8‘编解码器无法解码位置0中的字节0xee :无效
浏览 2提问于2020-08-22得票数 1
2回答
我的问题是，对于一定长度的Matplotlib，Matplotlib会自动将它们压缩在一起，您无法读取x轴，如图中所示：我怎样才能防止这种情况发生呢？我正试图用savefig()自动保存那个地块。它被保存到一个PNG中。
浏览 1提问于2020-08-05得票数 0
回答已采纳
我已经使用面向列的内存映射文件很多年了。在过去，我对每一列都使用了单独的文件。Arrow似乎喜欢将所有内容存储在一个文件中。有没有一种方法可以在不重写整个文件的情况下添加新的列？
浏览 10提问于2021-02-12得票数 0
2回答
我想绘制分位数回归的结果，但我无法：然后：plot(fit1, mfrow=c(1,2))
只有zz图被保存到res.png文件中有没有办法将情节保存在单独的文件(二和一)中？如何控制情节的宽度/高度？当我将width=height (正方形)保存到.png文件中时，我希望所有单独
浏览 2提问于2011-06-03得票数 25
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
实时音视频活动推荐
腾讯云开发者
