Pandas Dataframe自动类型转换

文章/答案/技术大牛

发布

1回答

python、pandas、dataframe、casting

看起来，分配一个带有浮点数的新行将整个数据帧重新转换为浮点数。为什么会发生这种情况?我该如何预防？data = pd.DataFrame(data=[[3103, 1189, 1]],index = None, columns = ['y', 'x', 'l'], dtype = int) print

浏览 5提问于2016-09-22得票数 4

3回答

Python pandas:合并丢失分类列

python、join、pandas、merge、categorical-data

我正在处理分类数据的大型DataFrames，我发现当我在两个数据帧上使用pandas.merge时，分类数据的任何列都会自动向上转换为更大的数据类型。(这会极大地增加RAM消耗。)下面是一个简单的例子来说明：import pandas {'ID': [5, 3, 6(0, 2, 20))}) df2 = pandas</em

浏览 1提问于2015-03-26得票数 13

2回答

什么是pandas.core.Frame.DataFrame，如何将其转换为pd.DataFrame？

python、python-3.x、pandas、dataframe、csv

但是，当我使用.csv导入pd.read_csv文件并通过MiniRocket运行它们时，会弹出错误"TypeError: X必须以sktime兼容的格式“，并显示以下数据类型与sktime兼容：'pd.Series然后我检查了导入的.csv文件的数据类型并得到了"pandas.core.Frame.DataFrame"，这是我以前从未见过的数据类型，显然与sktime兼容的pd.DataFrame不同。pandas.core.F

浏览 14提问于2022-12-03得票数 1

3回答

使用与read_csv相同的逻辑将字符串转换为Pandas或Numpy数据类型？

python、pandas、numpy

我如何使用Pandas在读取CSV时使用的相同逻辑来解析字符串，将"False“转换为bool将给我False。我有用户输入的文本值，需要插入到DataFrame中，它们应该使用此逻辑自动转换为要插入到的列的数据类型。下面的示例显示了将值插入布尔列的尝试，但结果是错误的。import pandas as pd

浏览 19提问于2021-06-08得票数 3

回答已采纳

1回答

如何将pandas.core.groupby.groupby.DataFrameGroupBy转换为dataframe？

python-3.x、pandas、pandas-groupby

我在DataFrame上应用了groupby，之后它将DataFrame转换为pandas.core.groupby.groupby.DataFrameGroupBy格式。如何将pandas.core.groupby.groupby.DataFrameGroupBy转换为常规DataFrame，或者如何从pandas.core.groupby.groupby.DataFrameGroupBy数据类型访问单个列？

浏览 7提问于2018-10-27得票数 1

2回答

防止pandas自动推断read_csv中的类型

python、pandas

我尝试用pandas.read_csv将其直接加载到python中。In [149]: d = pandas.read_csv('resources/names/fos_names.csv', sep='#', header=None, names=['int_field', 'floatlike_field', 'str_field']) Out[150]: <class 'panda

浏览 0提问于2012-08-24得票数 15

回答已采纳

2回答

pandas: sum()返回无限值

python、pandas、sum、infinite

我有一个列的数据类型为float16的DataFrame，它的最大值为65536。当我调用pandas中的sum()对该列的所有值求和时，当值超出范围时，我会得到无限的"inf“值。这是sum的输入数据和输出数据的示例：由于sum()函数的输出值的数据类型自动遵循列的数据类型，我想问一下，是否有任何方法可以将sum的值转换为pandas中的值，以避免无限值？

浏览 1提问于2018-10-21得票数 0

3回答

pySpark将mapPartitions的结果转换为spark DataFrame

python、apache-spark、pyspark

rdd = sp_df.repartition(n_partitions, partition_key).rdd.mapPartitions(lambda x: some_function(x)) 结果是pandas.dataframe的rdd， type(rdd) => pyspark.rdd.PipelinedRDD type(rdd.collect()[0]) => pandas.core.frame.DataFrame rdd.glom现在我希望将结果转换成spark数据帧，我这样做的

浏览 124提问于2019-12-10得票数 4

回答已采纳

1回答

从Dataframe到雪花插入的write_pandas -只能转换一维数组值

python、pandas、snowflake-cloud-data-platform

当尝试从下面的dataframe使用write_pandas时，只能转换1维数组值错误。此外，我还假设我的数据文件是适当设置的，因为我遵循了雪花文档中关于使用DF插入write_pandas的文档。 write_pandas(connection_String, dataframe, table_name,database='SB', schema ='SBB',quote_i

浏览 13提问于2022-08-12得票数 0

回答已采纳

1回答

在导出后，Dataframe显示了一个不同的类型。

python、pandas、dataframe

有人知道为什么在我将数据文件导出到excel，然后读取它之后，dataframe会显示一个不同的类型吗？导出到excel之前是pandas.core.frame.DataFrame类型，导出文件后是class 'pandas.core.frame.dataframe'类型。然后如何将其转换为pandas.core.frame.DataFrame类型。非常感谢!

浏览 8提问于2022-08-29得票数 1

1回答

使用createOrReplaceTempView错误“找不到渲染器”

python、pyspark、apache-spark-sql

我正在尝试创建一个tempview，这样我就可以使用sql进行建模了。import sysfrom pyspark.context import SparkContextfrom awsglue.dynamicframe import DynamicFramefrom pys

浏览 12提问于2022-09-05得票数 0

2回答

将熊猫数据转换为一个命名元组的列表

python、pandas、tuples、namedtuple

我正在寻找将pandas DataFrame转换为类型化NamedTuple列表的最有效方法--下面是一个带有预期输出的简单示例。我想让正确的类型转换与在dataframe中定义的类型对齐。from typing import NamedTuple data = [["tom", 10], [

浏览 5提问于2019-11-21得票数 6

回答已采纳

1回答

在jupyter笔记本中使用Seaborn时出错(Pyspark)

pyspark、jupyter、seaborn

下面是我的代码(我使用的是jupyter笔记本)： TypeError: object of type 'DataFrame

浏览 0提问于2017-12-28得票数 0

5回答

Python Pandas:如何将带有“因子”的DataFrame转换为线性回归的设计矩阵？

python、dataframe、regression、factors

如果内存为我服务，在R中有一种称为因子的数据类型，当在DataFrame中使用时，它可以自动解包到回归设计矩阵的必要列中。例如，包含True/False/Mayse值的因子将转换为：0 1 00 0 1 用于使用低级回归代码。有没有办法使用pandas库来实现类似的功能？我看到在Pandas中有一些回归支持，但是因为我有自己的自定义回归例程，所以我真的对从异构数据构建设计矩阵(2dnumpy数组或矩阵)感兴趣，支持在numpy对象的列和派生它的<

浏览 1提问于2012-04-18得票数 11

回答已采纳

3回答

将python pandas* DataFrame转换为R dataframe以便与rpy2一起使用时出现问题*

python、r、dataframe、pandas、rpy2

我在使用rpy2将Python语言中的pandas DataFrame转换为R对象时遇到了问题。新的pandas版本0.8.0 (几周前发布)具有将pandas DataFrames转换为R DataFrames的功能。问题出在转换我的pandas DataFrame的第一列时，它由python datetime对象组成(按时间序列连续)。转换为R dataframe将返回日期和时间的向量，而不是我

浏览 6提问于2012-07-17得票数 7

回答已采纳

1回答

火花df、拼花物体和熊猫df之间的转换

apache-spark、parquet、pyarrow

我把拼花文件转换成熊猫没有问题，但有问题，转换地板到火花df和转换火花df到熊猫。summarydata.parquet') 或者，对于一个拼花对象(pd.read_table(‘汇总data.parquet') )，我如何将它转换成火花我需要火花df和熊猫df的原因是，对于一些较小的DataFrame，我想很容易地使用各种熊猫EDA函数，但对于一些较大的，我需要使用火花sql。

浏览 3提问于2019-10-20得票数 0

1回答

pandas DataFrame类型转换

python、numpy、pandas

我正在尝试使用函数astype来强制转换DataFrame的类型，就像在NumPy中使用的一样。rec.array([('a', 1), ('b', 2)], 然后在熊猫身上： In [182]: y = DataFrameNotImplementedError: Not implemented for t

浏览 1提问于2012-07-26得票数 1

回答已采纳

3回答

转换Pandas* Dataframe类型*

python、numpy、pandas

我有一个通过mysql调用创建的pandas dataFrame，它将数据作为object类型返回。数据大多是数字，带有一些'na‘值。我如何转换numpy的类型，以便正确地键入数值(浮点数)，并将'na‘值表示为dataFrame NaN值？

浏览 1提问于2013-07-04得票数 4

回答已采纳

1回答

IBM :将ibmdbpy.frame.IdaDataFrame转换为pandas.core.frame.DataFrame

python、pandas、data-science-experience、watson-studio

我对IBM中的ibmdbpy.frame.IdaDataFrame类型有问题。我想在Python中合并这两个数据格式。是否可以将ibmdbpy.frame.IdaDataFrame转换为pandas.core.frame.DataFrame？

浏览 2提问于2017-02-06得票数 2

回答已采纳

2回答

将包含int和nan的数据帧打印到csv

python、pandas、numpy、dataframe

我有一个数据帧，如下所示：import numpy as np df['int'] = df['int'].apply(lambda x: ('%.0f' % x) if x

浏览 5提问于2020-03-14得票数 0

点击加载更多