用NAN值解析Pandas中的丑陋txt文件

文章/答案/技术大牛

发布

1回答

python、pandas、dataframe、parsing、nan

我从一组几千行的丑陋的txt数据开始，并将其清理为如下所示： import pandas as pd data = {'Town':['Chicago', 1.11, 1.45, 0.86, 2.68, np.nan, 'Philly', 1.35, 1.55, 3.7], 'lat':[41.878, np.nan, np.nan,

浏览 7提问于2021-09-27得票数 0

回答已采纳

1回答

从Pandas数据帧中的单元格中提取字符串

python、numpy、pandas

我有一个数据框，df0 '\file path\file.txt' NaN2 '\file path\file.txt' NaN 我有一个输入文件名的函数，它会从文件中提取一个浮点值。我想要的是将来自

浏览 0提问于2015-10-02得票数 2

回答已采纳

2回答

Pandas read_csv() - Flie包含不同的数据

python、pandas、dataframe

问题:我试图将csv读入到包含不同列大小的数据的pandas数据帧中。02, 6ID, Time, Val1, Val2ID, Time, Val并且这种模式在整个文件中都会继续然而，我随后在我的数据帧中获得了重复的报头...为了解决这个问题，我尝试了drop_duplicates()，但发现只有在pandas的</em

浏览 0提问于2017-06-04得票数 1

2回答

从一些键缺少值的字典列表中创建Pandas* Dataframe*

python、list、pandas、dictionary、dataframe

下面是我用来解析文本文件的代码：rows = [] content = file.readline

浏览 8提问于2017-11-17得票数 2

回答已采纳

1回答

使用Python Pandas读取.txt文件-字符串和浮点数

python、pandas

我想用Pandas读取Python (3.6.0)中的.txt文件。.txt文件的前几行如下所示：Location: XXXDate of log start: 2016_10_09：import pandas df = pandas.read_csv("Tex

浏览 7提问于2017-03-16得票数 2

回答已采纳

1回答

使用Pandas读取空格为零的空格分隔的三角形矩阵

python、pandas、data-munging

我正在尝试使用pandas.read_table()从一个文本文件中读取一个空格分隔的下三角矩阵。矩阵的零条目保留为空。C1 C2 C3R2 2 3现在，我有以下两个丑陋的解决方案。header = pd.read_table('test.txt', delim_whitespace=True, nrows=0) names = list(header.columns.va

浏览 79提问于2018-09-06得票数 3

回答已采纳

3回答

如何预处理“大数据”tsv文件并加载到python数据文件中？

python、pandas、awk、sed、dataframe

我目前正在尝试将以下大的选项卡分隔的文件导入到Python中类似于dataframe的结构中--当然，我使用的是pandas dataframe，尽管我对其他选项开放。这个文件的大小是几GB，不是一个标准的tsv文件--它被破坏了，也就是说，行有不同的列数。一行可能有25列，另一行可能有21列。Col_01: 14 ..

浏览 6提问于2016-09-08得票数 2

回答已采纳

1回答

使用Pandas保存txt文件

python、pandas、text、save

我用熊猫在一个名为A_B_1的txt文件中用nan替换空白列空间。如何将这个txt文件保存为原来的(用nan替换的空白空间)到使用熊猫的路径上？我使用了下面的代码来读取它：data= pd.read_table("/Users/Hrihaan/Desktop/Code&#x

浏览 6提问于2017-08-06得票数 0

回答已采纳

1回答

Pandas:解析CSV，区分缺失值标记和恰好等于它的字符串

python、r、pandas、csv、readr

R readr 函数允许传递quoted_na=FALSE，这允许解析器区分未加引号的NA (表示缺少值)和带引号的"NA" (表示恰好等于NA的字符串)。有没有办法让Python Pandas中的函数具有类似的行为？例如，CSV"NA",NA var_1 var_2参数na_v

浏览 1提问于2020-06-06得票数 2

2回答

ASCII表，以连续的空格作为分隔符，缺少数据python pandas

python、pandas、ascii、whitespace

我有一个庞大的ASCII数据表，其中有几个连续的空格作为分隔符，缺少的数据如下：5221.8.23.........我需要用pandas来阅读它，如下所示，它将第一个空格视为分隔符，将第二个空格视为缺少数据的列5221 |8 |23| | | | | | |7 | | | | |1| 1383782|51| | | | | | |

浏览 2提问于2017-06-10得票数 1

2回答

Python pandas read_table将零转换为NaN

python、pandas

假设我有以下文件test.txtFoo 0Baz NULLIn [523]: pd.read_table("test.txt") Aaa Bbb1 Bar1请注意，第一列中的零值突然变成了NaN

浏览 0提问于2013-01-10得票数 2

回答已采纳

1回答

基于重发列值的多个数据分块

pandas、dataframe、split

我收到了一个旧系统的数据转储。我有一个definition.txt文件，定义数百个不同表的头(列)值。此外，我还有相应的expX.txt文件，其中包括没有任何列/头信息的实际数据。在此文件中可以找到以下结构：| Type | ColumnName | Source | |-------|------------|----------|

浏览 2提问于2022-06-28得票数 0

2回答

使用numpy.genfromtxt填充缺失值

python、parsing、numpy、genfromtxt

尽管从前面的问题中得到了建议： a.txt:4 5 6我尝试过多种missing_values、filling_values选项的安排，但无法做到这一点： dtype=float,missing_values=None, u

浏览 4提问于2013-06-25得票数 6

回答已采纳

1回答

重新编制索引，将丢失的日期添加到熊猫数据中

python、date、pandas

我试图解析一个CSV文件，该文件如下所示：02.01.2000 2我需要添加缺少的日期，并使用NaN填充dates值。我用Series.reindex就像在里 ts=pd.read_csv(file, sep=';', parse_dates='True', ind

浏览 3提问于2015-12-17得票数 4

回答已采纳

8回答

Pandas :将DataFrame的内容写入文本文件

python、pandas、file-io

我有这样的熊猫DataFrame0 18 55 1 70 3 18 58 1 35 我想将这些数据写入如下所示的文本文件：18 55 2 67 18 58 1 35 我试过这样<

浏览 14提问于2015-07-06得票数 126

回答已采纳

2回答

NumPy loadtext()

python、arrays、numpy

我有一个文本文件，我想用loadtext()加载到一个loadtext()数组中。该文件是以制表符分隔的，有时我在最后一个选项卡之后有一个值，而不是空的：Value4\tab\Value5\tab\value6\tab\value7Value11\tab\Value12\tab\value13\tab 但是，NumPy给出了该行的一个

浏览 2提问于2015-06-24得票数 1

回答已采纳

4回答

有没有办法从充满数据的字典中删除nan？

python、dictionary、nan

我有一个字典，里面填满了我导入的两个文件中的数据，但其中一些数据是nan。如何使用nan删除数据片段？我的代码是：from pandas.lib import Timestampfrom datetimeimport datetimeimport collections oran

浏览 1提问于2014-06-06得票数 9

2回答

使用pandas阅读制表符分隔的字段，有些行有多个制表符

pandas

我正在尝试使用Pandas读取制表符分隔的txt文件。该文件如下所示： 14.69 14.49 0.8799 5.5633.302 2.723            5

浏览 2提问于2019-01-10得票数 2

4回答

让pandas.read_csv将空字段读作NaN，将空字符串读作空字符串

python、pandas、csv

这与完全相反col,valthere",1\f\,3"""hi""",5 col val1 NaN 23 4也就是说，将空字段(val 2)读取为NaN，目前，pd.read_c

浏览 0提问于2019-11-29得票数 6

1回答

如何用熊猫更改现有csv的单列

python、pandas、dataframe

我有一个.csv文件，可以用pd.read_csv()读取。在这个文件中，我有需要用新逻辑更新的SomeBoolean列。但是，当我再次使用pd.to_csv()编写文件时，其他一些列值会被更改，例如，sometimesNaN列有一些空值，这些值在读取csv时被解释为NaN，但是它们也被写入为NaN而不是空值。SomeBoolean Values sometim

浏览 2提问于2021-05-19得票数 2

回答已采纳

点击加载更多