我正在尝试绑定来自JSON数据的数据帧 我试过使用rbind.fill和for循环,它们适用于小数据,但对于超过100k的数据,它花费的时间太长。特别是,我想知道是否有任何方法向量化,使其更快,而不是使一个空的数据帧。fromJSON('RT_data_this_should_be_used_for_rt_analysis.json')fromJSON(big[1,1]) #It is a 6 x 2 dataframe<
我发现数据帧的检索速度非常快。我创建了100万行数据帧,过滤所需数据只用了不到1秒的时间。但是,当我使用append方法将数据添加到一个空的dataframe中时,它为什么会这么慢呢?这是我的代码,它花了2个多小时来执行。我遗漏了什么?或者有比df.append方法更好的添加数据的方法吗?import pandas as pdimport random
data = pd.DataFrame