腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何
从
pkl
文件
中
快速
添加
或
连接
多个
pandas
数据
帧
?
python
、
pandas
我有大约50,000个.
pkl
文件
,每个
文件
包含两个熊猫,我想将它们附加到两个大熊猫的后面。 我试图循环遍历这些
文件
,读取它们,然后一个接一个地
添加
,这会变得非常慢(why?pd.concat([DF_a, df_a], axis = 0] DF_b= pd.concat([DF_b, df_b], axis = 0) 正如链接的帖子中所建议的,我正在尝试建立一个要
连接
的熊猫列表,但我能想到的唯一方法是将循环中的
数据
帧
重命名(like her
浏览 34
提问于2019-09-07
得票数 1
1
回答
Python性能问题-
多个
方法
从
特定Pickle
文件
读取相同的
Pandas
数据
帧
python
、
pandas
、
pickle
我们有多(4)个方法
从
本地目录
中
存储的特定/ same - Pickle
文件
中
读取相同的
Pandas
数据
帧
。/df_holoviewPlots.
pkl
")df_for_bokeh = pd.read_pickle("./df_holoviewPlots.
pkl
") df_for_bokeh1 = pd.read_
浏览 0
提问于2019-06-11
得票数 0
3
回答
如何
在Python
中
连接
多个
数据
帧
?
python
、
loops
、
dataframe
、
concat
我有
多个
(超过100个)
数据
帧
。我怎么才能把它们都
连接
起来呢?问题是,我有太多的
数据
帧
,我不能手动将它们写在列表
中
,如下所示:...cluster_2])0 a 10 c 3 1 d
浏览 1
提问于2018-12-21
得票数 26
回答已采纳
1
回答
Azure web服务部署是
如何
在本地工作的?
python-3.x
、
azure
、
pickle
、
azure-machine-learning-studio
Azure ML提供了用于
数据
集管理和模型部署的客户端库(例如,用于Python的azureml )。据我所知,自定义算法将被序列化为Pickle
文件
,但我不确定之后会发生什么。我在azureml文档中发现了这一点,这很有帮助: 如果函数使用像TensorFlow
或
Keras这样的库怎么办?有人能解释一下Pickle模型创建后会
浏览 0
提问于2018-07-05
得票数 1
回答已采纳
3
回答
在笔记本之间移动
数据
帧
python
、
dataframe
、
jupyter-notebook
我正在尝试将两个
数据
帧
从
notebook1移动到notebook2import nbimporternb1.df():我也尝试过使用ipynb,但也不起作用 我只是把它写到一个excel
文件
中
,然后读取它,但是当在另一个笔记本
中
读取它时
浏览 3
提问于2020-05-28
得票数 0
2
回答
从
多个
子
文件
夹加载未知数量的
文件
python
、
pandas
、
loading
我在
多个
子
文件
夹
中
获取了不同数量的检测器
数据
,基本上我需要将它们组合到一个
pandas
数据
帧
中
。使用给出:例如,1464个
文件
/
浏览 0
提问于2020-06-26
得票数 0
3
回答
如何
在python
中
组合csv
数据
python
、
pandas
、
csv
、
merge
我有两个CSV
文件
,我想将它们合并到一个
文件
中
。我的第一个CSV
文件
名为vector_train.csv,第二个名为label_train.csvv1,v2,v3,v10055,72,45,90
浏览 24
提问于2019-07-10
得票数 1
回答已采纳
2
回答
强制dask to_parquet写入单个
文件
python
、
pandas
、
dask
、
parquet
使用dask.to_parquet(df, filename)时,将创建一个子
文件
夹filename,并将
多个
文件
写入该
文件
夹,而
pandas
.to_parquet(df, filename)仅写入一个
文件
我可以使用dask的to_parquet (不使用compute()来创建
pandas
df)来只写一个
文件
吗?
浏览 34
提问于2020-04-09
得票数 2
回答已采纳
1
回答
如何
从
两个形状相同的
Pandas
数据
中选择元素位置,其中的值在一定范围内匹配?
python
、
pandas
、
dataframe
如何
从
两个形状相同的
Pandas
数据
中选择元素位置,其中的值在一定范围内匹配?编写这样的代码可能很简单,但我想知道是否有一种聪明的方法来使用
Pandas
数据
帧
进行条件选择(如loc),因为我需要它来处理大型图像
文件
,而且我相信
Pandas
通常是
快速
高效的。
浏览 8
提问于2016-10-15
得票数 0
回答已采纳
1
回答
Pandas
和HDF5
中
的
文件
大小缩减
python
、
numpy
、
pandas
、
hdf5
、
pytables
我正在运行一个模型,该模型将
数据
输出到
多个
Pandas
框架
中
,然后将这些
帧
保存到HDF5
文件
中
。该模型运行数百次,每次在现有HDF5
文件
的框架
中
添加
新列(多索引)。这是用
Pandas
merge完成的。由于每次运行的
帧
都有不同的长度,因此在
帧
中最终会出现大量的NaN值。 完成足够的模型运行后,如果行
或
列与出现错误的模型运行相关联,则从框架
浏览 3
提问于2015-10-28
得票数 2
回答已采纳
4
回答
内存使用量接近Google Colab的限制
ram
、
google-colaboratory
我正在使用Google Colab来训练我的模型。训练结束后,我想要更改模型,但我不能,因为没有足够的RAM用于它。我尝试将旧模型重新分配给None,但是内存使用量并没有减少。 ? 我不想结束会话并从头开始。有没有办法释放google colab中使用的RAM?
浏览 64
提问于2019-02-26
得票数 2
1
回答
pandas
中
的DataFrame对象是否取代了异构
数据
类型的其他替代对象?
python
、
numpy
、
scipy
、
pandas
以前,NumPy中有和,但随着
pandas
包的
快速
发展,我想知道它们是否会被频繁使用。
从
R开始,我总是不得不解压记录数组来修改来自
多个
列的值,并将它们重新分配回结构
中
,但我很高兴
pandas
现在允许对其
数据
帧
执行此操作。我想知道是否有记录数组更好的用途(它是否有
pandas
没有的一些有用的方法)?
浏览 0
提问于2012-11-14
得票数 9
回答已采纳
2
回答
如何
管理
pandas
数据
帧
中
的特殊字符\r
python
、
pandas
、
csv
、
character-encoding
、
pickle
读取csv
文件
时,为什么符号\r会导致
pandas
错误?,'Bar\rFoo','Foo\r\r\nBar']test2 = pd.read_csv('temp.csv')0 1 Foo2 2 Bar4 3 Foo\r\r\
浏览 3
提问于2018-08-09
得票数 2
回答已采纳
1
回答
从
Excel中指定的列名称创建熊猫
数据
帧
,如pd.read_csv
或
pd.read_excel
pandas
、
dataframe
、
xlwings
使用pd.read_csv
或
pd.read_excel,我可以很容易地
从
csv
或
Excel
文件
的指定列创建
数据
帧
。但在某些情况下,我只能使用excel
文件
,而pd.read_excel运行速度太慢,我听说我们可以使用Xlwing来加
快速
度。我已经搜索了很多次,但我找不到
如何
从
Excel中指定列的名称创建
Pandas
Dataframe (我的
文件
有数百列,我只需要使用一些)。非常感
浏览 0
提问于2020-03-08
得票数 0
1
回答
如何
将
文件
夹
中
的
多个
ann
文件
(
从
brat注解)读取到一个
pandas
数据
帧
中
?
python
、
pandas
、
dataframe
、
nlp
、
brat
我可以将一个ann
文件
读入
pandas
dataframe,如下所示: df = pd.read_csv('something/something.ann', sep='^([^\s]*)\s', engine='python', header=None).drop(0, axis=1) df.head() 但我不知道
如何
将
多个
ann
文件
读取到一个
pandas
数据
帧
中</em
浏览 6
提问于2021-08-16
得票数 0
回答已采纳
2
回答
内存不足:将大
数据
从
Amazon传输到
Pandas
python-3.x
、
pandas
、
amazon-redshift
、
pickle
、
psycopg2
我在中有一个很大的
数据
块(大约1000万行),我将在
Pandas
数据
帧
中
获取这些
数据
,并将
数据
存储在一个泡菜
文件
中
。但是,由于
数据
的大小,由于明显的原因,它显示了“内存不足”异常。有人能提出一个更好的方法
或
代码来完成它吗。我的当前(简单)代码片段如下: cnxn =
浏览 0
提问于2018-05-04
得票数 0
回答已采纳
4
回答
从
图像
文件
列表创建
pandas
数据
帧
python
、
pandas
我正在尝试
从
图像
文件
(.png
文件
)列表创建一个
pandas
数据
帧
img = misc.imread('a.png')samples.append(X)df = pd.DataFrame(samples
浏览 2
提问于2016-07-13
得票数 2
1
回答
如何
在pytq窗口中加载大型
pkl
文件
?
python
、
multithreading
、
pyqt
当加载PyQt图形用户界面时,我必须加载存储在本地硬盘
中
的非常大的熊猫
数据
帧
。下面是我的示例代码。在我的情况下,self.
pkl
.file应该已经加载了
数据
。所以我应该找到合适的方法将实例抛给线程类/函数。提前谢谢你。# -*- coding: utf-8 -*- fr
浏览 0
提问于2016-04-15
得票数 0
3
回答
布尔索引,可以产生一个大的熊猫
数据
帧
的视图?
python
、
dataframe
、
pandas
得到一个很大的
数据
帧
,我想对其进行切片(根据
多个
布尔标准),然后修改这些切片中的条目,以便更改原始
数据
帧
--即,我需要原始
数据
帧
的view。问题是,奇特的索引总是返回一个copy。
从
本质上讲,如果df是我的
数据
框架,我想要一个C列的视图,比如C!=0, A==10, B<30,...等。有没有在
pandas
中
做到这一点的
快速
方法?
浏览 2
提问于2013-03-01
得票数 13
回答已采纳
2
回答
用
pandas
,
如何
加载
多个
无头的TXT
文件
?
python
、
pandas
在Python 3和
pandas
中
,我加载了几个TXT
文件
。它们没有标题,具有相同的结构- 46列,在三种情况下的每列示例
中
具有相同的信息主题<class '
pa
浏览 18
提问于2018-02-21
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
pandas系列学习(五):数据连接
肝了3天,整理了90个Pandas案例
如何从Pandas迁移到Spark?这8个问答解决你所有疑问
实战贴:如何使用机器学习检测欺诈?
12种高效Numpy&Pandas使用技巧!
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券