腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
我
可以
直接
将
一个大
的
数据
帧
作为
一个
文件
进行
热处理
吗
?
python
、
pandas
我
正在尝试做
一
些实验,并希望
将
一个
热编码
的
数据
帧
直接
保存为
文件
。
我
的
数据
非常大,大约有两百万行和超过10k
的
唯
一
值,所以产生
的
数据
帧
很大。如果
我
添加Sparse=True标志,那么
数据
帧
大约只有100MB。这是
我
目前<em
浏览 25
提问于2020-12-27
得票数 2
回答已采纳
4
回答
如何只将满足条件
的
行从csv读取到R?
r
、
large-data
、
read.csv
我
正在尝试
将
一个大
的
csv
文件
读取到R中。
我
只想读取和处理满足特定条件(例如Variable2 >= 3)
的
一
些行。这是
一个
小得多
的
数据
集。
我
希望
将
这些行
直接
读取到
数据
帧
中,而不是
将
整个
数据
集加载到
数据
帧
中,然后根据条件
进行<
浏览 52
提问于2014-04-21
得票数 25
回答已采纳
1
回答
在Numpy数组上执行Pandas函数
python
、
pandas
、
numpy
、
dataframe
、
dask
我
有
一个大
约8700万行
的
Pandas
数据
帧
。为了对其
进行
一
些处理,
我
将其设置为Dask
数据
帧
。问题是
我
需要做Dask不支持
的
unstack和plot。
我
已经
将
Dask
数据
帧
写入h5
文件
,但在尝试将其
作为
Pandas
数据
帧
读取时遇到内存问题
浏览 2
提问于2020-04-22
得票数 2
1
回答
如何存储pandas Panel实例?
python
、
pandas
在很多情况下,
我
需要将
一个
轻量级
的
pandas Panel实例输出到磁盘以供以后使用。目前,
我
将其存储为pickle对象,因为pandas.read_pickle
可以
直接
将其
作为
面板对象
进行
检索。但这样做有两个缺陷:首先,
我
必须在
文件
名中始终注意到这是Panel对象,否则
我
可能会忘记。第二,这在未来会有什么风险
吗
?例如,pandas
的
未来版本可能不支持这
一
浏览 13
提问于2017-02-16
得票数 2
1
回答
我
可以
在r中
的
多个
数据
帧
列表中应用滑动窗口
吗
?
r
、
list
、
dataframe
、
feature-extraction
我
有
一个大
约400个
数据
帧
的
列表,
我
想为每个
数据
帧
提取特征。所有
数据
帧
的
功能都将是相同
的
。
数据
帧
由来自加速度计
的
信号组成,
我
将
应用分类来识别不同
的
活动。因为
我
的
类是基于特定模式
的
,所以我需要
我
的
浏览 2
提问于2017-07-12
得票数 0
回答已采纳
1
回答
Flv到mp4
的
转换
android
、
flv
、
mp4
我
想在Android中播放flv
文件
。所以我想
的
是把flv
文件
转换成mp4或者3GP(安卓有
一个
解码器)。
可以
使用OpenCore
进行
转换。
我
已经研究了opencore代码,在opencore "/android/external/opencore/fileformats/mp4/composer“中有
一个
用于创建mp4
文件
的
类。
浏览 1
提问于2009-06-26
得票数 5
回答已采纳
1
回答
跨节点分发RDD或
数据
帧
的
复制副本
apache-spark
、
spark-dataframe
我
正在尝试构建
一个
组件,它
可以
动态地
将
一个大
型
数据
集连接到多个小得多
的
数据
集。
我
已经
将
较大和较小
的
数据
集
作为
数据
帧
保存在内存中。随着用户输入
的
到来,
我
需要选择大
数据
集
的
一个
子集,并用较小
数据
集中
的
浏览 2
提问于2016-02-11
得票数 0
1
回答
有没有办法像Pyspark那样
将
大熊猫
数据
保存在多个(parquet/csv)
文件
中?
pandas
、
csv
、
parquet
我
有很大
的
pandas
数据
帧
,
我
需要将它保存到多个(parquet/csv)
文件
中,以减少
文件
的
卷空间。
我
可以
通过
将
数据
帧
划分为多个
数据
帧
并分别保存每个
数据
帧
来
进行
划分 有没有方法
可以
直接
做到这
一
点呢?
浏览 28
提问于2020-01-16
得票数 2
回答已采纳
1
回答
使用pyspark
直接
从hdfs加载pandas
的
大
数据
apache-spark
、
pyspark
我
直接
从
数据
库中获取
数据
,大约有5-1200万
的
数据
。当我尝试将其转换为pandas
数据
帧
以
进行
分析时。由于音量太大,它总是崩溃。spark.sql("select * from database.table") sample = df1.toPandas() ## this is where it wont execute
我
读到有人建议使用但这是
作为
csv读取,然后转换为<e
浏览 7
提问于2020-06-22
得票数 0
2
回答
在java中将yuv
帧
编码为视频
文件
java
、
video
、
video-encoding
、
yuv
、
xuggler
我
正在尝试用java对视频
进行
编码。
我
可以
访问单独
的
帧
作为
I420 yuv
帧
(这些
帧
来自程序
的
不同部分,
我
不能更改)。
我
基本上为
一个
帧
的
不同平面(+维度)设置了3个字节缓冲区。据我所知,
我
的
格式每像素y平面有1个字节,u和v各有半个字节。
将
这些
文件
编码为m
浏览 1
提问于2013-12-20
得票数 4
1
回答
关于fmp4编码,如何用H264框架填充mdat框?
c
、
mp4
、
h.264
、
fmp4
我
使用C语言
将
H264框架(只有I/P
帧
)编码成fmp4
文件
。当我填充mdat框时,
我
不知道如何填充帧
数据
。前4个字节是否需要填充
帧
长度?
我
尝试使用FFMPG对fmp4
文件
进行
编码,发现mdat框中
的
数据
与原始
的
I/P帧
数据
完全不同。 又被编码了
浏览 0
提问于2019-01-01
得票数 1
回答已采纳
1
回答
用load.ffdf
将
ff / ffbase
文件
加载到R会话中
r
、
ffbase
我
有
一个大
的
ffdf
数据
帧
保存到磁盘中,需要加载到
一个
新
的
R会话中。当我在
文件
所在
的
目录中运行load.ffdf时,会收到以下错误消息: load.ffdf(".有什么方法
可以
鼓励人们阅读
吗
?有办法
直接
读取单个ff列
文件
吗
?它们
的
格式是什么?也许
我
可以
手动将它们放在底层ff包使用<e
浏览 2
提问于2013-10-02
得票数 1
1
回答
对大型
数据
帧
中
的
多个列使用相同
的
名称
python
、
pandas
我
使用19个单独
的
CSV
文件
创建了
一个大
型
数据
帧
。所有CSV
文件
都具有相似的
数据
结构/类型,因为这些
文件
是来自多次运行
的
相同实验
数据
。在
将
所有CSV
文件
合并到
一个大
型
数据
帧
中之后,
我
希望更改列名。
我
有40列。
我
想对
一
些列使用相同<
浏览 0
提问于2019-10-31
得票数 0
1
回答
用于迭代查询
的
R方法
r
这是
一个
关于R
的
通用方法
的
问题,
我
正在尝试找到
一
种进入R语言
的
方法,但是
数据
类型和循环方法(应用,应用,等等)对
我
来说有点不清楚。site segment id google.com Googleuse
浏览 3
提问于2016-10-25
得票数 0
1
回答
如何在Airflow中
的
任务之间传递
数据
帧
airflow
我
需要传递
一个
数据
帧
到ssh操作符,并将
数据
帧
作为
文件
存储在服务器上,最初,
我
认为xcom是在任务之间传递
数据
的
合适选项,但似乎使用xcom是
一个大
小限制,因为它
的
内容被保存在Airflow
的
元
数据
中,而xcom在
数据
小
的
时候很有用,还有什么其他选项
可以
在任务之间传递大型<e
浏览 29
提问于2021-06-11
得票数 0
1
回答
如何以HDF5格式存储非常大
的
三维矩阵?
python
、
h5py
我
有
一个
非常大
的
矩阵,这是
一个
视频
文件
作为
一个
帧
阵列,每
个大
约350x250分辨率。
我
有大约8,000-10,000这样
的
帧
在
一个
单
一
的
视频
文件
,这是大约1-1.5 is
的
大小。
我
认为HDF5对
我
来说是
一
种很好
的
文
浏览 8
提问于2017-02-05
得票数 4
回答已采纳
1
回答
R:
我
如何
将
数据
帧
附加到列表中?
r
、
list
、
dataframe
、
csv
、
dplyr
我
有
一个
for循环,它读取.csv
文件
的
列表,清理它们,并将输出导出为
一个
新
的
.csv
文件
。在输出.csv
文件
之前,
我
希望
将
干净
的
数据
帧
添加到某种类型
的
列表中,以便在进程结束时(在for循环中
我
正在清理
的
大约36个.csv
文件
),
我
可以
将
所
浏览 4
提问于2020-06-10
得票数 2
回答已采纳
2
回答
将
Dask DataFrame存储为泡菜
python
、
pandas
、
dataframe
、
dask
我
有
一个
Dask DataFrame,构造如下:type(df) //dask.dataframe.core.DataFrame 有没有办法
将
这个DataFrame保存为
一个
泡菜?
浏览 9
提问于2018-01-30
得票数 3
回答已采纳
1
回答
多证券交易算法
algorithmic-trading
、
portfolio
我
是Python
的
新手,同时在多个证券上执行
我
的
算法交易策略时遇到了问题。
我
目前对股票使用了以下几行代码:data_p.drop(columns = ['Adj Close']) 有没有人知道我会如何正确地添加更多
的
证券?
浏览 11
提问于2020-08-30
得票数 0
2
回答
使用CSV
文件
作为
数据
库
的
效率
c#
、
tsql
、
csv
我
有
一个大
型(350 MB) CSV
文件
,
我
需要查询。
我
每天
将
数据
文件
作为
数据
转储
一
次,以便每天对这些
数据
进行
一
些处理。
一
旦
我
有了
数据
,
我
想要更频繁地查询它。
我
在想怎么做才是最好
的
。连接OleDbConnection,然后
直接</e
浏览 0
提问于2014-03-14
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
如何使用稳定的扩散来制作 AI GIF 和视频
工作案例分享:SVGA动效落地的使用与避坑
单有理想主义者不适合创业
基于 TensorFlow、OpenCV和Docker 的实时视频目标检测
弹幕君,别挡着我看小姐姐!
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
云直播
活动推荐
运营活动
广告
关闭
领券