腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(160)
视频
沙龙
1
回答
为什么
Dask
看起来
储存
镶木
地板
效率
不高
、
、
、
、
当我使用Pandas和
Dask
将同一张表保存到拼图中时,Pandas创建了一个4k文件,其中
Dask
创建了一个39M文件。创建数据帧 import pandas as pdimport pyarrow.parquet as pq data_page_offset: 29 total_compressed_size: 544
浏览 12
提问于2021-08-06
得票数 3
回答已采纳
1
回答
Apache Arrow还是feather插件?
、
、
我想使用本地的feather-files作为入口的来源。是羽毛/箭头的插件还不存在,还是我遗漏了什么?
浏览 1
提问于2021-03-03
得票数 1
1
回答
重新划分拼接面板文件
dask
、
、
我想了解一些关于在
Dask
上分割
镶木
地板
的事情。 当我在.csv文件中执行此操作时,块大小按预期工作,基于50MB块执行30个分区。有没有人能给我解释一下
为什么
拼图在做分块时不能像.csv那样工作?
浏览 3
提问于2021-11-21
得票数 0
2
回答
把巨大的
dask
数据格式写到拼板上,内存不足。
、
、
为此,我决定使用
dask
,在
dask
上读取csv并将其写回parquet。我正在使用一个大块,以满足客户的要求(500 MB)。有人知道
为什么
会出现这种情况吗?当我不指定块大小时,它可以工作,但它会创建很多小块(24 MB)。有没有办法解决至少500 MB的创建块。
浏览 0
提问于2019-03-04
得票数 4
1
回答
通过一次更改一列,有效地使用
Dask
加载和存储数据
、
、
、
我正在实现一个csv解析器的过程中使用
Dask
和熊猫的数据。我想让它只加载它需要的列,这样它就可以很好地工作,而不需要加载大量的数据。# Modifies one column这
看起来
非常低效,所以我想找一种方法来避免加载所有的数据,或者一次修改一个列,或者直接写到
地板
上。import pandas as pd import
das
浏览 3
提问于2020-09-27
得票数 0
回答已采纳
1
回答
Redis中的句柄列表
、
、
、
、
JsonConvert.DeserializeObject<T>(cachedItem);return result.where(x=>x.Id=id) 有什么建议吗?
浏览 0
提问于2020-03-02
得票数 1
回答已采纳
2
回答
INotifyChangedProperty动态实现
、
、
、
我考虑过使用System.Diagnostic.StackTrace类来获取属性的名称,但是它
看起来
很难看,
效率
也
不高
,而且我无法在Windows 8应用程序中访问它(
为什么
!!)
浏览 4
提问于2015-02-20
得票数 0
回答已采纳
3
回答
查询List<T>或数据库更快吗?
、
、
、
、
我最近遇到过几种情况,我需要同一个表中的不同数据。一个例子是,我将遍历每个“交付驱动程序”,并为每个要交付的客户生成一个可打印的PDF文件。List<Customer> AllCustomersList = customers.GetAllCustomers();List<Customer> DeliveryCustomers = AllCustomersList.Where(a => a.DeliveryDriverID == DriverID); 我的问题是:与每次查询数据
浏览 0
提问于2012-05-06
得票数 16
回答已采纳
4
回答
像素绘制算法
、
、
、
我需要一个示例算法,将绘制一个基于网格的(x,y)系统上的像素一次一个,也根据RBG值的基础上,以某种形式提供的二进制数据。我正在寻找用php或类似php的语言编写的任何东西,但不使用任何类型的库或显卡api,因为我正在用php编码。<?php$c_max = 320;while ($row<$r_max){ for($column=0; $column<=$c_max;
浏览 1
提问于2009-02-06
得票数 1
回答已采纳
2
回答
Razor和jQuery,追加表格
、
、
我对Razor语法和jQuery有问题,我正在尝试将一些项目追加到一个空表中。下面是代码 if (@ViewData["a"] != null) var tab = @ViewData["a"] as List<string>; {
浏览 0
提问于2012-01-21
得票数 2
回答已采纳
2
回答
是否有Pandas的数据集文件格式可以在多个列上索引(即“数据库-索引”)和/或可以廉价更新?
、
我正在为内存更大的数据集构建一个交互式浏览器和编辑器,稍后将使用Pandas进行处理。因此,我需要对数据集进行交互排序或过滤的几个列上索引(数据库索引,而不是Pandas索引),我希望dataset文件格式支持廉价编辑,而无需重写大部分文件。就像数据库一样,我只希望能够在之后以与Pandas兼容的格式发送文件,而不需要导出。 我是Pandas中的一个完整的新手,到目前为止,大多
浏览 1
提问于2018-03-02
得票数 2
1
回答
Javafx如何正确切换场景?
、
、
这是可行的,但对我来说似乎
效率
不高
,因为每次我切换页面时,程序都必须创建一个全新的场景,然后将其分配给舞台。
为什么
使用最多的是这种方法?这
看起来
有点快,不那么慢,但这是一个好的做事方式吗?
浏览 23
提问于2019-03-07
得票数 0
6
回答
为什么
建议在声明变量时使用尽可能窄的范围?
、
、
声明Java变量时就像这样if (x>3) {// ......
浏览 9
提问于2013-03-05
得票数 2
回答已采纳
2
回答
如何使用androidplot刷新具有动态数据的图形的列表视图
、
、
、
我使用的是由androidplot库绘制的两个图形的列表视图。每当我有新的传入数据时,我不知道如何不断地更新列表视图。class MyViewAdapter extends ArrayAdapter<View> { super(context, resId, views);
浏览 2
提问于2014-12-03
得票数 0
1
回答
在这种情况下,二进制分类是正确的选择吗?
、
、
、
、
我正在使用一个基于BERT的二进制分类器(Simple转换器)来识别类似于(或确切地)500个类示例的文本,这
看起来
合理/可能吗? 我该如何处理500至10000's的班级不平衡?这
看起来
很慢..。是否有一个标准/良好的语义比较库?
浏览 0
提问于2021-12-08
得票数 1
回答已采纳
2
回答
这些从fget中删除“\n”的方法在性能上有差异吗?
、
、
、
、
我目前正在学习C,如果这个问题
看起来
很简单或者是一个新手的问题,那么你知道
为什么
。 所以,--我知道--有很多方法可以删除fgets()留下的'\n',就像在So 、和上已经讨论过的那样。编辑: 是我发现strcspn
效率
不高
的链接。
浏览 5
提问于2016-01-24
得票数 4
回答已采纳
3
回答
PHP无法在线程运行上下文中打开文件
、
、
我正在为一个由许多计算机组成的结构做监视器。我用PHP开发它,我想以最快的方式ping所有的结构。为此,我使用了从pthreadThread线程继承的多线程,所以我遵循了一些教程,最后我有一个类(从扩展而来)和另一个脚本中的调用者:class Ping extends Thread{ public $name; $this->id = $id; }
浏览 4
提问于2015-05-04
得票数 1
2
回答
如何在MySQL中优化Max(Date)查询
、
问题是,当分析这个查询时,它似乎没有那么高效:有没有办法让它更有
效率
呢?
浏览 0
提问于2019-10-24
得票数 1
4
回答
如果找到数字序列,Python拆分列表
、
我有工作代码,尽管它
看起来
效率
不高
(也不知道提出错误是否是正确的方法),而且我确信一定有更好的方法来实现它。作为记录,long_list可能有几百万个值的长度,这就是
为什么
我认为迭代所有这些值可能不是最好的主意。
浏览 2
提问于2015-09-17
得票数 1
回答已采纳
1
回答
如何使用
dask
有效地计算许多简单的统计数据?
、
、
、
、
问题我有一些数据在一个数据(熊猫,达斯克,csv,
地板
等)我还有很多数据子集(带有任意列过滤器),我想要计算统计数据。 DataFrame Size:5GB到5TB之间的数据。2)我考虑了df.query(string),但是由于它对整个数据文件进行操作,所以它
看起来
效率
很低(大量的数据重复)。这是真的吗,还是使用内置语法解析器有一些成功之处(我注意
浏览 0
提问于2018-12-19
得票数 4
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Ray 分布式计算框架详解
养老机器人,了解一下?
为什么传统标识工厂纷纷转型数字化标识工厂
闲话CAT番外-双语对齐
图满分设计靠不靠谱?分享本人的一些观点!
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券