腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
kafka-python-2.0.1
大
数据
集
的
性能
python-3.x
、
apache-kafka
、
kafka-consumer-api
、
kafka-python
我正在使用
kafka-python-2.0.1
来消费来自kafka代理
的
数据
。到目前为止,我只运行了一个消费者实例。我们每5分钟就会收到2M条记录。我注意到kafka-python不能以更快
的
速度读取
数据
以及时消费所有消息。我是kafka-python
的
新手,不确定如何实现才能更快地读取
数据
。我应该运行多个使用者吗?
浏览 31
提问于2020-11-06
得票数 0
1
回答
Kafka python客户端在分配和重新平衡之间交替不处理
数据
python
、
apache-kafka
我有一个有40个分区
的
Kafka主题。在Kubernetes集群中。我还有一个使用这个主题
的
微服务。在批处理过程中,有时会发生这样
的
情况:在某个时间点上,有一些分区留下了未处理
的
数据
,而大多数分区已经完成。这个批处理也比我
的
其他批处理运行得更长一些,所以在它运行期间更有可能是pod kill。我也不确定这是否与大多数已经完成
的
分区有关,这也可能是我
的
用例
的
一个怪癖。我之所以认识到这一点,是因为处理过程似乎永远都在进行,但仍在处理新<e
浏览 0
提问于2020-10-02
得票数 0
2
回答
大
容量
数据
集
的
性能
较差
orientdb
、
orientdb2.2
我在具有高记录计数
的
类上
的
查询
性能
很差。我正在运行一些非常直接
的
查询,但是
性能
是不可用
的
。我非常喜欢odb,这是我用odb作为后端
的
第五个开发项目。然而,这个特殊
的
项目迫使我去寻找替代方案。我们有一个Parent类,它增长不大,整个
数据
集
大约有900个记录。记录作为父类
的
更新
浏览 2
提问于2017-07-19
得票数 0
回答已采纳
1
回答
WhenAll在
性能
方面并没有带来太大
的
收益
c#
、
performance
、
async-await
、
task-parallel-library
虽然我理解.WhenAll()确实提供了利用函数
的
异步特性
的
能力,但在现实中我看不到太多好处。关于我
的
设置
的
一些细节: SQL Server DB (S3 tier DB),C# WebAPI,Azure cloud。catch (Exception ex) exceptions.Add(ex); } } 我真的很惊讶看到callingFunction2()
的
表现比callingFunction1()稍微好一点,这是真正
的
异步
浏览 22
提问于2021-10-22
得票数 1
2
回答
耗尽ram java时写入磁盘
java
、
memory
、
jvm
我正在用非常
大
的
数据
测试
数据
结构
的
性能
。我想用非常
大
的
数据
集
进行测试--如何才能在java虚拟机耗尽内存时将其中
的
一些
数据
写入磁盘?
浏览 0
提问于2013-04-04
得票数 3
1
回答
如何在启用虚拟滚动时传递CurrentPage
数据
?
kendo-ui
我使用Kendo UI data Grid来显示一个大型
的
本地
数据
集
(60MB)。我启用了虚拟滚动。由于服务器正在发送一个非常
大
的
数据
集
,因此
性能
非常低。我想在服务器端进行分页,只发送较小
的
数据
集
。为此,如何在启用虚拟滚动
的
情况下传递当前页面
数据
?
浏览 4
提问于2012-06-09
得票数 1
回答已采纳
9
回答
哪个Triplestore是用于快速语义web开发
的
?
rdf
、
semantic-web
、
owl
、
ontology
、
triplestore
在这里,安装/使用
的
易用性是最重要
的
因素,而不是
性能
。 小
的
是可以
的
,因为不需要
大
的
数据
集
。
浏览 0
提问于2008-11-20
得票数 10
回答已采纳
1
回答
React本机:基于图像
的
新闻提要
的
表现性绘制
javascript
、
reactjs
、
react-native
在react本机中呈现基于图像
的
新闻提要
的
最佳实践是什么?如果有帮助,代码如下。每个封面图像为~55 3kb
的
JPG,星号为~3kb
的
PNG。这两个图像都被打包到包中。问题似乎在于图像
浏览 0
提问于2016-03-30
得票数 1
2
回答
聚类均匀度分析及RapidMiner中簇距离
性能
算子
的
应用
cluster-analysis
、
k-means
、
rapidminer
我已经在
数据
集
上实现了k-均值聚类。我尝试通过查看快速采煤机中
的
平行图和偏差图来分析聚类
的
k。为了分析各种
性能
模型
的
clusters.Out
的
同质性,将算子“集群距离
性能
”算子用于k-均值聚类结果。 是否有其他经营者可以提供这方面的分析?我所拥有的
数据
集
有具有
大
值
的
数字向量(以数百和千为单位),还有一个具有极小值
的
数据
集
(十
浏览 4
提问于2016-07-27
得票数 0
1
回答
相关
的
表现?
rocksdb
我正在开始一个新
的
软件,应该能够处理大型
数据
集
,即一些兆字节
的
数据
。 我已经看到Rocksdb允许存储大型
数据
集
,但我不确定它是否是一个核心特性?我
的
意思是,如果
数据
集
比计算机内存
大
,它会处理它吗?此外,在没有交换
的
情况下,是否有关于使用这种内存
数据
存储
的
性能
影响
的
研究?谢谢
浏览 1
提问于2017-05-15
得票数 0
回答已采纳
1
回答
大
数据
集
上
的
MySQL匹配查询
性能
mysql
有没有人有表单查询
的
经验例如:我只想知道非常
大
的
数据
集
的
情况,例如,TableX中有1000多万个项目。这种查询
的
性能
如何?关于
性能
的
一些细节应该很
浏览 2
提问于2012-05-11
得票数 0
2
回答
用Meteor和Mongo管理(索引)大型
数据
集
mongodb
、
meteor
我已经读到,目前还没有这样
的
数据
集
,但我特别关注非常
大
的
数据
集
、多个查找等,并将真正影响
性能
。这些问题是否由蒙戈和流星来处理?
浏览 4
提问于2014-01-12
得票数 0
回答已采纳
3
回答
JS网格
性能
比较
javascript
、
performance
、
ag-grid
、
react-virtualized
、
fin-hypergrid
我使用角ui网格()来显示表格
数据
.总的来说,这是相当缓慢
的
,所以我们决定使用ag网格()。对于常规大小
的
数据
集
来说,这是更好
的
表现和更好
的
处理方法。然而,现在我们正在处理一些大小为100 Colsx1万行(~1M单元)
的
表格
数据
,而且网格
的
性能
似乎相当缓慢。我想知道是否有人使用过hypergrid () --它似乎“解决”了
大
cols大行
的
问题,在演示中,它在大
浏览 9
提问于2017-08-27
得票数 11
回答已采纳
2
回答
Silverlight
数据
加载所有行
silverlight
、
silverlight-4.0
、
silverlight-toolkit
Silverlight
数据
集
似乎加载行(触发LoadingRow事件),而我则上下滚动。这个是可能
的
吗?
浏览 4
提问于2011-06-22
得票数 1
回答已采纳
2
回答
基于现有的多维
数据
集
数据
创建测试多维
数据
集
(但要大得多)
testing
、
ssas
、
cube
是否可以基于现有的多维
数据
集
数据
创建一个
大
的
多维
数据
集
?例如,我们有一年
的
数据
,并希望将其扩展到10年
的
价值。
浏览 1
提问于2009-06-23
得票数 1
回答已采纳
4
回答
我能否模拟内存短缺,以便在.NET应用程序中使用较小
的
源
数据
集
来查找内存泄漏?
.net
、
debugging
、
memory-management
、
memory-profiling
我有一个应用程序,它可以在非常、非常(非常)
大
的
数据
集
上产生内存不足
的
错误--我们试图通过优化应用程序
的
内存管理来解决这个问题,但是非常非常
大
的
数据
集
需要很长
的
时间才能运行(几天),因此很难迭代测试周期并从经验中发现问题暂时搁置应用程序
性能
的
问题--这是在正确应用程序行为之后
的
任务列表中
的
下一个问题: 在Visual中以调试模式
浏览 1
提问于2009-12-04
得票数 2
回答已采纳
8
回答
一个大调用与多个较小
的
TSQL调用
tsql
我有一个ADO.NET/TSQL
性能
问题。我们
的
应用程序中有两个选项:选项2有更多
的
代码重用,这是该选项
的
一个优点。但我希望得到一些关于
性能
成本
的
意见。两次小
的
往返是两次到
数
浏览 4
提问于2010-03-23
得票数 7
回答已采纳
1
回答
如果使用Jdbc在PostgreSQL中有太多行,如何停止大型查询?
sql
、
postgresql
、
jdbc
我们运行用户提交
的
查询,这些查询可能会返回一个
大
的
结果
集
。 为了避免内存问题,我们希望检测这些情况并取消查询。然后,用户需要修改查询。我们已经使用PreparedStatement#setFetchSize()滚动结果
集
并递增地处理一个
大
的
结果
集
。但是,当结果
集
太大时,我们希望尽可能避免在客户端和
数据
库端通过网络或任何带来第一个结果--其他不必要
的
工作--。预先执行SELECT COUNT(*)..
浏览 2
提问于2017-07-05
得票数 3
回答已采纳
1
回答
Torch 7如何加载内存不能容纳
的
非常
大
的
数据
集
?
machine-learning
、
deep-learning
、
torch
我有一些非常
大
的
数据
集
,我想要加载到Torch中。但在运行我
的
学习算法之前,我无法将它们完全加载到内存中。 我应该怎么做才能使
性能
最大化?
浏览 2
提问于2015-10-05
得票数 3
1
回答
如何在Corda中处理
大
的
Vault大小?
bigdata
、
corda
我们
的
vault中
的
数据
是可管理
的
。最终,我们会积累一个很大
的
体积。不可能为每天
的
事务保留如此
大
的
数据
。我们希望定期对
数据
进行归档或入库,以便保持查询
性能
。我想知道您是否考虑过处理大规模
数据
集
,您
的
建议是什么?
浏览 0
提问于2018-05-29
得票数 4
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
创新工场提出中文分词和词性标注模型,性能分别刷新五大数据集
仅花费60美元就能破坏0.01%数据集,AI模型性能显著降低
机器学习必须需要大量数据?小数据集也能有大价值!
【公开数据集】WenetSpeech:10000小时的中文语音识别数据集
如何寻找想要的数据集
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券