1回答
读取海量数据并不断更新直方图
、、、、
我有大量的数据存储在h5文件中。每个文件有大约1200个子文件夹，这些子文件夹包含大约65k列的表。我需要将数据放在直方图中，但我不知道数据的范围。有没有办法同时读取和填充直方图？我尝试将数据添加到数组中，但如您所见，该数组中有10个文件的大约7.80M个元素： import h5pyimport matplotlib.pyplot as)
浏览 19提问于2020-05-01得票数 0
我想用highcharts.js做一个海量数据的直方图。是否可以通过调整选项将条形图用作直方图？或者，有没有更简单的方法从已经聚合的数据中生成直方图？
我认为，就图表的样式而言，简单地将数据输入到条形图中并
浏览 2提问于2018-12-17得票数 0
0回答
我有两个数据库，一个是主数据库，许多用户在它上面工作和测试数据库，第二个是测试数据库，由一个dump从主数据库加载。问题是查询在main DB中读取了错误的索引，但在test DB中读取了正确的索引。请注意，这两个表都有最新的收集统计信息和相同的计数行。我开始深入研究直方图和倾斜数据，我注意到在main DB中，该表在其列上创建了37个直方图，但是在test db中，该表只有14列具有直方图。显然，
浏览 5提问于2017-06-14得票数 1
2回答
我需要提高这个查询的速度，它花费了太长的时间(16992ms)，并且SQLite管理使它更快 {
String Limit = "0,20";
String query = search != null ? Constants.USER_NAME + "
浏览 1提问于2011-06-28得票数 0
1回答
我想设置多个扩展事件会话来捕获一些数据并获得洞察力。在运行时，AFAIK I无法将直方图结果从内存保存到磁盘。也许只有当我在实际事件上设置时间戳谓词并让XE会话在周末运行并在周一读取结果时，才能捕获直方图中的数据。
是否有其他方法仅在特定的时间窗口中
浏览 0提问于2019-01-10得票数 1
回答已采纳
我想写一个简单的iPhone应用程序来访问网络上的某种数据。我在想一些东西，比如洛杉矶的温度，温哥华的降雪量等等，基本上都是随着时间的推移而变化的。谁能给我任何关于目前的方式，你可以访问网络上的应用程序中使用的变量远程数据的任何指点。任何例子或指针都将非常感谢。
浏览 0提问于2010-02-09得票数 0
回答已采纳
我正在从传感器连续读取数据，并希望使用这些数据绘制图表。我已经创建了该图表，但是，系统仅在第一次读取时绘制该图表，并不会动态更改曲线图。我使用了paintComponent()，并尝试使用repaint来更新它。我发现虽然数据不断更新，但程序不会多次执行paintComponent()。
任何解决这个问题的建议都将受到高度赞赏。
浏览 0提问于2012-01-30得票数 1
回答已采纳
我有一个InputStream，我可以从中读取字符。我想让多个读者访问这个InputStream。似乎实现这一点的一种合理方法是将传入数据写入StringBuffer或StringBuilder，并让多个读取器读取这些数据。不幸的是，StringBufferInputStream已被弃用。StringReader读取的是字符串，而不是不断更新的可变对象。我有什么选择？写我自己的？
浏览 5提问于2011-02-18得票数 17
回答已采纳
1回答
我有一个csv文件的10+gb，我使用了pandas.read_csv()中可用的"chunksize“参数来读取和预处理数据，用于训练模型想要使用的在线学习方法之一。通常交叉验证和超参数整定是对整个训练数据集进行的，并使用最好的超参数来训练模型，但是在海量数据的情况下，如果我在训练数据块上做同样的操作，如何选择超参数呢？
浏览 9提问于2017-09-26得票数 1
回答已采纳
2回答
我有两个从txt文件中读取的数据集。我绘制了两个直方图，如下图所示。如何获取并保存此直方图的频率数据？(我在工作区检查过，但没有频率值)
上面直方图的编码。
浏览 1提问于2015-12-22得票数 0
1回答
可能重复：
"values"1.156521.196991.19433...所以我用hist(data$values)创建了一个直方图。我想要能够拟合一个高斯到这个直方图，并比较拟合函数的σ和平均数与根据数据计算的σ和平均数。我所看过的所有地方都提到了nls和glm，但
浏览 9提问于2013-01-24得票数 1
回答已采纳
Pbm：
a)读取一个本地文件到Panda dataframe中，比如PD_DF。b)操纵/海量PD_DF并添加列到dataframe中。c)需要使用spark将PD_DF写到HDFS。
浏览 0提问于2015-04-15得票数 4
数据存储在SQLite数据库中。在将数据库文件从电话复制到计算机后，有时在读取sqlite数据库：database disk image is malformed时出错。到目前为止，我们只有三星银河s2两年没有问题(我总是在海量存储模式连接usb )。我读过这个。之后，我又把LG手机连接到电脑上，又复制了数据库文件，我可以在windows数据库文件中读取，没有问题。是否有一种在LG E440中启用usb海量存储模式的
浏览 1提问于2014-02-11得票数 0
回答已采纳
我有一个小程序，通过串口读取和处理数据。这些数据表示飞机/车辆的姿态/倾斜度。你能推荐一些python库，让我创建图形，这些图形将接受上述输入并相应地移动/倾斜吗？库越简单越好。
浏览 0提问于2011-02-02得票数 1
回答已采纳
1回答
我有来自不同DB来源的大量数据(甲骨文、蒙戈、卡桑德拉)，也有卡夫卡提供的数据。使用Tableau进行分析，面对海量数据的性能问题。因此，计划以其他方式存储数据，并使用Tableau进行可视化。选项1:-读取DB数据并将它们存储在S3中的Parquet文
浏览 2提问于2020-10-09得票数 0
1回答
用Java读取海量数据
、、、、
我正在寻找一种有效的方法来读取java中的大文件。我做了一个日志分析程序，我有至少500 MB到4 GB的日志文件。我尝试过Filechannel类(内存映射文件)，但没有得到有效的结果。看看这里：DumpFilePath文件大小约为4 GB。
浏览 9提问于2013-06-15得票数 3
2回答
我需要存储大量的数据。比方说，当要旋转我的应用程序崩溃时，我需要存储用户列表和他们的头像。我如何存储数据有什么窍门吗？
浏览 13提问于2019-01-10得票数 0
回答已采纳
我有超过200 K行的数据集，并且不断更新。所以，我需要阅读这个数据集的最后3000行。读取200 K行并对3000行进行数据过滤是一项耗时的工作。相反，我想直接阅读最后3000行。
浏览 4提问于2022-08-03得票数 1
回答已采纳
1回答
由于海量数据是在hdfs.Can上产生的，支持直接读取hdfs.Can文件，以前我把海量数据放在本地磁盘上，然后打开读取，但是这样做耗费时间和存储history = model.fit_generator(train_generator)
可以直接读取
浏览 0提问于2019-08-07得票数 0
云服务器
ICP备案
云直播
对象存储
实时音视频
腾讯云开发者
