由于内存限制，我不得不在pandas.DataFrame (pandas版本1.0.5)中使用稀疏列。不幸的是，对于基于索引的行访问(使用.loc[])，我遇到了以下问题： scipy.sparse.csr_matrix我对这里发生的事情的假设是，内部csc矩阵表示和我正在访问列</em
浏览 8提问于2020-08-01得票数 3
回答已采纳
1回答
我在matlab中有一个20 millionx20million大小的稀疏矩阵。我想从这个矩阵中得到大约40000个特定的行。如果我这样做了当index由我感兴趣的行组成时，它将永远占用时间。
我怎样才能高效地做这件事？
浏览 1提问于2014-04-06得票数 0
1回答
我在python中实现了一个倒排索引，它本质上是一个字典，它的关键字是语料库中的单词，值是包含该键与其bm25评分一起出现的文档的元组。: [(doc1, 12), (doc3, 7.9), (doc5, 6.5)],}
但是，当我处理一个查询时，我发现很难从倒排索引的效率中获益，因为我必须在for循环中迭代查询中的所有单词。我认为这不是最佳的
浏览 2提问于2021-11-10得票数 1
1回答
我用特征库填了一个稀疏矩阵A。然后我需要访问稀疏矩阵的非零元素，如果我以A(rowindex，colindex)的形式执行它，它将非常慢。我还尝试使用stl中的unordered_map来解决这个问题，它也很慢。
有什么有效的办法解决这个问题吗？
浏览 3提问于2020-06-17得票数 0
1回答
我正试图建立一个基于大型和非常稀疏矩阵的推荐系统。该矩阵的维数大约为12000×37000，甚至可能会有更多的行数到100000行。然而，这个矩阵是非常稀疏的。在12000x37000版本中，大约0.053%的矩阵是非NA的.我试过SVD了，但是没有用。为了确保我在审理过程中没有造成任何错误：
我创建了一个具有独特三胞胎“用户”-“项目”-“评级”的data.table。我应该提到“评级”可以延伸到
浏览 0提问于2017-09-11得票数 0
回答已采纳
1回答
我想知道MATLAB是如何对下面的方程系统进行内存管理的，包括稀疏矩阵的索引。x = A(indices,indices) \ b(indices);
A是稀疏对称矩阵，b是列向量，indices具有要包含在方程组Ax = b中的A元素的索引。我认为A被存储为CSC (压缩稀疏列)。然后使用不同的CSC数据将其临时存储在存储器中。= b(indi
浏览 0提问于2018-10-14得票数 1
在阅读了一些关于SQL Server2008的新特性“稀疏列”的教程后，我发现如果列值为0或NULL，它不会占用任何空间，但当有一个值时，它占用的空间是常规(非稀疏)列的4倍。如果我的理解是正确的，那么为什么我要在数据库设计的时候去做呢？如果我使用它，我会在什么情况下呢？
同样出于好奇，当一个列被定义为稀疏列时，如何不保留空间(
浏览 2提问于2009-09-09得票数 70
回答已采纳
1回答
如何查找具有稀疏或列集列的表？
、、、、
来自下面的错误消息：因为我是重建索引，并将data_compression更改为页面
这是在很好地使用了稀疏列或压缩数据优秀的脚本之后。如何查找具有稀疏或列集列的表？
浏览 0提问于2019-08-08得票数 0
回答已采纳
我正在从数据库中下载3000多只股票的1分钟内价格。每一项记录将有三个组成部分：我想要生成一个pandas.DataFrame，其中行索引是时间，列索引是符号。我的策略是首先构建一个双索引系列，然后将其转换为DataFrame。转换速度很快。但是，将时间(划时代时间)转换为pandas.DatetimeIndex非常慢，通常大约需要15分钟，因为我首先必须将时间转换为"2013-09-23T09:45:00“这样<em
浏览 8提问于2013-09-23得票数 2
回答已采纳
我想使用csharp的MathNet.numerics创建一个自定义的优化矩阵操作(基于我对稀疏矩阵的了解，这是一个智能的kronecker产品)。
有没有一个访问器来获取稀疏矩阵的非零元素？(或索引？还是它的迭代器？或者CSR代表？)
浏览 2提问于2012-08-03得票数 2
回答已采纳
1回答
我遵循的是在某些数据集上使用的CountVectorizer。
问题：count_vect.vocabulary_.viewitems()列出了所有术语及其频率。你如何根据发生的次数对它们进行分类？
浏览 5提问于2013-04-29得票数 4
1回答
我需要访问这种矩阵的多个元素，并将存储在另一个数组中的不同值分配给每个选定的元素。我举个例子：大小为9000000x9000000Matrix的稀疏矩阵包含我要访问的索引和值的列表，矩阵如下所示：感谢两位的回答，我想我没有很好地解释，我会再试一次。
我已经有一个大约9000000行x 9000000<em
浏览 39提问于2018-06-02得票数 1
回答已采纳
1回答
我必须将稀疏矩阵中的某些列替换为来自另一个稀疏矩阵的列，该矩阵具有相同的非零元素，只是基于条件不同的值。
在Armadillo中，我很难使用迭代器进行写访问。文档说，使用sp_mat::col_iterator提供读/写访问，但是，当我尝试编写值*it = B.col(...)时，会得到一个错误消息error: no match for ‘operator=我是否有语法错
浏览 5提问于2021-04-29得票数 0
回答已采纳
1回答
我正在尝试实现本文中的两个稀疏矩阵相乘的算法： (第一个算法- 1D算法)。
困扰我的是，我不确定SPA (稀疏累加器)到底是什么。我做了一些研究，我得出的结论是，SPA表示稀疏矩阵的??????行/列(我对这部分不太确定)，它由一个具有非零值的密集向量组成，一个非零元素的索引列表(为什么是列表？)以及一个布尔密向量，该向量由“已占用”
浏览 16提问于2021-02-27得票数 2
回答已采纳
类似的条件允许我们在SQL语句的WHERE子句中使用通配符。这允许我们执行模式匹配。像这样与上面的操作一样，任何查询都可以用于CLI中的Cassandra
浏览 0提问于2018-03-31得票数 0
回答已采纳
12607591443 1197 5 1298932770我想构造一个稀疏矩阵，其中行作为userId，列作为movieID。我已经将所有数据存储在名为"column“的字典中，其中列‘user’包含用户ID，列‘movie’包含电影ID，列‘ratings’具有如下评级：
f = open('rating
浏览 0提问于2016-11-14得票数 5
1回答
假设我有一个稀疏矩阵A，我想对它做大量的计算。计算不修改A，只访问它的元素，例如取一行A，然后用某物进行乘法。我想知道在做任何计算之前，我是否应该把A转换成一个完整的矩阵，还是直接做呢？换句话说，访问稀疏矩阵中的元素比访问完整矩阵慢吗？
浏览 0提问于2014-10-14得票数 3
回答已采纳
2回答
数据格式具有相同的索引和列，只是不同的数据。我有一个额外的数组X，它是索引的子集。我以为会有一种仿生的方法来实现这一点，但他们不编译。因此，我创建了两个
浏览 0提问于2017-01-12得票数 2
回答已采纳
2回答
我正在寻找这些方法的时间复杂性，它是数据帧n中行数的函数。
另一种问这个问题的方法是:熊猫树中的数据索引(使用log(n)时间查找ups)还是哈希表(具有固定时间查找)？问这个问题是因为我想要一种基于自定义索引的固定时间查找数据帧中行的方法。
浏览 8提问于2019-11-15得票数 6
1回答
Spark文件在以下上下文中提到CSR索引：
在图形处理系统中开发的GraphX重定向系统优化为连接优化(例如，CSR索引、连接消除和连接站点规范)和物化视图维护(例如顶点镜像和增量更新)。现在我确信我们都支持这一点;)然而，我会对与技术相关的缩略语和语义的信息感兴趣。
浏览 8提问于2015-01-13得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
