Numpy (稀疏)重复索引增量

文章/答案/技术大牛

发布

1回答

python、numpy、indexing、scipy、sparse-matrix

a、b是具有整数数据类型的大小相同的一维numpy ndarray。文档中有提到这一点吗？示例：import numpy as npa = np.array([0,

浏览 2提问于2017-07-24得票数 1

回答已采纳

1回答

Scipy稀疏矩阵中的寻址范围

python、matrix、numpy、scipy、sparse-matrix

我有一个很大的矩阵，目前在numpy中，我想将其移植到scipy稀疏矩阵，因为保存numpy (2000,2000)矩阵的文本表示超过100mb。(1) scipy中提供的稀疏矩阵似乎过多[例如，或-对于简单的增量，哪一个是最佳的，并且保存到数据库中是有效的？(2)我希望能够像这样寻址矩阵中的范围：>> a = np.zeros((1000,1000))这对于

浏览 2提问于2011-02-03得票数 4

回答已采纳

1回答

如何在python上增量创建稀疏矩阵？

python、numpy、scipy、sparse-matrix、bigdata

我必须创建稀疏矩阵，以便能够将其放入内存中。我从一个大文件中读取输入数据，并增量地更新两个索引(row、col)的同时出现。from scipy.sparse import dok_matrixfor i

浏览 2提问于2016-08-10得票数 1

1回答

使用稀疏索引和值更新numpy数组

python、arrays、numpy、sparse-matrix

我有一维numpy数组，并希望存储它的稀疏更新。假设我有长度为500000的数组，并希望对100个元素进行100个更新。更新要么是添加，要么只是更改值(我认为这并不重要)。用numpy做这件事的最好方法是什么？我只想存储两个数组: indices，values_to_add，因此有两个对象:一个存储密集矩阵，另一个只保存要添加的索引和值，我只需要对密集矩阵这样做：当我们有<em

浏览 0提问于2018-10-28得票数 1

回答已采纳

1回答

Python中稀疏矩阵的唯一列

python、scipy、sparse-matrix

识别以csc_matrix格式表示的稀疏矩阵的唯一列以及每列重复的次数的好方法是什么？我没有关于矩阵元素的先验信息。它是通过替换另一个矩阵的列进行采样的结果，因此我可以有重复的列，因为一个列被采样多次，或者在原始矩阵中有重复的列。因此，我不能对采样列的索引应用numpy.unique，我认为将整个矩阵转换为密集格式，然后对其应用numpy.unique不是一个好的选择。

浏览 1提问于2018-05-19得票数 0

2回答

对于稀疏矩阵，我们通常传入列索引(indices)和索引indices向量的indptr向量，以便indices[indptr[i]:indptr[i+1]]是稀疏矩阵中的行i的元素。在Python语言中，有没有一种快速的、矢量化的、最好是numpy的解决方案，可以将连续行索引的向量转换为indptr？例如，如果这是我的rows索引向量：[0,1,1,2,2,2,3,5]... indptr向量将是[0,1,3,6,7,7,8]，其中7重复，因为行向量

浏览 30提问于2020-09-16得票数 4

回答已采纳

3回答

具有重复索引的增量Numpy数组

python、indexing、numpy

我有一个Numpy数组和一个索引列表，我希望它们的值递增1。这个列表可能包含重复的索引，我希望增量随着每个索引的重复次数而增加。没有重复，命令很简单：b=[3,2,5]对于重复，我提出了以下方法。我是不是错过了一些简单的Numpy操作来解决这个问题？

浏览 2提问于2010-01-05得票数 19

回答已采纳

1回答

如何用Accord.Net进行文本分类？

accord.net

但是我找不到一种方法来表示稀疏向量和矩阵。例如，我们有很多文本，在用ngram和散列标记之后，每个文本都表示为一个带有权重(Tf)的特征索引(由featureHasher提供)。将所有数据作为非稀疏矩阵加载到内存中是不可能的。是否有一种方法可以进行增量处理或表示稀疏矩阵，或者用稀疏数据进行特征约简？

浏览 4提问于2015-06-15得票数 2

回答已采纳

1回答

使用重复线性指数更新矩阵中的单个位置

matlab、matrix、vectorization

我目前正在编写一个向量化代码，该代码组合了一个大型稀疏矩阵，其中给定的线性索引和一个增量矩阵，我希望增量矩阵中与同一线性索引一致的所有值都被累加在一起，以便更新这个线性索引在矩阵中的位置。GlobalPoint是指大型稀疏零矩阵A。GlobalPoint是一个包含用于访问A的线性索引的n x 4矩阵。LM具有要在大稀疏矩阵中添加的增量 GlobalPoint 83

浏览 3提问于2016-09-23得票数 1

回答已采纳

2回答

用Excel写熊猫多索引的“非稀疏”

python、excel、pandas

我有一个带有多个索引的熊猫数据，默认情况下，当打印到屏幕上时，它将“稀疏”输出，这样就不会重复更高级别的索引。例：我可以将其改为“不稀疏”，如下所示：但是，df.to_excel(编写器)不支持此选项，它总是使用合并的单元格将索引写成稀疏。有没有什么方法可以让这篇文章以“不稀疏”的方式写得更好呢？或者，我可以写到csv并将它导入excel，因为csv总是“不稀疏”的，但这有点烦人。

浏览 2提问于2016-01-22得票数 7

回答已采纳

1回答

更新每个循环中的Numpy 1D数组B来求解矩阵表达式A*x =B

python、performance、numpy、scipy、sparse-matrix

我需要从循环中的稀疏矩阵表达式A*x = B中求解A*x = B，其中A是一个CSC稀疏矩阵，而B是Numpy一维数组。A和B都很大，大约500 K行。基本上，我需要在每个循环中更新B。B = csc_matrix((data,(row, col)),shape=(500000, 1), dtype='complex128').toarray()[:,0];row有很多重复索引

浏览 1提问于2021-04-05得票数 2

2回答

索引共享numpy中的行数据

python、arrays、numpy

我正在使用一个相当密集的numpy数组(例如20-50%)，但具有相同值的较大区域。我正在寻找一些东西，要么是内置于numpy中的，要么是允许普通numpy函数与这样的数组一起工作的。我需要让它看起来像是我仍在使用numpy数组。以下是一些注意事项：我知道我可以在python中创建一个对象，它只是将输入索引映射到一些numpy数组中的数据索引，但我也希望这个对象被视为numpy数组，这样我就可以在它上调用numpy函数。我以前见过<

浏览 2提问于2018-05-14得票数 0

2回答

从Scipy稀疏矩阵中获取唯一行

python、numpy、scipy、sparse-matrix

我正在使用python中的稀疏矩阵，我想知道是否有一种有效的方法来删除稀疏矩阵中的重复行，并且只保留唯一的行。我没有找到与它相关的函数，也不确定如何在不将稀疏矩阵转换为密集矩阵并使用numpy.unique的情况下完成它。

浏览 0提问于2017-09-09得票数 5

2回答

具有重复索引的增量Numpy多维数组

python、arrays、indexing、numpy

我有一个N维数组和一组N个索引数组，我想要递增谁的值。索引数组可能有重复的条目。如果不重复，解决方案是i = array([0,0,1])k = array([0,0,3])使用重复，(例如j=array([0,0,2]) )，我无法使numpy递增复制。

浏览 1提问于2011-09-15得票数 3

回答已采纳

2回答

python中非零元素的matlab查找()

python、arrays、matlab、numpy

我有一个稀疏矩阵(numpy.array)，我希望在其中包含非零元素的索引。[i, j] = find(CM)提前感谢！

浏览 0提问于2013-09-26得票数 1

回答已采纳

2回答

如何通过索引将scipy.sparse矩阵赋值给NumPy数组？

python、numpy、scipy

我了解todense()和toarray()方法，但我非常希望避免不必要的复制，我更愿意对NumPy数组和SciPy稀疏矩阵使用相同的代码。现在，我不关心从稀疏矩阵中得到的值效率很低。是否有某种与NumPy索引分配有关的稀疏矩阵的包装器？在这种情况下，是否有与NumPy合作的不同稀疏数组库？更新：我在NumPy源代码中搜索错误消息字符串，我想我找到了在函数@TYPE@_seti

浏览 9提问于2014-11-14得票数 2

回答已采纳

3回答

python / scipy / numpy中的高效增量稀疏矩阵

python、numpy、matrix、scipy、sparse-matrix

在Python中有没有一种高效的增量更新稀疏矩阵的方法？H = lil_matrix((n,m)) h(i,j) += compute_something 这种构建稀疏矩阵的方法似乎相当慢(lil_matrix是最快的稀疏矩阵类型)。有没有一种方法(像使用dict的dict或其他方法)来有效地构建稀疏矩阵H？

浏览 0提问于2016-03-03得票数 2

3回答