多标签数据的共现矩阵

文章/答案/技术大牛

发布

1回答

apache-spark、pyspark、apache-spark-sql、rdd

我有一个用户数据集，每个用户可以属于多个类：user1, Buser2, Auser3, B例如，在本例中，user1属于类我想知道每对类中有多少个唯一用户(表中的每个条目对应于共享唯一用户的数量)：A | 2 | 1 | 1C | 1 | 2 | 2 我想知道如何在PySpark中使用数据帧和RDD来做到这一点？我想我可能需要重塑数据/轴心，但我提出<em

浏览 12提问于2017-12-29得票数 0

回答已采纳

1回答

基于标签的共现图像聚类

python、graph、cluster-analysis、similarity、google-vision

我使用Google Vision API标记了大量的对象图像。使用这些标签( pickle 中的list)，我创建了一个标签共现矩阵(下载为numpy数组)。矩阵的大小是2195x2195。加载数据：import numpy as np labels = pickle.

浏览 0提问于2019-10-21得票数 1

1回答

使用csv文件作为共现矩阵，使用neworkx绘制图形

python、pandas、networkx

我使用sklearn CountVectorizer创建了一个共现矩阵，并将其保存为csv文件。a 0 1 0 02 c 0 1 0 3 3 d 0 0 1 0 使用此数据帧作为共现矩阵绘制共现网络的最简单方法是什么

浏览 39提问于2020-08-20得票数 1

回答已采纳

2回答

什么是共生矩阵，它们是如何在NLP中使用的？

nlp

说：“有时候你需要数据集上的聚合数据，例如建立一个共生矩阵。”那么，什么是共现矩阵(在计算语言学/NLP中)？它们是如何在NLP中使用的？

浏览 2提问于2014-06-06得票数 20

2回答

基于条件随机场的MultiLabel分类

python、machine-learning、classification、multilabel-classification、crf

我在上看到了一个python CRF实现，但我想不出一种方法来进行多标签分类。

浏览 0提问于2016-05-31得票数 3

6回答

如何使用sklearn计算单词-单词共现矩阵？

python、matrix、scikit-learn

我正在寻找sklearn中的一个模块，它可以让你派生单词-单词共现矩阵。我可以得到文档-术语矩阵，但不确定如何获得共现的单词-单词矩阵。

浏览 15提问于2016-02-23得票数 25

1回答

python中的共现矩阵

python、matrix

我有庞大的数据集，样本在下面，我需要计算技能列的共现矩阵，请参考下面的样本数据，我读到了关于共现矩阵的文章，以及CountVectorizer的说明，我写了下面的代码，但是我对如何看到结果感到困惑。如果任何人可以，那么请帮助我，请找到样本数据，并在下面我的尝试代码 df1 = pd.DataFrame([["1000074",

浏览 0提问于2018-02-12得票数 0

回答已采纳

1回答

R新建：：GloVe$text2vec()全局向量$new()环境集/未集

r、text2vec、glove

使用rsparse::GloVe$new()的代码执行设置环境，但不使用GlobalVectors$new()的代码执行设置环境。，错误：wv_main = glove$fit_transform(tcm, n_iter = 10, convergence_tol = 0.01, n_threads = 8) cpp_glove_create(glove_params)中出错:与请求<

浏览 6提问于2020-03-22得票数 0

1回答

如何测量单词的共现频率

nlp

在单词共现中频率是如何定义的？是这两个词同时出现的次数/语料库中的文档总数或两个单词同时出现的次数/(第一个单词出现的次数+第二个单词出现的次数)？

浏览 37提问于2019-03-05得票数 0

1回答

计算r中的词共现矩阵

r、text-mining

我想在R中计算一个单词共现矩阵。我有以下句子的数据框架-Theisgirlandfriends 然后，我想创建单词共现矩阵，该矩阵计算单词在句子中共出现的次数对于所有单词，其中一个单词不

浏览 6提问于2016-11-07得票数 2

1回答

NLP -用哪种技术对段落的标签进行分类？

python、machine-learning、text、nlp、text-classification

我对NLP相当陌生，我正在努力学习能够帮助我完成工作的技术。我在网上读了很多文章，我读过的所有不同的技巧都让我感到困惑。我想要理解的热门词是 共</

浏览 0提问于2019-03-20得票数 1

回答已采纳

1回答

如何在Mahout中生成共现矩阵(仅限)

mahout、recommendation-engine、mahout-recommender

我找不到一种方法来在Mahout中给出一个偏好输入文件(userID，itemID和可选评分)，只生成共现矩阵。这有可能吗？我所能找到的是生成一个推荐输出，而共现矩阵似乎被删除了。

浏览 2提问于2013-01-05得票数 0

回答已采纳

1回答

从计数计算PMI的策略:数据或矩阵

python、nlp、text-mining

对于一组文档，我通过共现类别(如freq(x)或Gene-Disease )提取了所有实体的个体计数( Gene-Gene和freq(y) )，并提取了实体对( freq(x,y) )的共现计数。从原始统计中计算Pointwise互信息(PMI)分数的最佳方法是什么：另一种方法？假设一组数据<

浏览 7提问于2017-09-06得票数 0

回答已采纳

1回答

Skip方法的优点是什么？

word2vec、word-embeddings

关于单词嵌入的概念，Skip方法的目标是计算给定邻域的单词的概率。我不理解其背后的理由，因为它是可以通过直接查看共生矩阵来推断这一信息。总的来说，我无法理解那些旨在从原始共现矩阵中获取尽可能多的相关信息的方法。直接处理共生矩阵不是更容易吗？先谢谢你。

浏览 0提问于2017-08-30得票数 6

1回答

如何使用R创建单词共现矩阵

r、text、analysis

我是r的新手。我有一组关于在线视频及其标签的数据。数据看起来像这样1 A B C D3 B DC X A B C D .....

浏览 1提问于2016-09-24得票数 4

2回答

如何在python中实现字对字共生矩阵

python、word2vec

在sucha中实现共现矩阵是指在给定值的邻域内word1发生次数为word2的一种方法，即5.有100个单词和1000个句子的列表。那么，如何使用python计算大小(100* 100)的共现矩阵呢？

浏览 0提问于2018-10-22得票数 4

回答已采纳

1回答

评价图像分割方法

python、python-3.x、image-processing、computer-vision、image-segmentation

我已经使用算法将一幅图像分割成以下标签，如果它被重塑，这将是一个4x4的标签矩阵。1,1,1,1,1,2,2,1,1,1,2,3,3,3,3,3] jaccard(imagesegment, groundtr

浏览 23提问于2019-10-10得票数 1

1回答

具有不同变量的apply_along_axis

python、numpy、apply

我有一个共现矩阵，一个对称矩阵(Numpy Array)，其中每个单元格指示两个共现字的频率。def calculate_association_strength(self, cooc, i, j, word_occurrences): return cooc/

浏览 7提问于2022-12-01得票数 0

2回答

填充共现矩阵

r、matlab

我正在寻找一种快速有效的方法来填充共现矩阵(可以这么说)。以下是我正在使用的数据示例：a e a e c g d f a g 我想要一个如下形式的矩阵： ... e...例如，矩阵中的元素(3,1)将对应于(c，e)的共现频率

浏览 0提问于2012-10-11得票数 2

回答已采纳

1回答

共现矩阵中的对角值

matrix、cross-product

我是个新手，提前谢谢你的建议但是我不明白为什么A-A的值是10，低于它应该是4，不是吗？

浏览 2提问于2017-11-01得票数 0

点击加载更多