在spark中，我有一个RDD：这里的"Text“是一个类，它包含：我想知道在这个RDD中，数组中有多少字符串与我的目标字符串相同，那么有没有办法计算这些字符串的数量呢？我得到的第一件事是：但是我不知道在这种情况下<e
浏览 2提问于2017-03-12得票数 1
回答已采纳
5回答
我正在尝试以最简单的方式编写一个程序，用Scala语言统计文件中单词的出现次数。到目前为止，我有以下几段代码：import scala.io.Source
import scala.reflect.io.File我想知道如何从该行中检索到的序列中提取单个单词
浏览 1提问于2013-03-19得票数 12
回答已采纳
我知道我可以在文本/数组中找到一个单词，如下所示： print 'success'
我想要做的是阅读文本中的一个单词，并尽可能多地计数这个单词(这是一个简单的计数器任务但问题是，我真的不知道如何read已经读过的单词。最后:统计每个单词出现的次数</
浏览 2提问于2018-03-16得票数 0
回答已采纳
3回答
我在Scala中有这个问题要做家庭作业。我曾经有过但没有成功实现的想法是val lines = spark.textFile("basketball_words_only.txt") /&#
浏览 0提问于2018-04-24得票数 0
回答已采纳
我想遍历Hadoop目录中的所有文本文件，并计算单词"error“的所有出现次数。有没有办法使用Apache Spark Scala API创建一个hadoop fs -ls /users/ubuntu/来列出目录中的所有文件？从给定的来看，spark上下文似乎只能通过以下内容单独访问文件：
val file = s
浏览 1提问于2014-04-29得票数 15
回答已采纳
我希望我的数组成为我的新散列的键。我正在写一个统计文档中单词出现次数的程序。my @array = split(" ", $line);
这段代码是在我逐行阅读infile时发生的我正在尝试找到一种方法来完成这个项目使用散列。单词</em
浏览 0提问于2012-04-11得票数 2
我是Scala的新手&编写一个单词计数程序，使用Spark查找文件中每个唯一单词的出现次数。尽管应用程序编译成功，但我遇到的问题是，当我在Eclipse中键入units.时，autocomplete并不建议使用reduceByKey方法。对于其他功能，自动完成作品完美。有什么具体原因吗？
浏览 1提问于2015-06-05得票数 0
回答已采纳
我尝试从文本文件中提取单词。sc.textFile(file_in).map(_.toLowerCase).cache()
res14: Long = 3
res11: Long = 1419val separated = data.map(li
浏览 2提问于2015-03-04得票数 0
7回答
我想从Scala列表或数组(不是RDD)中随机采样，样本大小可以比列表或数组的长度长得多，我如何有效地执行此？因为样本大小可能非常大，并且采样(在不同的列表/数组上)需要进行大量的次数。我知道对于Spark RDD我们可以使用takeSample()来做，有没有Scala list/array的等价物？
非常感谢。
浏览 445提问于2015-10-04得票数 16
3回答
我有一个训练数据集，它是一个numpy数组，形状为(4800,1)。它有一列字符串，每一行对应于来自不同电子邮件的文本。我想要创建一个字典来统计每个单词在使用python时出现的电子邮件数量(或行数)。最后，只选择出现在至少10封电子邮件中的单词。我只能计算出在整个数据集中出现的单词的频率，而不是多少行
浏览 1提问于2020-10-19得票数 1
回答已采纳
1回答
如何使用Postgres统计jsonb数组中的出现次数？["a", "b", "a"]
结果应该是: 2.
浏览 6提问于2020-05-13得票数 0
回答已采纳
仅供参考我是用C编写代码的新手。我正在寻找一种方法来在.txt文件中搜索用户输入的某个单词，并统计它在.txt文件中出现的次数。我目前有一个二维数组中的.txt文件。我甚至不知道如何开始。请帮帮我！
浏览 1提问于2018-11-30得票数 0
2回答
我正在尝试使用星火汇总统计数据，如：所述import org.apache.spark.mllib.linalg.Vectordef countByKey(): Map[K, Long]
/
浏览 3提问于2015-01-23得票数 1
回答已采纳
2回答
我手头的任务是向Jbutton添加一个事件，该事件将统计在JTextArea中显示的单词的出现次数。代码如下所示，但这会计算每一个单词； lbl2.setText("no word to count ")
浏览 0提问于2014-05-20得票数 0
我正在优化我的管道，当我为我的转换工作打开job时，我注意到在作业开始时有几个阶段用于一个叫做ExecuteStats.scala的东西。有没有办法通过删除/跳过这些来优化我的工作？它们通常需要几十秒的时间，每次我运行转换时都会发生。
浏览 3提问于2022-01-20得票数 0
给出一个句子列表，找出两个常用词最多的句子。常用词不需要位于句子中的相同位置(顺序无关紧要)。更新：
这个问题是否存在非成对算法？因为配对是非常简单的。我的想法是使用倒排索引来存储这个单词出现的位置。这需要遍历每句话中的每个单词。然后创建一个n*n的二维数组，用于统计两个句子在倒排索引中出现在同一存储
浏览 2提问于2014-02-11得票数 1
1回答
似乎不适用于星火提交。
、、、
我在使用火花壳的时候没有任何问题。会感谢你的帮助的！-你好，文奇
Exception in thread "main" java.lang.NoSuchMethodError:
浏览 2提问于2016-08-17得票数 3
回答已采纳
完全错误：
Google搜索总是指出Scala版本与用于编译的版本和运行时使用的
浏览 0提问于2020-05-08得票数 4
4回答
我有一个由许多单词组成的字符串。如何查找和统计某个特定单词出现的总次数？在上面的例子中，我该如何找到所有的“hello”？
浏览 1提问于2011-09-02得票数 5
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
