PySpark -将单个元素数组/列表转换为字符串
PySpark是一种基于Python的Spark编程接口，用于在大数据处理中进行分布式计算。它提供了丰富的功能和库，可以处理大规模数据集。
将单个元素数组/列表转换为字符串可以使用PySpark中的join函数。join函数将数组/列表中的元素连接成一个字符串，并可以指定连接符。
以下是一个示例代码：
from pyspark.sql import SparkSession
# 创建SparkSession
spark = SparkSession.builder.appName("Array to String").getOrCreate()
# 创建示例数据
data = [("Alice", ["apple", "banana", "cherry"]),
("Bob", ["orange", "grape", "melon"]),
("Charlie", ["pear", "kiwi", "mango"])]
# 创建DataFrame
df = spark.createDataFrame(data, ["Name", "Fruits"])
# 使用join函数将数组转换为字符串
df = df.withColumn("Fruits_String",
df.Fruits.cast("string").alias("Fruits_String")).select("Name", "Fruits_String")
# 显示结果
df.show(truncate=False)输出结果如下：
+-------+------------------+
|Name |Fruits_String |
+-------+------------------+
|Alice |[apple, banana, cherry]|
|Bob |[orange, grape, melon] |
|Charlie|[pear, kiwi, mango] |
+-------+------------------+在这个示例中，我们使用join函数将Fruits列中的数组转换为字符串，并将结果存储在新的列Fruits_String中。最后，我们选择Name和Fruits_String列进行显示。
推荐的腾讯云相关产品是TencentDB for PostgreSQL，它是一种高性能、可扩展的关系型数据库服务，适用于各种规模的应用程序。您可以使用TencentDB for PostgreSQL存储和管理数据，并通过PySpark进行数据处理和分析。
产品介绍链接地址：TencentDB for PostgreSQL
相关·内容
4回答
用字符串R替换数据格式中的所有数字实例
r、replace、dataframe
我正在考虑用单词/字符串替换数据中的所有数字。每个数字将被完全相同的单词替换。例如，数字5的所有实例都应替换为“香蕉”，数字10的所有实例应替换为“奇异果”，以此类推。
这是一个样本数据。行名和冒号也是数字：
# 1 2 3 4 5 6
#1 7 7 7 7 7 7
#2 5 5 5 5 5 5
#3 4 4 4 4 4 4
#4 8 8 8 8 8 8
#5 1 1 1 1 1 1
#6 2 2 2 2 2 2
#7 6 6 6 6 3 3
#8 3 3 3 3 6
浏览 8提问于2014-06-21得票数 2
回答已采纳
2回答
Google匹配
google-sheets、vlookup
我有两张床单。第一张纸看起来像这个…
Fruit_Name
Apple
Banana
Orange
Grape
Watermelon
Mango
Strawberry
Melon
Blueberry
Tangerine
Papaya
第二张纸看起来像这个…
Red_Fruits Yellow_Fruits Purple_Fruits Orange_Fruits Grade
Apple Banana Blueberry Orange A
Apple Banana Blackberr
浏览 3提问于2022-08-25得票数 0
回答已采纳
6回答
值在数组中的MySQL SELECT语句
php、mysql、arrays、select
我需要一些MySQL语句的帮助，这是我无法真正做到的。
我有一张这样的桌子：
+---+-------------------------------+
|id | fruit |
+---+-------------------------------+
| 1 | apple,orange,pear,grape,lemon |
| 2 | pear,melon,apple,kiwi,lemon |
| 3 | orange,kiwi,pear,apple,cherry |
| 4 | grape,lemon,cherry,apple,me
浏览 5提问于2015-02-04得票数 1
回答已采纳
1回答
在特定时间窗口中的最经常出现的值
sql、google-bigquery
我的结构如下：
table user
user_id | month_year | fruits
------------------------------
1 | 2021-01 | apple
1 | 2021-01 | melon
1 | 2021-01 | orange
1 | 2021-02 | grape
1 | 2021-02 | orange
1 | 2021-02 | kiwi
1 | 2021-03 | grape
1 | 2021
浏览 0提问于2022-09-06得票数 2
回答已采纳
2回答
输出数组时打印和放置
ruby
我正在尝试显示我的打印输出，以便将"|"字符输出一次，以将我要连接的两个数组分开。我试图弄清楚为什么它会在每一行上打印"|"字符。
葡萄，樱桃，李子，李子，桔子，李子，樱桃，樱桃，芒果，梨子3，0，46，3，43，28，32，34，34，14，49，48，24，12，0
"|" by "14"不应该在那里。它应该继续打印数字数组。这是我的密码
我的代码
words = []
numbers = []
File.open(ARGV[0]).each_line do |line|
mix_content = line.s
浏览 1提问于2014-08-15得票数 0
2回答
在列表中的单词满足特定要求后，从字符串中删除所有内容。
python、python-3.x、regex
我试图找到一种方法，从一个列表中删除特定的单词，并有可能从这个列表中删除所有的东西，在这个单词之后有一个附加的特殊字符。
当前如何仅删除特定项：
导入re
fruits = "Banana Apple Strawberry Cherry Pear Melon Orange"
remove_fruits = "Cherry", "Orange"
fruits_list = fruits.split()
clean_items = []
re_remove_fruits = [fruit for fruit in remove_fruits if &
浏览 5提问于2022-01-19得票数 -3
回答已采纳
5回答
将数组拆分为多个包含字符串的数组
javascript、node.js、arrays
我想要一个任意长度的数组(在本例中长度为10)： var fruits = ["Banana", "Orange", "Apple", "Mango", "Strawberry", "Lime", "Kiwi", "Melon", "Pineapple", "Date"]; 从这个数组中，我想获取增量为5的元素，将每个增量转换为一个字符串，然后将每个字符串存储为一个新数组中的嵌套数组。每个元素都需要用'%‘分隔。 输出如下：
浏览 30提问于2020-06-29得票数 3
2回答
从列中的列表中删除方括号
python、list、for-loop、nested
我在数据表中有列。我只想去掉方括号：
| Fruits |
| -------------------------------------|
| [apple, kiwi, pineapple, mango, lime]|
| [strawberry, cherry, kiwi, orange] |
| [...] |
期望产出：
| Fruits |
| ---------------------------
浏览 1提问于2022-04-25得票数 1
回答已采纳
1回答
R:嵌套分组和通过dplyr的总计数？
r、grouping、dplyr
我正在尝试使用R中的dplyr包使用名为fruit_eaten的数据框架，如下所示：
person,fruit
Alice,apple
Alice,apple
Alice,apple
Alice,orange
Bob,apple
Bob,banana
Bob,grape
Bob,grape
Bob,grape
Cheryl,orange
Cheryl,orange
Cheryl,kiwi
Donald,apple
Donald,apple
Donald,grape
Donald,grape
我想用dplyr做下面的工作
对于每种水果，计算谁吃的最多(所以这不是一个简单的计数，我想要找到最大数量
浏览 4提问于2016-04-18得票数 1
回答已采纳
1回答
Pandas -检查列表列中的所有元素是否都在另一个列表中
python、python-3.x、pandas、dataframe
我有一个数据帧，看起来像这样： Name Fruits
1 Bob Apple,Banana
2 Sam Apple,Orange
3 George Banana,Kiwi,Cherry 另一个列表看起来像这样： Allowed_fruits = [Apple,Banana] 我正在尝试编写一个测试来检查allowed_fruits列表中Fr
浏览 45提问于2020-01-14得票数 0
回答已采纳
1回答
任务完成后队列未结束
python、multithreading、task-queue
这是我用来测试Queue模块的脚本：
from Queue import Queue
from threading import Thread
def worker(fruit_queue):
while True:
fruit = fruit_queue.get()
print 'A fruit: ' + fruit
fruit_queue.task_done()
def main():
fruits = ['apple', 'orange', 'kiwi'
浏览 0提问于2012-10-19得票数 0
回答已采纳
5回答
Python在遍历列表时不对齐检查项
python、iterator、iteration
我试图循环两个列表，只想打印一个项目，如果它不存在于前一个列表。我将通过非常大的文件来完成这个任务，所以我不想像列表或字典一样将它们存储在内存中。有什么方法可以不把这些存储在列表中吗？我尝试了下面的示例，但没有得到想要的输出。任何帮助都是非常感谢的。
list_1 ='''apple
pear
orange
kiwi
strawberry
banana'''
list_2 = '''kiwi
melon
grape
pear'''
for fruit_2 in list_2.splitline
浏览 0提问于2017-03-17得票数 0
回答已采纳
2回答
如何用R在数据矩阵中添加新列的相同字符串的总数
r、loops、row、stringr、search-keywords
假设我有一个矩阵，5乘5的水果名(5类水果)。我想在这个现有的矩阵中添加5个新列，其中每个行都包含单个水果的总数，最后再增加一行，以显示每个相同类型的水果的总和。数据矩阵是这样的
[,1] [,2] [,3] [,4] [,5]
[1,]mango banana mango
[2,]apple kiwi banana
[3,] mango
[4,]mango apple
[5,] orange
我想得到像这样的输出(数据帧)，
[,1] [,
浏览 1提问于2016-02-20得票数 1
回答已采纳
3回答
使用分隔符读取文件并按顺序输出
java
我有下面的文件fruit.txt，我想在文件中读取并按顺序输出它们。
我所做的就是尝试使用嵌套的for循环来获取列表，但失败了。我不知道如何在循环中添加更多的记录。
BufferedReader brInput = new BufferedReader(new FileReader("fruit.txt"));
String line;
String x = null;
while ((line = brInput.readLine()) != null) {
String[] fruit = line.split("\\.");
for(int
浏览 1提问于2016-03-18得票数 1
回答已采纳
4回答
很难通过for in循环计算出最高值
javascript
我很难找到一种方法来循环objectMap中的对象，以给出它的最高值( gathered.My问题是，如何获得循环以使用for in循环获得最高值)。我已经将我的代码below.And附加到我停止的地方，通过for in循环
var fruitString = 'Banana,Banana,Pear,Orange,Apple,Melon,Grape,Apple,Banana,Grape,Melon,Grape,Melon,Apple,Grape,Banana,Orange,Melon,Orange,Banana,Banana,Orange,Pear,Grape,Orange,Ora
浏览 8提问于2016-11-09得票数 1
回答已采纳
1回答
Order by查询特定行位置的结果
oracle、plsql
这是前一个问题的扩展，我有一个查询，它返回如下输出，
SELECT DISTINCT a.rev_date ,fruitname,
fruit_id , primary_fruit_id
FROM fruits a, fruit_lookup s,fruit_reference r
WHERE a.id = s.id(+)
and primary_fruit_id = r.fruit_id(+)
AND (fruit_id = 24 or fruit_id = 0)
ORDER BY case when fruit_id = primary_fruit_id then 0 els
浏览 0提问于2015-05-19得票数 0
6回答
如何将数组的前一个字符串与下一个数组连接起来？
javascript、arrays
我很难把我的头绕在这上面，但是假设有一个数组包含这些元素：
["apple", "banana", "pear", "kiwi", "orange"]
我想将这个数组转换为：
["apple", "apple/banana", "apple/banana/pear", "apple/banana/pear/kiwi", "apple/banana/pear/kiwi/orange"]
我需要在JavaScript中这样做，我不知道如何实
浏览 0提问于2018-07-04得票数 0
回答已采纳
1回答
按值数组过滤核心数据数组字段
swift、core-data、nspredicate
我有核心数据模型：
class Person: NSObject {
var personName: String?
var fruits: [String]?
}
有两个JSON格式的记录示例：
人物1：
{
"name" : "John",
"fruits" : ["banana", "apple", "peach", "orange"]
}
人物2：
{
"name" : "Alice",
"fruits
浏览 0提问于2016-11-07得票数 0
4回答
正则表达式以匹配文件中的唯一单词
regex、linux、perl、grep
要在文件中以" unique :“作为唯一单词的前缀，我尝试使用perl regex命令，如下所示：
perl -e 'undef $/;while($_=<>){s/^(((?!\b\3\b).)*)\b(\w+)\b(((?!\b\3\b).)*)$/\1UNIQUE:\3\4/gs;print $_;}' demo
在演示文件中，其中包括：
watermelon banana
apple pear pineapple orange mango
strawberry cherry
kiwi pineapple lemon cranberry waterm
浏览 5提问于2009-11-03得票数 3
回答已采纳
2回答
使用多个动态objects if语句对对象进行排序
arrays、swift、sorting、dictionary、if-statement
考虑到我们有以下情况：
typealias Fruit = String
typealias Count = Int
struct Smoothie {
let uuid: String
let fruits: [Fruit: Count]
}
let smoothies: [Smoothie] = ...
给定由用户设置的条件数组：
let conditions: [Fruit] = ...
条件数组中的索引越低，我们认为最重要的是排序。
我想对(**Count**)数组进行排序，以便包含 conditions 数组中水果数量最多的首先出现.。
如果水果没有出现在fruits
浏览 4提问于2021-01-30得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
