腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(1717)
视频
沙龙
1
回答
pyspark
:
将
一列
数组
拆
分为
多
列
更
有效
?
python
、
dataframe
、
apache-spark
、
pyspark
我有
一列
数组
,可以这样创建 df = spark.CreateDataFrame(["[{\"key\":1}, {\"key\":2}"], "tmp") from
pyspark
.sql import有没有一种方法可以一次获得所有max_arr_len
列
?
浏览 74
提问于2020-09-23
得票数 0
回答已采纳
1
回答
遍历
列
绘制多条线的MATLAB
matlab
、
for-loop
、
plot
、
multiple-columns
为了
更
容易开始,我
将
dataset划
分为
在Matlab中得到一个包含6
列
的表,第
一列
表示我希望在x轴上显示的日期。现在,我想用for循环来绘制y轴上的其他
列
(原始文件中的
列
比6
列
多
)。我尝试了以下几种方法,但没有成功:for i=2:1:6end据我所理解,这段代码
将
完全符合我对
列<
浏览 0
提问于2018-10-16
得票数 1
回答已采纳
1
回答
在
Pyspark
中将json sturc值拆
分为
多个
列
pyspark
、
pyspark-sql
我正在
将
json文件导入到
pyspark
dataframe中。我已经用以下代码导入了json df = sqlContext.read.json("json_file.json").select("item", "attributes") 我想将属性从
一列
拆
分为
多
列
浏览 12
提问于2020-01-27
得票数 0
3
回答
在pandas中将某些
列
除以另
一列
python
、
pandas
、
dataframe
我想知道是否有更
有效
的方法来
将
多
列
划
分为
某
一列
。96281619.56 1.0204 1.0276 578987基本上,
列
'open‘和'close’已被
列
'prev.‘’中的值划分。/y, df['open'],df['prev']))
浏览 0
提问于2017-08-27
得票数 3
回答已采纳
2
回答
将
Numpy
数组
加载到单个Pandas DataFrame
列
python
、
arrays
、
pandas
、
numpy
、
apache-spark
我正在使用
PySpark
并尝试使用CSV来存储我的数据。我将我的Numpy
数组
转换为DataFrame,格式如下: label | 0 1 2 4 ... 768 1 | 0.12 0.23 0.31 0.72 ... 0.91 依此类推,
将
数组
中的“行向量”本身的每个值拆
分为
单独的
列
。该格式与Spark不兼容,它需要在
一列</
浏览 18
提问于2020-10-01
得票数 1
3
回答
PySpark
数据帧
将
异常字符串格式转换为时间戳
apache-spark
、
dataframe
、
pyspark
、
apache-spark-sql
、
timestamp
我通过Spark 1.5.0使用
PySpark
。我在DateTime值的
列
中有一种不同寻常的字符串格式。它看起来像这样: Row[(datetime='2016_08_21 11_31_08')] 有没有办法
将
这种非正统的 格式化成时间戳?我在想我可以把这
一列
一
分为
二,使用 从时间的尽头开始倒数。然后执行'regexp _ 分别替换‘,然后连接。但这对许多人来说似乎是一种操作?有没有
更
简单的方法?
浏览 93
提问于2016-08-23
得票数 35
回答已采纳
3
回答
移除化工厂中
列
中的逗号。
python
、
regex
、
dataframe
、
pyspark
我的DataFrame中有两个
列
,第
一列
和第二
列
。两
列
都包含空单元格。|--------------------|------| -----------------------------
浏览 5
提问于2017-10-23
得票数 0
回答已采纳
2
回答
在Node和sqlite3中插入具有
多
列
的多行
node.js
、
sqlite
、
node-sqlite3
我正在尝试使用单个操作
将
许多不同的行插入到sqlite数据库中。每一行都有
多
列
,我
将
数据表示为
数组
数组
。 我已经阅读了用户指南和其他教程,但所有提到插入多行的教程都适用于只有
一列
的行。我试图插入一个更大的
数组
,但为了测试它,我将它拆
分为
两个条目。
浏览 31
提问于2019-05-20
得票数 4
1
回答
在Python中操作制表符分隔的文本文件
python
文件A有
多
列
字母数字代码,这些代码的格式已过时。 文件B有两
列
:第
一列
包含文件A中的弃用代码,第二
列
包含弃用代码的现代版本。换句话说,文件B在过时的代码和现代代码之间进行“转换”。任务是编写一个脚本,该脚本1)
将
文件A中不推荐使用的代码转换为现代代码,2)
将
输出写入新的制表符分隔的文本文件,3)在新文件中修改
列
的顺序,使其与文件A中的
列
的顺序不同。对于任务1,我被允许使用
数组
或散
列
。虽然我知道哈希对
浏览 3
提问于2013-03-13
得票数 0
回答已采纳
1
回答
从每
一列
中选择不同的值
python
、
python-3.x
、
apache-spark
、
pyspark
、
pyspark-sql
我试图在dataframe中的每
一列
中找到所有不同的值,并在一个表中显示。
浏览 2
提问于2018-09-13
得票数 1
回答已采纳
1
回答
Spark DataFrame ArrayType或MapType用于检查
列
中的值
python-2.7
、
apache-spark
、
pyspark
、
apache-spark-sql
、
pyspark-sql
我有一个,其中
一列
是is列表。例如,我想获取其中包含特定ID的行数。但是,要使用映射,我需要使用自定义udf而不是内置(scala)函数array_contains进行筛选。有了MapType,我可以做到:from
pyspark
.sql.func
浏览 1
提问于2018-10-30
得票数 2
回答已采纳
1
回答
将
字符串列转换为
pyspark
dataframe中的字典
json
、
string
、
pyspark
、
pyspark-sql
}注意,这不是
有效
的json文件格式,因为它没有包含在
数组
中。而且,实际的结构要大得多,嵌套也要
多
。这些文件是在s3中分发的。我以前只使用过地板或csv,所以我不知道如何读取这些文件。我目前正在编写一
浏览 3
提问于2020-03-02
得票数 1
回答已采纳
1
回答
Scala - MaxBins错误-决策树-范畴变量
scala
、
apache-spark
、
machine-learning
、
decision-tree
我的错误类似于这2篇文章,尝试了这些可能性,但仍然看到了下面的错误:: && categoricalFeaturesInfo += (0 -> 31) java.lang.IllegalArgumentException:需求失败: DecisionTree要求maxBins (= 3)至少与每个分类特性中的值数目一样大,但是分类功能0有31个值。考虑删除具有大量值的
浏览 1
提问于2017-11-20
得票数 0
0
回答
如何
有效
地
将
Spark dataframe
列
转换为Numpy
数组
?
python
、
numpy
、
pyspark
我正在使用
pyspark
,并且必须在数据帧的每
一列
上应用来自scipy库的box-cox变换。但是box-cox函数只允许一维numpy
数组
作为输入。我怎样才能
有效
地做到这一点呢?numpy
数组
是分布在spark上还是
将
所有元素收集到运行驱动程序的单个节点上?
浏览 6
提问于2016-07-10
得票数 1
1
回答
用电火花
将
稠密向量转换成数据
python
、
pandas
、
apache-spark
、
dataframe
首先,我尝试了下面链接中的所有内容来修复我的错误,但是没有一个
有效
。 from
pyspark
.ml.linalg import SparseVector, DenseVectorfrom
pyspark
.sql.functions import udf from
pyspark</e
浏览 0
提问于2018-09-27
得票数 3
回答已采纳
1
回答
JAVA Super Mario让Mario跌落gap
java
如果你知道一种
有效
的方法,请让我知道。另外,如果你不明白,请让我知道你需要我的代码的解释,谢谢!
浏览 2
提问于2016-05-26
得票数 1
2
回答
从Dataframe
列
提取标签
python
、
azure
、
apache-spark
、
pyspark
、
databricks
Microsoft.Compute/virtualMachines', ]from
pyspark
.sql.functio
浏览 0
提问于2019-10-28
得票数 0
3
回答
如何从某个
列
的模式中删除文本
bash
、
tabular
48 6 0 scaffold EOG091B09QV:/path/path/K x a 1:8830-20153 100.0 60 0 0 其想法只是在
列
sseqidEOG091B09QV x a 1:8830-20153 100.0 60 0 0 我知道与_species_strand_H.m8匹配的cut -f 1 -d ":"可以工作,但不是特定于
列
。
浏览 27
提问于2019-02-02
得票数 0
回答已采纳
3
回答
Pyspark
:
将
多个
数组
列
拆
分为
行
python
、
apache-spark
、
dataframe
、
pyspark
、
apache-spark-sql
其中一些
列
是单个值,其他
列
是列表。所有列表列的长度都相同。我希望
将
每个列表列拆
分为
单独的行,同时保持任何非列表列的原样。示例DF:from
pyspark
.sql import SQLContext# | 1| 3| 7|foo|# | 1| 3| 9|foo|
浏览 2
提问于2016-12-08
得票数 78
回答已采纳
3
回答
SQL表:创建1到1与自身的关系?
sql
、
sql-server
、
tsql
、
relational-database
它有两
列
:MenuItemId和ParentId。两者都是MenuItem表的外键。 如果我设置了第
一列
或两
列
主键,我似乎以一对
多
的关系结束。(我正在从DB生成代码,以便验证它。)如果我只创建第
一列
主键,我
将
进入一种Schr dinger状态,其中MenuItem既可以有一个父级,也可以具有多个父级(即生成的MenuItem属性和EntitySet<MenuItem>属性)。1-1关系
有效
地
将
表中的属性(
列
)划
分为
浏览 0
提问于2018-10-19
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
扫盲,备受Excel大神青睐的数组究竟是什么?
excel中什么是数组,数组的作用是什么,这篇文章就带你入门
《Python数据挖掘及大数据分析》第四讲 Kmeans聚类代码实现、作业及优化
如何统计Excel表格中指定部分的字数?
用Python进行数据分析的基础姿势(一)
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券