腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(1804)
视频
沙龙
1
回答
Java
-
有没有
一种
不用
迭代
就能
查询
Apache
Spark
模式
的
方法
?
java
、
apache-spark
、
struct
、
schema
我正在尝试找出是否有
一种
方法
可以直接从从行
的
数据集派生
的
Spark
模式
中
查询
结构。
有没有
某种与Scala提供
的
dataframe.schema("nameOfStruct")等价
的
Java
?我尝试过找到这样一个预构建
的
函数,但我唯一能找到
的
就是遍历Structs列表或创建
迭代
器
的
方法
。当Sc
浏览 10
提问于2019-06-17
得票数 2
回答已采纳
4
回答
用
java
阅读microsoft word文档
java
、
file-handling
有没有
一种
不用
Apache
POI包
就能
在
java
中读取microsoft word文档
的
简单
方法
? 或者,在不使用
Apache
POI包
的
情况下,有什么其他替代方案可以实现同样
的
目标?
浏览 1
提问于2011-06-17
得票数 0
回答已采纳
1
回答
使用
Spark
生成无
模式
avro
apache-spark
、
apache-spark-sql
、
avro
、
spark-avro
、
avro-tools
有没有
一种
方法
可以从
Apache
spark
生成无
模式
avro?我可以通过
Java
/Scala使用
apache
avro库和confluent avro生成它。当我以下面的方式从
Spark
编写Avro时,它会创建带有
模式
的
Avro。我想在没有
模式
的
情况下创建,以减少最终数据集
的
大小。
浏览 11
提问于2020-04-21
得票数 0
1
回答
通过C#
的
Apache
查询
c#
、
.net
、
apache-spark
、
.net-spark
、
spark-dotnet
我想知道是否有
一种
方法
可以使用C#来编写在
Apache
spark
上运行
的
查询
。我知道
spark
SQL
查询
可以用
java
/scala/python编写。
有没有
c#
的
接口?
浏览 6
提问于2015-04-29
得票数 6
1
回答
使用
Apache
Spark
生成Avro主题到Kafka
scala
、
apache-spark
、
apache-kafka
、
apache-spark-sql
、
spark-avro
我已经在本地安装了kafka (目前没有集群/
模式
注册表),正在尝试生成一个Avro主题,下面是与该主题相关
的
模式
。来创建一些基于上述
模式
的
数据,并将其发布到kafka。val df =
spark
.createDataFrame(<<data>>) 然后,如下所示: df.write .option("kafka.bootstrap.servers","loca
浏览 9
提问于2019-04-21
得票数 1
1
回答
有没有
一种
不用
查询
就能
读取指针
的
方法
?
react-native
、
pointers
、
parse-platform
、
back4app
我正在尝试读取连接到react native中
的
对象
的
指针。我想知道这样
的
事情是否可能是book.get('publisher').get('name'),或者从指针对象读取信息
的
最好
方法
是什么。
浏览 14
提问于2021-10-24
得票数 0
21
回答
在不
迭代
的
情况下计算IEnumerable<T>中
的
项吗?
c#
、
.net
、
ienumerable
string> Tables get yield return "Foo"; }假设我想对这些进行
迭代
,并编写类似于processing #n of #m
的
代码。
有没有
一种
方法
可以在主
迭代
之前
不用
迭代
就能
找到m
的
值? 我希望我说得很清楚了。
浏览 18
提问于2008-10-04
得票数 345
回答已采纳
3
回答
使用struts 2标记时列表
的
总长度
java
、
struts2
我使用Struts2标记
迭代
一个列表。<s:iterator value="popUpScreenDetailsList" status ="rowCounter"><s:/iterator>
有没有
一种
方法
,我可以
不用
迭代
就能
得到列表
的
长度?这样做
的
动机是使用javascript来验证复选框。
浏览 0
提问于2011-06-17
得票数 5
回答已采纳
2
回答
有没有
一种
不用
样板代码
就能
用
Java
实现转发对象
模式
的
方法
?
java
、
dry
、
encapsulation
由于封装被认为比继承更好(根据有效
的
Java
和其他来源),因此有
一种
转发对象
的
模式
。(我相信Decorator
模式
是这一点
的
同义词,但如果我错了,请不要对我大喊大叫!)我们都知道“不要重复自己”是最理想
的
。
有没有
一种
不涉及样板代码
的
好
方法
来解决这个问题?
浏览 0
提问于2011-10-27
得票数 1
回答已采纳
3
回答
如何命名聚合列?
scala
、
apache-spark
、
apache-spark-dataset
我在Scala中使用
Spark
,并且我
的
聚合列是匿名
的
。
有没有
一种
方便
的
方法
来重命名数据集中
的
多个列?我考虑过使用as来强加一个
模式
,但是键列是一个结构(由于groupBy操作),并且我不知道如何在其中定义一个包含StructType
的
case class。])org.
apache
.
spark
.sql.types.StructType <and> (fields:
浏览 0
提问于2016-07-26
得票数 18
回答已采纳
1
回答
如何自动推断给定
查询
的
行类型信息
apache-flink
import org.
apache
.flink.api.scala._import org.
apache
.flink.api.
java
.io.jdbc.JDBCInputFormatimport org.
apache
.flink.api.
java
.typeutils.RowTypeInfo import org.
apache
.flink.api.common.type
浏览 3
提问于2017-03-17
得票数 1
1
回答
在Go中删除时间复杂度优于O(n^2)
的
映射中
的
键片
go
从Go中
的
映射数组中删除多个键
的
基本
方法
是使用嵌套循环,即使用父循环来
迭代
映射数组,并使用要删除
的
键片内环。
有没有
一种
不用
使用嵌套循环
就能
做到这一点
的
方法
。只是想找出
一种
更好
的
时间复杂度O(n^2)。
浏览 19
提问于2022-01-06
得票数 1
2
回答
如何获得OpenShift/K8s资源
的
模式
,例如如何获得用于部署配置或pod
的
模式
定义
kubernetes
、
openshift
我想让
模式
定义离线。 如何从命令行获得
一种
模式
。例如,我希望获得一个用于部署
的
通用
模式
,DeploymentConfig、Pod或秘密。
有没有
一种
不用
谷歌
就能
获得
模式
的
方法
?
浏览 3
提问于2019-10-17
得票数 2
回答已采纳
1
回答
使用不带ORDER BY ID
的
Row_Number()选择行
sql
、
sql-server
、
database
、
sql-server-2008-r2
、
row-number
我正在尝试选择特定行号之间
的
行(如1到50或51到10等)。下面是我
的
表MatTk
模式
,所有列都允许为空:本文建议使用ORDER BY id,但我想避免使用它,而是以表数据
的
自然顺序显示它
有没有
一种
不用
order b
浏览 0
提问于2018-05-09
得票数 1
1
回答
调用Dataset静态
方法
在Shell中不工作
scala
、
apache-spark
、
dataset
、
apache-spark-sql
我是Scala
的
新手,所以如果解决方案微不足道,我会提前道歉。import org.
apache
.
spark
.sql._ val newDS = Dataset.ofRows(
spark
, newPlan_或import org.
apache
.
spark
.sql.Dataset.*,但
浏览 0
提问于2017-11-07
得票数 1
回答已采纳
1
回答
由于int和bigint数据类型不兼容,因此在读取宗地文件时合并方案失败
python
、
apache-spark
、
pyspark
、
parquet
、
apache-spark-2.0
尝试使用
模式
合并加载parquet文件时 df =
spark
.read.option("mergeSchema", "true").parquet('some_path/partition_date: Failed merging schema:.... at org.
apac
浏览 110
提问于2020-10-22
得票数 2
2
回答
在scala中
的
hive表中创建数据帧时,无法将
模式
名称作为输入
scala
、
hadoop
、
apache-spark
、
hive
我正在尝试从clickstream_db
模式
中存在
的
一个现有的单元表中创建一个数据格式。at
java
.lang.reflect.Method.invoke(Method.
java
:497) at org.
apache
.
sp
浏览 5
提问于2015-12-22
得票数 2
回答已采纳
2
回答
是否有
一种
方法
可以解压缩嵌套冗余列表?
python-3.x
、
list-manipulation
我有一份清单:想要
的
产出:我试过这样做:为了更好地认识到这个
方法
不起作用,因为有多余
的
方括号,
有没有
一种
不用
迭代
就能
解决这个问题
的
方法
。
浏览 2
提问于2020-07-29
得票数 3
回答已采纳
1
回答
避免在
Apache
中使用
Java
数据结构以避免复制数据
apache-spark
、
apache-spark-sql
、
spark-dataframe
我有一个包含大约1亿条记录(~25 100,~5列)
的
单表
的
MySQL数据库。使用
Apache
,我通过JDBC连接器提取这些数据,并将其存储在DataFrame中。我已经在
Spark
的
Java
中实现了这一点,但是它太慢了(就我
的
目的而言),因为我将大量数据从DataFrame复制到
java
.util.Vector和
java
.util.List (以便能够
迭代
所有记录并进行预处理我尝试过将数据库中
的
信
浏览 2
提问于2016-06-02
得票数 0
回答已采纳
1
回答
有没有
一种
不用
提取
就能
编写u-sql
查询
的
方法
呢?
json
、
azure
、
azure-data-factory
、
u-sql
我有一个元数据活动输出,它是我容器中
的
blob
的
一个json。我希望将这些名称输入到foreach活动中,在该活动中将根据文件名对blob执行一些u-sql
查询
。有可能吗?
浏览 1
提问于2019-05-16
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
教程:Apache Spark SQL入门及实践指南!
数据流中的大数据的发展生态环境与数据处理流程化
程序员需要关注的十个大数据技术
大数据技术分享:十大开源的大数据技术
年薪50万+的大数据工程师需要具备哪些技能?
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券