腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
用
Java
编写
的
Avro
工具
运行
方法
的
Scala
类
加载
器
java
、
scala
、
avro
、
avro-tools
在确定
加载
"
Avro
Tools“
类
及其run
方法
的
方法
时,我遇到了一些困难。问题出在
java
和
scala
接口和
类
加载
方法
之间。由于
avro
在Spark应用程序中
的
其他地方用于
加载
数据文件
的
不同版本,我需要能够将此特定
方法
视为对另一个版本
的
avro
-tools<em
浏览 21
提问于2019-09-30
得票数 0
3
回答
如何在IntelliJ中
加载
avro
模式?
scala
、
intellij-idea
、
avro
该项目是
用
Scala
编写
的
。以便在
avro
架构中定义
的
对象类型在项目的其余部分中是已知
的
。 IntelliJ能识别
avro</e
浏览 0
提问于2015-12-11
得票数 6
2
回答
在Flink Mini Cluster (1.11)和AvroKryoSerializerUtils上
运行
流不起作用
apache-flink
在集成测试中测试flink mini集群上
的
流时,我遇到了一个问题。该流映射一个生成
的
Avro
Java
类
( SpecificRecord )。 流作业是
用
Scala
编写
的
。flink
运行
时正在崩溃,因为它无法实例化org.apache.flink.formats.
avro
.utils.AvroKryoSerializerUtils 下面是堆栈跟踪: stack:
java
.lan
浏览 38
提问于2020-09-25
得票数 0
1
回答
将maven脚本转换为SBT以生成
Avro
源代码
scala
、
maven
、
sbt
、
avro
我正在读一篇在这里发表
的
教程 我想知道如果我
用
scala
编写
我
的
项目,我将如何生成相同
的
源代码?<plugin> <artifactId>
avro
-maven-plugin</art
浏览 1
提问于2015-11-01
得票数 0
1
回答
无法写入
avro
文件
java
、
scala
、
avro
我使用库来简化
scala
的
工作。文件中使用Avrotools时,我会得到以下错误: at org.apache.
avro
.tool.DataFileReadTool.run(DataFileReadTool.
java
:71)at o
浏览 2
提问于2014-10-29
得票数 1
回答已采纳
2
回答
为什么AWS EMR上
的
Spark不从应用程序fat jar
加载
类
?
apache-spark
、
classpath
、
emr
、
amazon-emr
我
的
spark应用程序无法在AWS EMR集群上
运行
。我注意到这是因为有些
类
是从EMR设置
的
路径
加载
的
,而不是从应用程序jar
加载
的
。例如 at com.sksamuel.
avro
浏览 3
提问于2017-05-12
得票数 1
回答已采纳
1
回答
用
Android从
Scala
调用不同
的
Java
父构造函数
java
、
android
、
scala
在
Java
中,它是通过以下方式完成
的
: public ViewPager(ContextViewPager(Context context, AttributeSet attrs) { }我在Google和这里搜索了一段时间,有些人建议在
Scala
apply(context: Context, attrs: AttributeSet) = new Vie
浏览 2
提问于2014-06-15
得票数 5
回答已采纳
1
回答
Scala
类
中init
方法
的
java
.lang.NoSuchMethodException
scala
、
apache-kafka
、
apache-flink
、
avro
我正在
编写
一个Apache流应用程序,它反序列化数据(
Avro
格式),读取一个Kafka总线(关于
的
更多细节)。数据正在反序列化为
Scala
案例
类
。当我
运行
这个程序时,我得到了一个异常,它收到了Kafka
的
第一条消息。... 16 more
Scala
案例
类
非常简单: /** Case"
浏览 1
提问于2018-07-02
得票数 5
回答已采纳
4
回答
为什么我可以
用
"
java
-cp
Scala
-library.jar ary.jar;.hello World“来启动
scala
编译
器
?
java
、
scala
我确实理解
scala
是建立在
java
之上
的
,你可以
用
scala
编写
java
代码并执行它。但是当我浏览
scala
的
时,我找不到任何
java
文件。如果编译
器
是
用
Java
构建
的
,我会理解
的
,你现在可以使用一种与
Java
没有相似之处
的
语法。但我找不到。 那么为什么我可以使用
java
编
浏览 3
提问于2013-06-25
得票数 0
回答已采纳
2
回答
Scala
to
Java
ByteCode
工具
scala
、
jvm
、
java-bytecode-asm
Eclipse Marketplace中有一个用于Eclipse
的
工具
,它接受
java
类
并显示其
java
字节码。我想知道有没有类似的
工具
可以对
Scala
类
做同样
的
事情?
浏览 0
提问于2018-11-12
得票数 0
1
回答
Flink中
的
异常流到Kafka
Avro
Sink
java
.lang.IllegalAccessException: Class org.apache.
avro
.specific.SpecificData
scala
、
apache-kafka
、
avro
、
flink-streaming
我使用flink流从Kafka源主题中读取事件,在去复制之后,
编写
来将
avro
主题中
的
kafka主题分离开来。流 val sink = sinkProvider.getKafkaSink
工具
(版本1.2.1)生成了用于SpecificRecordI
的
AvroSerializationSchema forSp
浏览 6
提问于2022-11-20
得票数 0
4
回答
Spark
Avro
在文件写入时抛出异常: NoSuchMethodError
scala
、
apache-spark
、
avro
、
spark-avro
我们使用
的
是Spark 2.4.3 (用户提供
的
Hadoop),
Scala
2.12,我们在
运行
时使用spark-shell
加载
Avro
包: spark-shell --packages org.apache.spark... spark会话报告成功
加载
Avro
包。产生相同
的
堆栈跟踪错误(来自spark-shell
的
副本):
java
.lang.NoSuchMethodError: org.apac
浏览 107
提问于2020-02-19
得票数 0
回答已采纳
1
回答
java
.lang.RuntimeException:
java
.lang.RuntimeException:
java
.lang.NoSuchMethodException:使用ReflectDatumReader解码
avro
时
的
MyRecord.
scala
、
avro
我希望使用
avro
ReflectDatumReader/ReflectDatumWriter序列化
scala
case
类
并进行反序列化。下面是我在
scala
中
的
完整代码- import org.apache.
avro
.io.:28) at org.apache.
avro
.specific.SpecificData.newInstance(SpecificData.
java
:470) . 21更多
的
原因是:
java
浏览 17
提问于2022-11-30
得票数 0
回答已采纳
1
回答
HDFS中
Avro
模式
的
生成
hadoop
、
apache-spark
、
avro
、
spark-avro
我有一个场景,我在HDFS.And中有一些
avro
文件集,我需要在HDFS.I中为这些
Avro
数据文件生成
AVRO
模式文件。我尝试使用Spark ()进行研究。除了将
AVRO
数据文件带到本地并执行HDFS PUT之外,还有其他
方法
吗? 任何建议都是welcomed.Thanks!
浏览 0
提问于2016-10-14
得票数 0
2
回答
如何在Spark (
用
Java
)中将数据序列化为
AVRO
模式?
java
、
apache-spark
、
hdfs
、
avro
、
spark-avro
我定义了一个
AVRO
模式,并使用
avro
工具
为这些方案生成了一些
类
.现在,我想将数据序列化到磁盘。我找到了一些关于
scala
的
答案,但
Java
没有。
类
Article是使用
avro
-tools生成
的
,它是由我定义
的
模式生成
的
。现在,映射
器
抛出错误:
java
.io.FileNotFoundException: hdfs:/...path.
浏览 3
提问于2016-04-11
得票数 1
回答已采纳
2
回答
我可以从
Avro
模式定义中获得
Scala
案例
类
定义吗?
scala
、
schema
、
case-class
、
avro
为了便于在
Scala
中使用
Avro
,我想根据存储在.
avro
文件中
的
模式定义一个case
类
。我可以试试: 在
运行
时修改现有的案例
类
定义?谢谢,任何建议都是非常感谢
的
浏览 0
提问于2013-03-25
得票数 17
回答已采纳
2
回答
如何在
运行
时在
Scala
/
Java
中找到带注释
的
方法
java
、
scala
、
reflection
、
annotations
、
reflections
我想使用带有
Scala
注解
的
运行
时反射(如果需要,也可以是
Java
注解,但我更愿意限制纯
Java
代码) 我想实现一些类似的东西: /** } @printme}
运行
getAllAnnotated()
的
结果如下所示: Foo
浏览 28
提问于2020-09-26
得票数 0
回答已采纳
3
回答
我可以从命令行
运行
Scala
4来测试JUnit代码吗?
testing
、
command-line
、
emacs
、
scala
、
junit
如果是这样的话,是怎么做
的
?我还没有找到合适
的
咒语。 如果没有,那么从命令行对
Scala
代码进行单元测试
的
最佳
方法
是什么?(我是一个机器人;我会在必要时使用IDE,但我更喜欢使用Emacs和命令行
工具
。)
浏览 0
提问于2009-10-06
得票数 1
回答已采纳
1
回答
用
ToolBox隐式分辨率反射失败
scala
、
reflection
、
scala-macros
、
scala-reflect
、
avro4s
我试图基于
类
路径在反射中生成
Avro
4s
的
RecordFormat。下面的代码引发一个错误。MyCaseClass(a: Int) toolBox.parse( |import com.sksamuel.
avro
4smypackage.MyCaseClass |""".stripMargin
浏览 2
提问于2020-11-18
得票数 0
回答已采纳
2
回答
如果不事先安装
Scala
,那么火花壳如何工作呢?
apache-spark
在它
的
快速启动文档中,它说: Using
Scala
version 2.10.4 (
Java
HotSpot(TM) 64-Bit Server VM,
Java
1.8.0_25) 我以前没有安装任何
Scala
发行版。没有
浏览 7
提问于2014-12-21
得票数 7
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Spark 2.4重磅发布:优化深度学习框架集成,提供更灵活的流式接收器
教程:Apache Spark SQL入门及实践指南!
如何将kafka中的数据快速导入Hadoop?
Java架构师必备技能之类加载机制
程序猿张开大嘴,一口含住Hadoop的脑袋,原来大数据如此简单
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券