我正在尝试将数据上传到AWS Personalize中的用户数据集。该模式包含我的CSV的结构。我在网上检查了JSON，它显示了有效的JSON。
浏览 7提问于2019-11-08得票数 3
回答已采纳
我正在尝试使用Avro来读取/写入Kafka的消息。有谁有使用Avro二进制编码器来编码/解码将放在消息队列中的数据的示例吗？
我更需要Avro的部分而不是Kafka的部分。或者，也许我应该考虑一个不同的解决方案？基本上，我正在尝试寻找一种在空间方面更有效的JSON解决方案。之所以提到Avro</em
浏览 2提问于2011-11-28得票数 29
回答已采纳
2回答
我需要将avro文件作为mrjob hadoop作业的输入。我找不到任何关于如何做到这一点的文档，除非我将额外的命令传递给hadoop streaming jar。但这会使开发变得复杂，因为我一直在使用inline运行器进行本地测试。
有没有可能在MRJob中使用avro runner来读取avro文件？
浏览 2提问于2014-03-13得票数 2
但是，当我转到KSQL时，如果我试图将AVRO流直接沉入InfluxDB，就会丢失有关复杂类型(标记)的信息。我注意到来自这个的警告：“警告ksqlDB/KSQL还不能以与此连接器兼容的Avro格式写入数据”。接下来，我尝试将AVRO流转换为JSON格式，但现在我了解到，我必须在每个记录中指定模式，类似于这个所呈现的模式。我还无法将AVRO流转换为JSON流，并同时嵌入模式和有效负载。最后
浏览 1提问于2020-05-28得票数 1
我有一个JSON文件和一个avro模式文件，它们正确地描述了它的结构。然后，我将使用Avro工具的JSON文件转换为avro文件，而不会出现错误，如下所示：然后将生成的Avro文件转换回JSON，以验证是否获得了如下所示的有效Avro文件：
java -jar .\avro-tool
浏览 0提问于2018-07-03得票数 6
回答已采纳
下面是使用avro-js模块验证nodejs中avro模式的json的代码片段。//import module// path to avro schema "fie
浏览 2提问于2019-11-14得票数 3
2回答
我想使用Apache来序列化我的数据，我的客户机是用C++编写的，我的服务器是用Java编写的。我的服务器java代码如下所示：
模式scm =新的DecoderFactory().directBinaryDecoder(inputStream，().parse(“....shcema String)；avro::EncoderPtr编码器= avro::binaryEncoder()；std::auto_ptr<avr
浏览 2提问于2012-11-18得票数 5
基于AVRO文档，对于二进制编码的AVRO，我理解有两个重要的方面。一个是AVRO schema，即：.avsc (用JSON表示)，它描述了数据的字段，然后是二进制编码的实际数据。关于JSON编码的AVRO的文档很少，所以我想知道它是否遵循相同的语义，即我们将有JSON格式的AVRO模式文件(即：.avsc文
浏览 26提问于2021-11-11得票数 0
我想在NiFi中将Avro文件转换为Parquet。我知道可以通过ConvertAvroToORC处理器转换为ORC，但我没有找到转换为Parquet的解决方案。我正在通过ConvertRecord (JsonTreeReader和AvroRecordSetWriter)处理器将JSON转换为Avro。在此之后，我想将Avro有效载荷转换为Parquet，然后将其放入S3桶中。我不想将它存储在HDFS中，因此PutParquet处理器似乎不适用。
浏览 0提问于2019-02-19得票数 2
回答已采纳
我有一个行类型的RDD，即RDDRow和avro schema对象.I需要用这个信息创建一个数据帧。
为了创建DataFrame，我需要将avro schema对象转换为StructType。
浏览 5提问于2016-11-24得票数 8
1回答
我们正在使用模式注册表将json记录从nifi推送到kakfa主题。"type": [ "float" }]输入记录)：{"latitude":{"float":38.090923},"longitude":{"float":8.67776}}
38.090925000000 ->
浏览 3提问于2019-10-09得票数 0
回答已采纳
我需要将一个对象序列化为Json，但是格式应该是avro兼容的。我的意思是，如果对象有一个可选字段，它应该写成"fieldName": { "fieldType": "fieldValue" } apache avro中有没有可以做到这一点的类？], &qu
浏览 23提问于2020-09-09得票数 1
1回答
我目前正在将我的Kafka程序(java)中的硬编码文本发送到Azure事件中心。在将事件中心内容捕获到ADLS gen1时，会在ADLS中创建.Avro文件。由于Power BI不支持.avro文件，因此我无法继续。
我需要一个解决方案，发送硬编码的文本作为一个.txt或.json文件，而不是.avro，这样我将很容易在power BI可视化。否则，我需要一个解决方案来转换为.txt或.json<
浏览 34提问于2020-06-09得票数 0
1回答
对不起，这是个初学者的问题。这是一个有效和可能的AVRO用例吗？
然后，我们的目的是在Java微服务中处理这些数据，然后再继续发送。也许A
浏览 2提问于2018-07-18得票数 4
回答已采纳
我在提供给job.yaml的values.yaml中有这个定义 command: ["/bin/bash"] cat group_vars/all 我得到这个错误：Error: failed to start container "ric-register-
浏览 148提问于2021-11-05得票数 0
回答已采纳
我在Java中有一些作为GenericRecord的Avro数据，我想转换成JSON，我注意到有两种方法可以做到这一点:一种是使用JsonEncoder，另一种是简单地在GenericRecord上调用经过一些简短的实验后，这两种方法似乎都产生了等价的结果，在这两种情况下，都可以使用JsonDecoder将产生的JSON字符串转换回Avro。所以，我的问题是：
两者之间是否有功能上的区别，是否有理由使用其中一种而另一
浏览 5提问于2014-10-08得票数 7
回答已采纳
我从调用/subjects/{subject}/versions/latest的Kafka schema Registry API获取avro模式，其中有一个"type":["null","string"]字段JsonDecoder jsonDecoder = DecoderFactory.get().jsonDecoder但是，当我调用reader.read(nu
浏览 24提问于2021-11-30得票数 0
3回答
AVRO验证
、、、
我是相当新的AVRO，所以请原谅，如果我错过了任何明显的东西。是否有一个AVRO验证器/命令行实用程序可以根据AVRO模式验证输入？或者可能指向json输入中的错误所在。
浏览 0提问于2012-04-17得票数 8
回答已采纳
我有一个带有RabbitMQ绑定的(Elmhurst发行版)拆分器。我正在尝试更新它，以便它将使用Avro模式作为有效负载。我得到了一个转换异常，这使它看起来像是Avro转换器没有被调用，而JSON转换器获取消息并在其上运行。由: org.springframework.messaging.converter.MessageConversionException:无法写入JSON:而不是地图：{“类型”：“记录”，“名称”：$RecordSchema&
浏览 1提问于2018-08-23得票数 0
回答已采纳
2回答
是否有C#实现来转换AVRO反序列化恢复为常规的JSON格式？我已经成功地阅读了Kafka的主题，并使用了AvroDeserializer，但我想将其转换为JSON格式。下面是一个例子:简单的JSON： "value": {
"eventCreatedTimestamp": 1588694347577,反序列化的</em
浏览 0提问于2020-05-08得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
