腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
pubsub
主题
模式
验证
是否
支持
嵌套
json
?
nested
、
schema
、
google-cloud-pubsub
我在创建带有
嵌套
消息的AVRO
模式
时遇到问题。例如
JSON
消息, {"metadata": {"key1": "value1", "key2": "value2"}, "payload": {"key1": "value1", "key2": "value2"}} 从apache avro文档中,我认为这个
模式
定义应该可以工作
浏览 14
提问于2021-05-04
得票数 1
回答已采纳
2
回答
Google Cloud Storage创建发布订阅通知
php
、
google-cloud-storage
、
google-cloud-pubsub
我的代码看起来像这样: use Google\Cloud\Core\Iam\PolicyBuilder;use Google[ 'keyFile' =>
json
_decode->getServiceAccount(); $topicName = 'projects/M
浏览 30
提问于2021-07-20
得票数 0
回答已采纳
1
回答
在CREATE中为
Pubsub
源指定不
支持
的架构
google-cloud-platform
、
google-bigquery
、
google-cloud-pubsub
、
google-dataflow
、
google-data-catalog
继我在谷歌中找到的之后,我尝试做一个示例设置,在
pubsub
中发布消息,并使用dataflow sql将其加载到bigquery表中。但是,当我创建数据流作业时,会出现以下错误:
是
浏览 11
提问于2022-07-07
得票数 0
2
回答
是否
可以为Google /Sub
主题
定义
模式
,比如在Kafka中使用AVRO?
apache-kafka
、
message-queue
、
avro
、
google-cloud-pubsub
据我所知,我们可以在Kafka上定义AVRO
模式
,使用该
模式
定义的
主题
将只接受与该
模式
匹配的数据。在接受队列之前
验证
数据结构是非常有用的。 Google Pub/Sub中有类似的东西吗?
浏览 1
提问于2018-11-08
得票数 4
回答已采纳
1
回答
将指标从Telegraf传送到BigQuery
google-bigquery
、
telegraf
我想把指标从Telegraf发送到GCP的BigQuery。
浏览 0
提问于2019-02-06
得票数 1
1
回答
Dataflow SQL中的属性解析
google-cloud-dataflow
、
apache-beam
、
google-cloud-pubsub
给定Pub/Sub
主题
,BigQuery使用语法
支持
流数据到表。Step1a: INT64c: INT64Step2 gcloud dataflow sql query 'SELECT * FROM
p
浏览 2
提问于2020-10-30
得票数 0
回答已采纳
2
回答
使用
JSON
字段创建BigQuery
PubSub
订阅
google-cloud-platform
、
google-bigquery
、
avro
、
google-cloud-pubsub
我想通过BigQuery
PubSub
订阅插入数据。
PubSub
订阅的
主题
模式
是用AVRO编写的。我在跟踪文档来映射字段,但是由于
JSON
仍然是BigQuery的实验对象,所以我找不到相应的docu。
JSON
Details: [ { "domain": "
pubsub</em
浏览 16
提问于2022-10-14
得票数 0
回答已采纳
1
回答
如何解析Pub/sub触发的云函数中的
Json
有效载荷
node.js
、
google-cloud-functions
、
google-cloud-pubsub
我是google云函数和Node Js的新手,当我试图解析
Json
有效负载时,我一直会收到这个错误。exports.processdata = (event, context) => { var obj =
JSON
.parse(Buffer.from
浏览 0
提问于2020-01-28
得票数 2
2
回答
主题
是在云pub/sub上创建的,但无法对该
主题
创建监视。
cloud
、
gmail-api
、
google-cloud-platform
、
google-cloud-pubsub
我想在云发布/子
主题
上创建手表,但无法创建它。url:'https://www.googleapis.com/gmail/v1/users/me/watch', 'content-type': 'application/
json
'Authorization': 'Bearer '+ access_token,scope : [ '
浏览 3
提问于2015-06-20
得票数 4
回答已采纳
1
回答
有没有办法在从
pubsub
主题
读取的数据流中创建批处理作业?
java
、
google-cloud-dataflow
、
apache-beam
、
google-cloud-pubsub
我有一个数据流管道在流
模式
下,因为它从
pubsub
主题
读取。我希望将其修改为批处理
模式
。我需要这样才能使用FlexRS,因为它只
支持
批处理
模式
。光束版本: 2.13.0
浏览 16
提问于2019-06-27
得票数 1
1
回答
Apache Camel如何使用2个不同的Google pubsubs创建路由
apache-camel
、
google-cloud-pubsub
当建立一个路由时,我想从一个google
pubsub
中拉出一条消息,并将其发送到另一个。换句话说,在我的RouteBuilder中,我想要: from(<
pubsub
1>) .to(<
pubsub
2>); 为了进行身份
验证
,我有两个
JSON
密钥文件。如果我只使用一个
pubsub
主题
,我会像这样进行身份
验证
: GooglePubsubConnectionFactory cF = new GooglePubsubConnecti
浏览 13
提问于2021-02-07
得票数 0
2
回答
使用服务帐户的GCP云调度程序权限错误
google-cloud-platform
、
google-cloud-functions
、
google-cloud-storage
、
google-cloud-scheduler
我创建了一组云功能,可以将数据摄取到google云存储中。函数已通过get http请求设置为仅接受内部通信量。但是,当我使用云调度程序调用函数时,即使在为每个函数指定了一个服务帐户并具有适当的权限之后,我也会不断地获得权限错误。我已经将每个函数设置为位于us-central1 1区域,并对docs和Stack溢出进行了研究,但到目前为止都没有成功。我能得到一些帮助吗?
浏览 8
提问于2020-06-19
得票数 0
回答已采纳
1
回答
波束/云数据流:如何将Kafka (或
PubSub
)
主题
添加到运行流中
streaming
、
apache-kafka
、
google-cloud-dataflow
、
apache-beam
(如何)可以将
主题
动态添加或删除到作为源或宿(Kafka或
PubSub
)的运行管道中?或者使用动态
模式
作为接收器,就像使用BigQuery表名称一样。一些背景知识:我们有不同的
主题
,每个客户一个
主题
,以更好地促进下游聚合,并在运行中清理/添加它们。Kafka用于能够在比
PubSub
更长的时间内回填计算。我现在脑海中的选择要么是扩展KafkaIO来
支持
这一点,要么是在每次添加了删除的
主题
时更新管道(这意味着在更新时流中会有一些滞后)。也许我的头
浏览 6
提问于2017-06-23
得票数 2
回答已采纳
1
回答
gmail.users.watch未能向带有DwD服务帐户的
PubSub
发送测试消息
javascript
、
node.js
、
gmail-api
、
google-cloud-pubsub
我正在尝试设置gmail.users.watch,但得到了一个403个错误:const
pubsub
=
PubSub
(); const topic =
pubs
浏览 0
提问于2017-04-20
得票数 0
回答已采纳
2
回答
从
PubSub
推送订阅到云功能的认证
google-cloud-functions
、
google-cloud-pubsub
我们使用
PubSub
来排队,使用指向一个
PubSub
云函数的推送订阅。根据文档Cloud和According都将对来自
PubSub
的请求进行身份
验证
,云功能没有列出。我们使用了其他谷歌服务,比如调度程序来调用需要身份
验证
的函数,但在
PubSub
中却没有成功。我的问题是,云函数
是否
通过订阅目标帐户集
支持
来自
PubSub
的身份
验证
,还是需要该函数读取并处理JWT本身以进行身份
验证
?
浏览 1
提问于2021-02-01
得票数 5
回答已采纳
2
回答
pubSubSource:重复使用相同的消息两次
apache-kafka
、
apache-kafka-connect
、
google-cloud-pubsub
、
confluent-platform
描述 I有一个卡夫卡连接分布式
模式
的pubSubSource连接器,它只是简单地从
PubSub
订阅中读取并写入一个Kafka
主题
。问题是,即使我要向GCP
PubSub
发布一条消息,我也要在我的Kafka
主题
中写两次这个消息。。":{ "org.apache.kafka.connect.
json
.JsonConverter","key.converter":“org.apache.kafka.connect.
json
.J
浏览 1
提问于2021-02-24
得票数 1
回答已采纳
1
回答
Java应用程序找不到访问GCP发布/订阅的凭据
java
、
google-cloud-platform
、
google-cloud-pubsub
我正在尝试使用GCP Java SDK通过以下代码向发布/订阅
主题
发送消息(在此代码片段中用占位符替换实际的项目ID和
主题
名称):ProjectTopicName<init>(Publisher.java:171) at com.westonsankey.
pubsub
.MessageWriter.sendMessagesToPubSub(Mess
浏览 8
提问于2019-07-28
得票数 0
1
回答
数据流模板Cloud /Sub
主题
与BigQuery订阅
google-cloud-platform
、
google-cloud-dataflow
、
google-cloud-pubsub
我有一个
PubSub
主题
greetingconst escapeHtml = require('escape-html');const {
PubSub
} = require('@google-cloud/
pubsub
'); exports.publishGreetingHTTP= new <em
浏览 0
提问于2019-05-16
得票数 7
1
回答
如何从Cloudflare工作人员内部发布到GCP
PubSub
主题
javascript
、
google-cloud-pubsub
、
cloudflare-workers
是否
可以通过基本的
PubSub
请求发布到GCP
PubSub
主题
?我有一个Cloudflare工作人员,我想从它直接发布到一个
主题
。似乎在
PubSub
API上不
支持
API密钥,而且在我的一生中,我无法在不使用SDK的情况下找到使用服务帐户的方法。
浏览 5
提问于2019-09-20
得票数 1
1
回答
数据流SQL -不
支持
的列类型NUMERIC
google-cloud-dataflow
、
dataflow
我正在尝试设置一个数据流-SQL作业,以便在BigQUery中运行查询并将结果发布到
PubSub
主题
。我没有使用数据流模板,我使用GCP的Dataflow SQL UI来编写查询和配置输出-即
PubSub
主题
。 我要查询的表包含String、Date、Timestamp和Numeric类型。即使我没有选择数据类型为' NUMERIC‘的列,我仍然会在编辑器不
支持
的列类型NUMERIC中得到一个
验证
错误。 在Dataflow SQL中有解决这个问题的方法吗?
浏览 17
提问于2020-05-02
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
9012年了,我不允许你还不会玩IPFS!
Python使用JsonPath,完成接口自动化测试
开源|一个可以通过 JSON 生成具有动态渲染、数据收集、验证和提交功能的表单生成组件
替代 Kafka?Pinterest 推出高效可扩展云原生系统 MemQ
【Python基础】Python字典嵌套:编程界的俄罗斯套娃
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券