我正在尝试使用谷歌提供的模板PubSub to BigQuery设置一个数据流作业。我看到一个用于指定云发布/订阅输入主题的选项,但我没有看到任何用于在GCP控制台UI中指定发布/订阅输入订阅的选项。
如果我提供了主题,job会自动创建一个订阅来读取所提供的主题中的消息。这样做的问题是,在数据流作业启动后,作业将仅看到发布到主题的消息。之前发布
我正在尝试使用数据流、发布/订阅和BigQuery来创建和导出合成数据流。流似乎运行正常-我可以使用“导出到云存储”模板从相应的发布/订阅主题导出到GCS存储桶。当我尝试使用“导出到BigQuery”模板时,我一直收到这个错误: Request failed with code 400, performed 0 retries due to IOExceptionsstatus codes, HTTP framew