1回答
我需要使用服务帐户执行数据流作业，我遵循的是在同一平台中提供的一个非常简单和基本的示例字数。根据这一点，GCP需要拥有数据流工作者权限的服务帐户才能执行我的作业。
浏览 2提问于2020-02-02得票数 0
正如他们在中提到的，只有3种方法可以安装spring云数据流：
而本地平台的意图是只用于开发，因此对于生产，您将被迫采用第二或第三种选择。问题是我有一个在Google计算引擎上托管的Spring批处理应用程序，我也想在计算引擎上托管带有调度功能的SDCF，因为在我工作的公司中，他们想在Google云平台上托管他们的所有项目。我已经搜索过是否可以使用Google云平台作为云铸造厂的提供商，并
浏览 10提问于2022-09-03得票数 0
是否有方法从本地计算机读取csv文件并使用google数据流将其写入大查询或存储？如果它存在，应该使用哪个跑步者？
所有google数据流示例要么从云中读取，要么写入云存储或大查询。我使用DirectPipelineRunner从本地计算机读取和写入本地计算机。
浏览 3提问于2016-08-04得票数 1
回答已采纳
启动dataflow.projects.locations.templates.launch(i ()函数(我也测试了"now()“函数)生成的列在作业执行期间似乎没有被求值。报告的日期始终以第一次创建模板的日期填充。
浏览 1提问于2018-09-25得票数 0
我目前在GCP中有一个管道，它使用云函数摄取数据，将其存入PubSub，在数据流中进行处理，最后将其插入到BigQuery中。我正在尝试计算平均消息从云函数摄取到BigQuery需要多长时间(包括插入时间)。哪些可用指标可以帮助我计算整体流水线延迟？如果管道的一部分无法
浏览 2提问于2019-11-21得票数 0
我是spring云数据流的新手。我正在尝试建立一个简单的http源和rabbitmq汇流使用SCDF流，app.The流应该部署在OSCF (云计算)。部署后，流应该能够接收HTTP POST请求并将请求数据发送到RabbitMQ。 到目前为止，我已经下载了数据流服务器使用下面的链接和推送到云铸造。我正在使用本地的Shall应用程序。我的问题-如何使用CF中部署的应用程序创建流？注册应用需要HTTP/Fil
浏览 28提问于2021-04-07得票数 0
10 月 26 日国科学技术大学宣布，该校潘建伟、陆朝阳、刘乃乐等人与中科院上海微系统与信息技术研究所、国家并行计算机工程技术研究中心合作，近期成功构建 113 个光子 144 模式的量子计算原型机“九章二号”，求解高斯玻色取样数学问题比目前全球最快的超级计算机快 10 的 24 次方倍（亿亿亿倍），在研制量子计算机之路上迈出重要一步。量子计算机已经实现突破，假如未来可以用量子计算机写代码：
量子计算机的算法和传统计算机会有什么不同？
浏览 4239提问于2021-10-27
我有一个Node部署到谷歌CloudRun，它负责管理外部服务器(干净的，新的Amazon )，包括通过SSH和SFTP。SSH和SFTP最终可以正常工作，但是连接需要2-5分钟才能启动。有时，它们会出现握手超时错误。CloudRun上的部署是相当标准的。我正在使用一个服务帐户运行它，它允许访问机密，等等，分配了大量内存。我还尝试将UseDNS no设置在EC2上的/etc/ SSH /sshd_config文件
浏览 3提问于2020-12-09得票数 1
回答已采纳
我一直致力于建立一个服务，我想让人们上传大量高质量的视频和照片文件到谷歌云存储。我正在使用FFMPEG将视频转换为更小的尺寸，并且遇到了很多函数崩溃的问题。云函数是为处理轻量级计算任务而构建的，我的理解是正确的吗？我可以通过云函数触发视频处理的计算引擎函数来获得更好的性能吗1:用户上传1-50个视频文件。我目前的结构是: 1:上传文件到存储桶2:云函数触发和计算。3:云函数将拇指视频写入存储桶
我是
浏览 2提问于2018-09-15得票数 0
1回答
我们在亚洲-东南1地区的计算引擎上部署了kafka，我们需要在apache波束(云数据流)上进行流式处理。根据我的研究，连接它的唯一方式是通过vpc网络。但是，不幸的是，东南亚地区尚未提供数据流，如果我们在其他地区部署数据流，则无法通过vpc网络进行连接。cloud.google.com/dataflow/docs/guides/specifying-networks#specifying_a_network_and_a_subnetwork 有没有其他解决方案来连
浏览 22提问于2020-01-24得票数 0
2回答
我有一个关于Snowflake成本估算的一般性问题。我有一个计划为每5分钟执行一次的任务 WAREHOUSE = mywhWHENAS如果mystream中没有新数据，则将跳过该任务。然而，由于任务仍在运行，这会花费一些钱吗？
浏览 1提问于2021-05-21得票数 0
1回答
我是一个云计算的新手，我不能理解模拟器，也不知道如何使用模拟器来使用java进行云计算开发。请给我一些关于所有这些的知识，以便更好地理解。
浏览 4提问于2017-06-21得票数 0
我使用数据流服务来运行我的作业，从GCS读取数据并写入BQ表，作业运行成功，我想知道如何或在哪里可以找到google为我的作业设置了多少个虚拟机的信息？
谢谢。
浏览 0提问于2015-02-10得票数 1
1回答
我有一些复杂的Oozie工作流要从迁移到GCP。工作流由shell脚本、Python脚本、Scala作业、Sqoop作业等组成。我遇到了一些可能的解决方案，其中包含了我的工作流调度需求：请告诉我，在业绩、成本计算和迁移复杂性方面
浏览 4提问于2019-12-02得票数 4
回答已采纳
我的目标是将计算机A的本地媒体流共享给计算机B。我已经通过使用云PeerJS服务器成功地做到了这一点。但是，我想在本地网络中设置我的服务器。计算机B负责显示从计算机A接收的流。附注:我可以在计算
浏览 0提问于2014-11-10得票数 0
1回答
我正在使用Twitter在Firebase函数中对tweet进行流处理。在我的流中，我正在跟踪Twitter的各种关键字和用户，因此推文的流入量非常高，甚至在我还没有处理上一条推特之前就发布了一条新的推文，这会导致失效，因为新的推文有时不会被处理。确保客户端读取流的速度足够快。通常，在读取流时不应该执行任何真正的处理工作。读取流并将活动传递到另一个线程/进程/数据存储区，以便异步处理。
我将非常感谢你的帮助。
浏览 1提问于2020-05-07得票数 0
回答已采纳
1回答
我想访问计算引擎VM中存在的文件。我必须从GCE中读取文件，并需要使用云数据流中的python SDK将文件转换为GCS。如果有人建议我做这件事，我会帮上大忙的。
浏览 0提问于2019-10-06得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
