腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何
安排
从
第三方
API
到
Google
云
存储
的
数据
摄取
?
、
我正在运行一个
Google
Cloud函数,它发出一个
API
请求,并将响应作为JSON文件上传到
云
存储
。我遇到了一个较大请求
的
问题,因为
Google
Cloud Functions在540秒后超时。这会导致我
的
批处理
API
请求返回一个错误。 计划将大量
数据
从
第三方
API
传输到
google
云
存储
的
最佳方式是什么?
浏览 31
提问于2019-02-28
得票数 0
1
回答
如何
在
第三方
BigQuery中进行请求,并定期在谷歌
API
上加载结果?我应该使用哪些
google
服务?
、
、
我需要从
第三方
应用程序接口获取
数据
,并在谷歌BigQuery中
摄取
它。也许,我需要通过
google
服务实现这个过程
的
自动化,以便定期完成这个过程。我也读过关于App Engine
的
文章,但我相信不适合只有一个函数来发出拉取请求。<code>A0</code>
浏览 17
提问于2019-08-24
得票数 1
回答已采纳
1
回答
摄入Hadoop中
的
定期REST调用
、
、
我们计划使用REST调用
从
端点
摄取
数据
,并将
数据
存储
到
HDFS。其余
的
电话是以周期性
的
方式(每天或每小时)完成
的
。我已经使用Flume进行了Twitter
的
吞食,但我认为使用Flume并不适合我当前
的
用例,因为我没有使用像Twitter中
的
这种连续
的
数据
消防系统,而是使用离散
的
、定期
的
、有时限
的</em
浏览 0
提问于2017-03-07
得票数 2
1
回答
将谷歌主页
数据
发送到Splunk
、
我试图将由
Google
网络生成
的
数据
发送到Splunk实例。我特别想捕捉哪种设备一整天都连接到哪个点。这些信息可以在应用程序中获得,但似乎无法流到集中
的
日志平台上。有什么办法我看不见吗?
浏览 10
提问于2021-12-03
得票数 1
1
回答
从
API
向
Google
Cloud中
的
Bigquery
摄取
流
数据
、
、
我想从流中
的
api
中
摄取
数据
到
bigquery。我想最好
的
选择是使用
云
数据
流,以便将这些
数据
摄取
到bigquery中,但是我不知道
如何
从
https://developer.tomtom.com/traffic-
api
接口中提取
数据
我是否可以在相同
的
数据
流管道中提取
数据</
浏览 16
提问于2020-04-17
得票数 0
回答已采纳
1
回答
BigQuery
的
数据
传输服务
Google
BigQuery
的
数据
传输服务可以使用多个
云
存储
位置作为
数据
摄取
到BigQuery
的
源目的地吗? BQ对来自GCS
的
数据
摄取
的
收费方式与任何其他
云
源有什么不同吗?
数据
传输服务
的
文档中提到,
从
2017年6月1日起,BQ将收取
数据
传输服务
的
月费?我们有关于成本模型<
浏览 1
提问于2017-05-16
得票数 0
2
回答
什么是部署和管理用于
Google
云
数据
流
的
Python Beam管道执行
的
方便方法?
、
、
、
一旦使用Python和DataflowRunner在
Google
的
云
数据
流中设计和测试了Apache管道,那么在
Google
中使用它并管理其执行是一种方便
的
方法吗?什么是部署和管理
的
Python Beam管道执行
的
方便方法?最好没有
第三方</em
浏览 1
提问于2019-01-27
得票数 2
回答已采纳
2
回答
如何
安排
从
BigQuery表
到
云
存储
的
导出?
、
、
我已经在BigQuery中成功地
安排
了我
的
查询,结果被保存为
数据
集中
的
表。我看到了很多关于将在中传输到BigQuery或Cloud
的
信息,但我还没有发现任何关于将导出
从
( BigQuery表)调度
到
云
存储
( Cloud )
的
信息。是否有可能
安排
将BigQuery表导出到
云
存储
,以便我可以进一步
安排
通过
Google
数据</
浏览 6
提问于2020-01-10
得票数 3
1
回答
使用
数据
流管道(自定义不是内置
的
)
从
google
存储
到
bigquery
的
数据
(批量)
摄取
是免费
的
吗?
、
、
从
google
存储
中
摄取
数据
(批量)
到
bigquery,使用
数据
流(beam,python)对这些
数据
执行一些转换,然后将它们加载到bigquery上是免费
的
还是被视为
API
并应用
api
成本?
浏览 1
提问于2021-06-04
得票数 1
1
回答
使用esp32将
数据
上传到
google
、
、
、
、
是否可以直接将
数据
从
esp32上传到
google
以实现实时异常检测?我不想通过谷歌页,因为它会增加我
的
系统由于连接问题
的
延迟。
浏览 4
提问于2022-04-11
得票数 0
2
回答
直接下载
数据
到
google
云
存储
、
、
、
我想从python应用程序/命令(例如: youtube-dl或
从
第三方
url下载
的
任何其他库)直接下载
数据
到
google
云
存储
(Bucket)。我使用gsutil流命令直接将
数据
从
进程流流到gcs,但它只保存了控制台输出
的
到
桶。另外,我不想挂载
存储
,因为我想与分布式系统共享
存储
有什么方法可以不先在文件系统上下载,然后再复制
到
浏览 1
提问于2018-10-03
得票数 4
回答已采纳
2
回答
从
第三方
服务器获取
数据
的
Google
函数
、
、
、
、
我是新
的
谷歌
云
功能
的
功能和实现。因此,我想知道是否有可能使用
云
函数向
第三方
服务器
API
发出HTTP或HTTPS请求,如果是,那么怎么做?当我收到响应
数据
时,我能使用相同
的
云
功能实例将其
存储
到我
的
防火墙
数据
库中吗? 我怎样才能定期调用这个请求或
安排
它呢?提前感谢
浏览 3
提问于2019-01-09
得票数 15
回答已采纳
2
回答
将
数据
从没有临时表
的
BigQuery select语句导出到
google
云
存储
、
有没有办法在不创建表
的
情况下将
数据
从
select语句(BigQuery)导出到
Google
云
存储
中。
API
-使用<
浏览 4
提问于2017-06-29
得票数 1
1
回答
我们什么时候应该使用SNOWPIPE?
我们在Sharepoint门户中有一些大小在500 MB 20 MB之间
的
文件。我们希望将这些文件转换为CSV,然后将它们转换到雪花。没有真正
的
实时摄入
的
必要。我正在考虑两个选择。哪一种选择更好?将文件(CSV)加载到
云
提供程序对象
存储
中。创造一个外部舞台。然后每小时
安排
一个python程序来
摄取
从
舞台
到
雪花表
的
数据
使用 我更倾向于#1,主要是因为我将控制仓库。
浏览 2
提问于2020-09-22
得票数 0
回答已采纳
2
回答
获取BigQuery外部表
的
GCS路径元
数据
、
、
使用永久外部表查询
云
存储
数据
时, CREATE OR REPLACE EXTERNAL TABLE mydataset.sales format = 'CSV',) 有没有办法知道行是
从
哪个文件中
浏览 50
提问于2020-10-31
得票数 1
回答已采纳
1
回答
在
Google
平台上收集和聚合应用程序
数据
、
、
、
、
我正在尝试使用
Google
云
平台
从
我
的
android应用程序中收集日志/应用程序
数据
。最终,我想通过每晚
从
摄取
csv或json文件,将我
的
数据
存储
在Big中。我
的
问题是,
如何
生成包含来自应用程序多个用户
的
信息
的
csv (基本上只是组合CSV文件)?有任何库/样例项目可以帮助这一点吗?此外,我希望使用不需要用户身份验证
的
浏览 4
提问于2014-02-22
得票数 0
回答已采纳
2
回答
如何
将JSON
数据
(来自
第三方
API
url)直接
存储
在火基实时DB中(JAVA/ANDROID)
、
、
、
、
我
的
android应用程序正在使用外部金融
API
。我希望将这些JSON
数据
存储
在我
的
firebase DB中。所以我想让我
的
客户
从
我
的
防火墙服务器上获取
数据
。有简单
的
方法吗?"gmt_offset":"-18000",
浏览 0
提问于2019-01-16
得票数 0
回答已采纳
1
回答
如何
在特定
的
时间触发
从
火力基地发出
的
通知?
、
、
、
我正在做一个健身应用程序,我必须通知用户在一个特定
的
时间,
从
我已经
存储
在火基地
的
日期。例如:我正在将今天
的
时间戳保存在firebase DB中--称为“start_at”:“时间戳”,现在我必须在
存储
的
日期(时间戳)1周后发送通知。有人来帮我吗?
浏览 3
提问于2017-12-14
得票数 6
1
回答
是否可以使用
google
-spreadsheet- to -json并将其作为firebase函数进行部署?
、
、
、
我在使用firebase函数通过http客户端获取
数据
时遇到了问题。在部署之后,我总是得到
的
错误是: Error: getaddrinfo ENOTFOUND spreadsheets.
google
.com spreadsheets.
google
.com:443我在firebase
的
账号是免费
的
吗?或者我需要升级我
的
帐户才能访问任何电子表格?
浏览 1
提问于2019-01-17
得票数 0
1
回答
通过
云
存储
实现文件共享应用
、
、
、
、
我正在寻找一种文件共享
云
存储
解决方案。我
的
要求如下 公共availability)Users应该能够将内容
从
共享文件夹下载到其私有
云
存储
。应该能够与有限
的
用户共享内容。许多云
存储
服务,如Dropbox,
Google
cloud Storage,amazone,Microsoft azure都允许公共文件夹,但是否有一个选项可以将公共共享内容复制
到
用户
的
私有
云
存储
区
浏览 25
提问于2013-04-09
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
成功从 Hadoop 迁移到 Lakehouse 架构的 5 个关键步骤
多个 Linux 发行版考虑移除 Chromium 软件包
程序员,这 TOP 11 物联网云平台速码!
科技公司安全事件盘点,亿赛通硬核数据安全解决方案来袭
适用于物联网开发的11种热门云平台
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券