腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
为什么
在
BigQuery
表
中
加载
后
,
地块
文件
中
的
数据
与
源
数据
不
匹配
google-bigquery
、
google-cloud-storage
、
parquet
在
我
加载
拼图
文件
从谷歌存储到
BigQuery
表
。预览tap
中
的
数据
(
在
Bigquery
中
)
与
源
数据
不同。但是模式是正确
的
。 ?
浏览 7
提问于2019-05-17
得票数 1
1
回答
将单列csv上载到具有拆分列
的
bigquery
时出现问题
sql
、
google-bigquery
我正在尝试将
数据
集上传到
bigquery
,这样我就可以查询
数据
了。
数据
集当前位于csv
中
,每行
的
所有
数据
都在一列
中
,并以逗号分隔。我希望使用逗号作为分隔符将
数据
拆分为多个列。当尝试使用自动检测模式上载时,已检测到10列,但它们被称为'string_0,string_1,string_2等‘,并且这些行仍然将所有
数据
放在第一列
中
。在这两种情况下,我都将标题行设置为跳过=1 这是
数据<
浏览 2
提问于2020-02-10
得票数 0
1
回答
数据
融合复制管道不是Google
中
的
数据
同步
google-cloud-platform
、
google-bigquery
、
google-compute-engine
、
google-cloud-data-fusion
嗨,我们想把
数据
从Mysql(
源
)复制到GoogleBigquery(目的),我们采用了google文档描述
的
方法,并使用了链接中提到
的
数据
融合复制管道。我们正在做
的
事情:
在
SQL
中
为CDC(变更
数据
捕获)启用bin日志,在
数据
融合
中
创建复制管道,启动管道并同步
数据
。我们成功地创建了一个
数据
融合实例,并且能够创建一个复制管道,能够获取我们
的
MyS
浏览 5
提问于2021-04-22
得票数 0
1
回答
将可变结构
的
JSON
加载
到Google
BigQuery
中
,重复和可空
的
问题
json
我正在尝试将Google JSON
文件
加载
到200k+
BigQuery
中
。
数据
集是出纳员
数据
,
在
一些交易中使用一张折扣凭证,
在
一些交易中使用一张以上
的
凭证,而在其他交易
中
不使用凭证。因此,一些字段
在
一个
文件
中
是可重复
的
,但在另一个
文件
中
为空。
加载
时,我得到一个错误:
BigQuery
浏览 2
提问于2017-05-04
得票数 0
1
回答
将文本
文件
(.txt)
加载
到
bigquery
表
的
最佳方法
google-bigquery
对于如何最好地将文本
文件
上传到
bigquery
表
,有人有任何实用
的
想法吗?我需要从远程SFTP服务器下载一些压缩文本
文件
,并将其
加载
到
bigquery
表
中
。我应该把它下载到google云存储
中
并从那里上传到
bigquery
以获得更快
的
速度吗?文本
文件
每个大约5GB,并将进一步增长。谢谢。
浏览 2
提问于2020-01-23
得票数 0
回答已采纳
1
回答
通过windows服务
在
BigQuery
表
中
插入记录
.net
、
sql-server
、
c#-4.0
、
windows-services
、
google-bigquery
我已经创建了一个windows服务,它可以使用服务帐户授权
与
Google完美地进行通信。出于测试目的,我能够从
BigQuery
表
中
获取
数据
,以检查我
的
BigQuery
服务和Windows之间
的
通信。但是这个服务基本上是从MSSQL server
中
获取记录,然后一个接一个地向
BigQuery
中
的
目标
表
插入或追加一条记录。我不想使用CSV或JSON
文件</em
浏览 0
提问于2012-10-30
得票数 0
回答已采纳
1
回答
将
数据
从google电子表格
加载
到
bigquery
的
独立脚本
google-apps-script
、
google-sheets
、
google-bigquery
我编写了一个独立脚本,用于将
数据
从csv
文件
加载
到
bigquery
,但我想知道如何将
数据
从电子表格
加载
到
bigquery
。这是我把
数据
从csv
加载
到
bigquery
.I
的
代码,我想知道在哪里修改google电子表格而不是csv
文件
。 {name: 'bi
浏览 3
提问于2016-08-26
得票数 1
2
回答
具有GCS
数据
源
的
Bigquery
表
不影响更改为gcs
的
数据
google-cloud-platform
、
google-bigquery
、
cloud
、
external-tables
我是
bigquery
的
新手。我从gcp控制台创建了
bigquery
表
,其中使用GCS CSV
文件
作为
数据
源
。我认为当我删除任何行时,也应该将其从GCS
文件
中
删除。但实际上,这种情况并没有发生。
浏览 22
提问于2020-06-22
得票数 0
1
回答
将包含10列
的
CSV
文件
加载
到现有的
BigQuery
表
中
,该
表
中有103个列,其中10个具有精确
的
列名csv
文件
。
python
、
csv
、
google-cloud-platform
、
google-bigquery
我使用python将包含10列
的
CSV
文件
加载
到包含103个列
的
现有
BigQuery
表
中
。附加写入模式。CSV
文件
的
10列具有
与
现有
BigQuery
表
的
103个列
中
的
10个列完全相同
的
列名。我
在
job_config中使用job_config进行模式自动检测。 我想要完成
的
是,
浏览 6
提问于2022-02-17
得票数 0
1
回答
Google
BigQuery
和Google Bigtable之间有什么关系?
google-cloud-platform
、
google-bigquery
、
google-cloud-bigtable
基于许多来源,我了解到(
BigQuery
和Bigtable)都被认为是用于
数据
和
的
2不同
的
解决方案。例如,写道,如果我们需要大量
数据
的
统计
数据
(例如,和、平均值、计数),我们可以将
bigQuery
看作一个
数据
存储。相反,BigTable可以像通常
的
NoSql存储一样考虑。另一方面,我读过,其中提到: 从这个片段
中
,我了解到
BigQuery
是一个用于从任何地方查询
的</
浏览 2
提问于2020-03-03
得票数 0
回答已采纳
1
回答
迭代结果集时
的
性能问题
python
、
google-bigquery
我们使用google
Bigquery
库来查询
Bigquery
,并在python脚本
中
处理结果。处理部分转换
数据
并丰富
数据
,最后创建JSON对象。但是,我们
在
查询一个返回总计约3,5 GB大小
的
11 mio记录
的
表
时,会遇到性能问题。即使我们省略了处理,只获取页面也需要80分钟(
在
本地运行它时,或者
在
驻留在
bigquery
数据
集相同区域
的
VM &
浏览 4
提问于2022-06-03
得票数 3
4
回答
Data Studio
中
的
数据
集配置错误
google-sheets
、
google-data-studio
Data Studio无法连接到您
的
数据
集。无法从基础
数据
集中提取
数据
。
数据
集连接了一段时间或该错误发生
后
的
几天
数据
未连接到
数据
范围 ?
浏览 59
提问于2020-01-21
得票数 7
3
回答
Bigquery
错误:对于每个目标行,更新/合并最多只能
匹配
一个
源
行
google-bigquery
我想知道是否有人可以帮助解决以下错误:我
的
问题如下:SET s.SKU_Label = TRIM
浏览 0
提问于2018-05-24
得票数 7
1
回答
为什么
需要临时
的
GCS存储桶才能将
数据
写入到
BigQuery
: pyspark
pyspark
、
google-bigquery
、
google-cloud-storage
、
pybigquery
最近,我遇到了一个问题,当我使用pyspark将
数据
写入
BigQuery
中
时。这里是: spark.conf.set('temporaryGcsBucket', bucket) 我认为
在
Biquer
浏览 6
提问于2021-06-11
得票数 1
回答已采纳
3
回答
从Google Cloud SQL迁移到Google
Bigquery
google-bigquery
、
google-cloud-sql
我需要将我
的
两个
表
从Google Cloud SQL迁移到Google
Bigquery
。 该
数据
的
大小约为1TB,并包含约5个月
的
股市节拍
数据
。我从文档中了解到,我可以将
数据
导出为CSV并将其
加载
到
Bigquery
中
。我希望按照最佳实践
中
的
建议,
在
Google
Bigquery
中进行日期分区。此外,我希望
在
每
浏览 1
提问于2018-01-30
得票数 4
1
回答
当使用Apache
的
DIRECT_READ时,是否读取流缓冲区?
google-bigquery
、
apache-beam
我使用
Bigquery
和
数据
流。当使用Apache
的
时,是否读取流缓冲区?有人知道是否是这样吗?
浏览 9
提问于2022-03-17
得票数 0
2
回答
数据
处理-
BigQuery
对
数据
Proc+
BigQuery
google-bigquery
我们
在
BigQuery
表
中有大量
的
原始
数据
(100亿到4000亿)。我们需要处理这些
数据
,以转换和创建星型模式
表
的
形式(
bigquery
中
可能是不同
的
数据
集),然后可以通过atscale访问这些
数据
。需要以下两种选择之间
的
利弊: 1.
在
BigQuery
中
写入复杂
的
SQL,读取
浏览 10
提问于2020-01-14
得票数 0
1
回答
在
GCP
中
执行
数据
映射
google-cloud-platform
、
google-bigquery
我有来自多家酒店
的
数据
。这些酒店没有使用相同
的
命名约定来存储订单信息。我
在
bigquery
中
创建了一个预定义
的
数据
集(称为hotel_order)。我希望将来自不同酒店
的
数据
映射到GCP
中
的
单个
数据
集,因此
在
bigquery
中进行比较就更容易了。如果列名(来自hotel1)
与
bigquery
列
浏览 2
提问于2022-02-24
得票数 0
2
回答
谷歌
BigQuery
-导入CSV -如何
匹配
列?
csv
、
google-bigquery
我有定期进口到
BigQuery
通过CSV,这是很好
的
。 但是,我
的
CSV
中
列
的
顺序最近发生了变化,当导入到
BigQuery
时-- CSV
中
的
列名
与
<
浏览 0
提问于2017-06-30
得票数 0
1
回答
平面
文件
--> BizTalk --> Sql Server -->行序列
不
匹配
sql
、
biztalk
正在将
源
平面
文件
从BizTalk处理到Sqlserver
表
-但在处理完sql server
中
的
文件
之后,
与
源
平面
文件
相比,记录
的
顺序/顺序
不
匹配
我们有一个
源
平面
文件
"FileA“,它只有一列80个字符使用BizTalk --> SQL server
表
导入
后
,
与
原始平
浏览 0
提问于2020-11-26
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
谷歌推出Bigtable联邦查询,实现零ETL数据分析
数据湖和SQL并不矛盾
excel从外部导入数据之如何导入文本文件数据?
使用Java部署训练好的Keras深度学习模型
什么是数据仓库,以及我为什么需要它?
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
云直播
实时音视频
活动推荐
运营活动
广告
关闭
领券