腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(3751)
视频
沙龙
1
回答
bigquery
中
日期
/
时间
戳
分区表允许的范围
google-bigquery
在
google
文档中,我
可以
看到关于分区表的以下几点:流到分区表中您
可以
将
数据流
到在过去5年和未来1年之间的
日期
或
时间
戳
列上分区的表中。超出此范围的数据将被拒绝。https://cloud.
google
.com/
bigquery
/streaming-data-into-
bigquery
在一个地方写着:你
可以
在过去的1年到未来的6个月之间流式
浏览 16
提问于2020-09-16
得票数 0
回答已采纳
1
回答
google
数据流
可以
将
输入
日期
转
换为
bigquery
时间
戳
吗
python
、
google-cloud-platform
、
dataflow
对于
数据流
来说,我是个新手,我已经花了几天的
时间
寻找问题的解决方案。我需要运行一个管道,从csv文件中读取以下格式的数据: 2019010420300033,通过不同的流传递它,并以
时间
戳
的形式在
bigquery
中结束。有没有办法做到这一点,或者
输入
文件必须首先转
换为
可转换的
日期
(我知道这样的格式有效: 2019-01-01 20:30:00.331)。或者,是否有可能以某种方式
将
数据流
输出为转换了该
日期</
浏览 4
提问于2019-02-05
得票数 0
回答已采纳
2
回答
没有选择使用标准(非遗留)
将
int转
换为
date或date to int
google-bigquery
是否有函数
将
INT转
换为
日期
,还是
将
日期
转
换为
INT,以进行
时间
戳
筛选?SELECT title, comment, contributor_username FROM [
bigquery
-public-data:samples.wikipedia如附件链接中的图像所示,<
浏览 1
提问于2018-06-23
得票数 0
回答已采纳
3
回答
BigQuery
中的
日期
分区模板表?
google-bigquery
我正在尝试在 + 表中创建
BigQuery
: 用insertAll调用API insertAll如何确保模板表继承基表的
时间
分区?
浏览 3
提问于2016-06-25
得票数 2
回答已采纳
3
回答
无法使用在
BigQuery
中写入
日期
google-bigquery
、
google-cloud-storage
、
google-cloud-dataflow
我正在做一些ETL从一个CSV文件在GCS到烧烤,一切正常工作,除了
日期
。我的表中的字段名是TEST_TIME,类型是DATE,所以在TableRow中,我尝试传递一个java.util.Date、一个com.
google
.api.client.util.DateTime、一个字符串我收到了这样的错误消息:无法
将
非字符串JSON值转
换为
DATE类型。字段: TEST_TIME;值: 在使用DateTime时,我得到了为非记录字段指定的错误: JSON对象: TEST_TIME。
浏览 2
提问于2017-04-06
得票数 5
回答已采纳
2
回答
是否
可以
根据窗口元素的
时间
戳
动态生成
BigQuery
表名?
java
、
google-bigquery
、
google-cloud-dataflow
例如,如果我有一个具有从PubSub读取的5分钟窗口的
数据流
流作业,我理解如果我在过去两天
将
时间
戳
分配给一个元素,就会有一个带有该元素的窗口,如果我使用
将
每日表输出到BigQueryIO.java中描述的
BigQuery
的示例,则作业将在带有实际
日期
的
BigQuery
表中写入两天前的元素。我想用窗口元素的
时间
戳
,而不是当前窗口的
时间
,将过去的元素写入
BigQuery
表,这可能<em
浏览 2
提问于2015-08-24
得票数 5
回答已采纳
1
回答
字符串中的PARSE_DATETIME在
日期
和
时间
之间返回字母T
datetime
、
google-bigquery
我想将字符串转
换为
DateTime.19.03.2020 08:14:13我使用了以下查询: PARSE_DATETIME('%d.
浏览 1
提问于2020-11-09
得票数 0
回答已采纳
4
回答
Avro
日期
和
时间
与
BigQuery
的兼容性?
google-bigquery
、
avro
BigQuery
通常在加载Avro数据方面做得很好,但是"bq“在
时间
戳
和其他使用Avro logicalType属性的
日期
/
时间
字段方面遇到了很多问题。当
BigQuery
时间
戳
将其解释为微秒
时间
戳
时,我使用Avro类型的
时间
戳
-millis的数据就会出现故障。
可以
加载到
时间
戳
中的
时间
浏览 3
提问于2016-11-17
得票数 5
回答已采纳
5
回答
从ISO8601
日期
字符串转
换为
BigQuery
时间
戳
时出错
java
、
date
、
datetime
、
google-bigquery
、
iso8601
我有一个ISO 8601
日期
字符串,格式如下:我需要使用
日期
字符串作为在
BigQuery
中运行的查询的一部分我试图使用com.
google
.cloud.
bigquery
.QueryParameterValue类将其转
换为
QueryParameterValue,并使用一种timestamp类型,如下所示: QueryParameterValue.timestampj
浏览 0
提问于2019-03-14
得票数 5
回答已采纳
2
回答
BigQuery
:
将
字符串转
换为
datetime
sql
、
google-bigquery
我有一个列,在
bigquery
中有数百万个
日期
称为“
时间
戳
”,但它们被标记为string。2022-02-09T12:01:51.911821ZSELECTFROMLIMIT查询
将
处理,
浏览 10
提问于2022-03-30
得票数 0
回答已采纳
1
回答
表达式生成器:到目前为止的
时间
戳
type-conversion
、
azure-data-factory
为此,我
将
日期
与
时间
戳
进行了比较,当然
时间
戳
是不起作用的。如何在
数据流
表达式生成器中将
时间
戳
转
换为
日期
?
时间
戳
格式为yyyy-MM-dd‘T’is :MM:ss‘,'Z’
日期
格式为yyyy-MM-dd 有人能帮帮忙
吗
? 提前使用THanks! Grtz D.
浏览 12
提问于2021-01-15
得票数 1
回答已采纳
3
回答
类似SOCRATA SODA的查询
socrata
、
soda
例如,我
将
所有的苏格拉塔数据和ETL (提取、转换和加载)都转换到
BigQuery
中。 问题是如何通过纯碱API像查询一样运行。如何通过查询
将
时间
戳
字段转
换为
仅用于组的年份。例如,如
浏览 3
提问于2014-08-10
得票数 1
回答已采纳
2
回答
使用bq
将
数据加载到
BigQuery
中的自定义
日期
格式?
google-bigquery
我正在使用命令行上的
BigQuery
将
CSV文件上传到
Google
bq load。它很好用,但是我有一个关于在飞行中转换
时间
戳
的问题。在我的源数据中,我的
时间
戳
被格式化为YYYYMM,例如201303,意思是2013年3月。有什么方法
浏览 0
提问于2015-11-21
得票数 2
回答已采纳
2
回答
日志记录表中更改
时间
列的INT或
时间
戳
?
mysql
、
logs
、
timestamp
我们正在争论如何在站点的新日志表中存储更改
日期
。 一方说,使用INT作为
时间
戳
,存储UNIX
时间
戳
。我们
可以
将
PHP中的
日期
时间
查询转
换为
UNIX整数,并基于此进行查询(其中log_date位于
将
12/25/2012
转
换为
时间
戳
和
将
12/31/2012
转
浏览 0
提问于2013-07-16
得票数 3
2
回答
字符串到
日期
时间
转换
Bigquery
google-bigquery
我有一个源表,它以字符串格式存储
日期
,如下所示:1988-11-22 00:00:00 1983-06-22 00:00:00 mk -t xyz.test birthdate:timestamp 当我编写一个查询
将
所有
日期
从源表转
换为
时间
戳
并将其保存到test1时,它给出了一个错误
浏览 2
提问于2014-04-25
得票数 8
1
回答
bigQuery
不支持毫秒
时间
戳
google-bigquery
我的csv文件中有一个
时间
放大器值为'1522865628160‘。当我在
bigQuery
中加载该字段类型为
时间
戳
的数据时,它将
时间
戳
保存为“1522865628160000”。所以当我查询时它给了我错误 无法返回相对于Unix时代的无效
时间
戳
值1522865628160000000微秒。有效
时间
戳
值范围为0001-01-1
浏览 0
提问于2018-05-11
得票数 5
回答已采纳
1
回答
如何
将
AVRO文件中的整数值加载到
bigquery
中的date列?
google-bigquery
、
avro
它展示了如何
将
avro文件中的整数列加载到包含
时间
戳
字段的
BigQuery
表中。 我也有一个类似的问题。有没有办法
将
avro文件中的整数值加载到
bigquery
的date列中?由于avro不支持
日期
数据类型,我尝试
将
日期
作为字符串字段保存在avro中,并尝试将其加载到
BigQuery
的
日期
字段中。但这是行不通的。如果我知道
BigQuery
如何在内部存储
日期
,也许我
浏览 1
提问于2017-05-25
得票数 2
1
回答
从Synapse加载数据到delta湖的最佳方法是什么?
azure-data-factory
、
azure-data-factory-2
、
azure-data-factory-pipeline
是
将
数据从Synapse加载到三角洲湖的最佳方法。我们创建了
数据流
,以便
将
数据从突触复制到增量文件,因此这里启用了“启用暂存”选项。但启用此选项后,来自突触的所有
日期
字段
将
转
换为
接收器中的
时间
戳
。3.我们为所有表设计了通用管道,因此我们是否
可以
选择根据
输入
参数在运行时转换
日期
字段的
时间
戳
。 如果你有什么想法,请给我建议?
浏览 0
提问于2021-11-03
得票数 0
1
回答
标准SQL/Tableau中将
时间
戳
转
换为
时间
戳
的奇数错误
sql
、
csv
、
google-bigquery
、
tableau-api
最新版本的Tableau在连接到谷歌的
BigQuery
时已经开始使用标准的SQL。 最近,我试图更新一个大型表,但发现在试图解析
日期
时间
时出现了错误。该表起源于一个CSV,它被加载到
BigQuery
中,在那里会发生进一步的操作。原始CSV中的datetime列包含ISO标准
日期
时间
格式的字符串(基本上是yyyy:mm)。但是,在尝试
将
Tableau中的
日期
时间
字符串转
换为
日期
或
日期
浏览 1
提问于2017-02-02
得票数 0
1
回答
如何清理从csv文件读取的数据之前,流插入到
bigquery
表?
google-bigquery
我在云存储存储桶中有一个csv文件(分隔符|而不是,),它的数据格式是10022019作为
日期
,但是我需要在
bigquery
中将其转
换为
可接受的
日期
格式2019-02-10,我
可以
通过一个
可以
在
将
数据流
式插入
bigquery
表之前同时读取和转换数据的函数来实现
吗
?
浏览 11
提问于2020-02-05
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
使用Kafka,如何成功迁移SQL数据库中超过20亿条记录?
从Lambda到无Lambda,领英吸取到的教训
不要用你战术上的勤奋来掩盖你战略上的懒惰
Linux下Shell日期的格式,你知道几种?
Power BI轻松进行时间戳转换
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券