腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(3661)
视频
沙龙
1
回答
根据PySpark
中
的
时区
将
协调时
时间
戳
转
换为
本地
时间
apache-spark
、
pyspark
、
apache-spark-sql
我有一个PySpark DataFrame df,它有一些
列
,如下所示。hour
列
采用
UTC
时间
,我想创建一个基于time_zone
列
的
具有本地
时间
的
新
列
。我如何在PySpark
中
做到这一点?
浏览 2
提问于2019-12-03
得票数 5
回答已采纳
1
回答
星火SQL与Cassandra之间
的
时区
不匹配
datetime
、
cassandra
、
apache-spark-sql
、
spark-dataframe
我试图
将
数据
从
卡桑德拉加载到星火DataFrame,但
时间
戳
列
值正在转
换为
UTC
时区
,而不是EDT。Cassandra
时间
戳
:- 16-08-2017 :00:00(东部
时间
区) 在查询
spark
/tempview:- 15-08-2017 20:00:00 (
时区
为
浏览 7
提问于2017-08-16
得票数 1
回答已采纳
1
回答
Spark
2.3
(
Scala
) -
将
时间
戳
列
从
UTC
转
换为
另一
列
中
指定
的
时区
scala
、
apache-spark
、
apache-spark-sql
、
timestamp-with-timezone
| +----------------------+------------+ 我想根据tz_locale
列
中
的
值
将
时间
戳
从
,所以它显然只在
将
整个
列
转
换为
相同
的
时区
时才起作用。但是我需要根据该行
中
另一
列
的
值动态
浏览 41
提问于2021-07-28
得票数 1
回答已采纳
1
回答
加载到拼板时
将
时间
戳
转
换为
UTC
scala
、
apache-spark
、
timestamp
、
parquet
、
timestamp-with-timezone
dataFrame.write.parquet(path)
UTC
时间
我想按原样加载
时
浏览 4
提问于2020-12-10
得票数 2
1
回答
火花转换毫秒为
UTC
日期
时间
apache-spark
、
pyspark
我有一个数据集,其中1
列
是表示毫秒
的
long。我想获得这个数字代表
的
时间
戳
(yyyy-MM-dd HH:mm:ss),在
UTC
中
。基本上我想要和一样
的
行为我
的
问题是,是否有一种方法可以让星火代码
将
毫秒长
的
字段转
换为
UTC
中
的
时间
戳
?我在本地星火代码中所能得到
的
就是
浏览 1
提问于2020-04-17
得票数 6
回答已采纳
1
回答
Spark
/Databricks SQL输出
中
时间
戳
时区
错误/缺失
apache-spark
、
apache-spark-sql
、
databricks
、
databricks-sql
当在databricks/
spark
中
的
时区
之间转换
时间
戳
时,
时区
本身似乎在最终结果
中
丢失了,我似乎既不能保留它,也不能将它添加回去。我有很多
UTC
时间
,并且正在使用根据
另一
个字段将它们转换到不同
的
时区
。计算结果是正确
的
,但如果我用
时区
输出它,它将显示为
UTC
。使用在函数
中
重复此操作
浏览 1
提问于2022-07-15
得票数 0
回答已采纳
2
回答
如何解析ZoneDateTime格式?
postgresql
我目前正试图解析一个类似于:2020-08-03T11:37:42.529Z[
UTC
]
的
时间
戳
我已经试过
的
是通过以下方法解析它:但如果出现异常(除非我解析到
时区
Z),这将失败。编辑澄清一下,这是一个当前保存
浏览 9
提问于2020-08-17
得票数 0
回答已采纳
1
回答
MYSQL数据导入更改
时间
mysql
我对MYSQL
的
时区
有问题。,数据库
中
的
数据与生成
的
.txt文件匹配。我知道这一定是
时区
的
问题(我是
UTC
-05:00,所以换挡
时间
是有意义
的
),但我不明白该怎么做才能阻止数据库假设需要进行
时间
转换。同时,在了解最佳实践之前,在使用LOAD DATA命令块之前,我已经直接尝试
浏览 2
提问于2014-07-13
得票数 4
1
回答
QTIMZON是否用于
将
DB2上
的
日期/
时间
戳
转
换为
i?
ibm-midrange
、
db2-400
关于,是否
将
时间
戳
列
从
系统设置QTIMZON中
指定
的
时区
转
换为
UTC
0000?例如,如果QTIMZON设置为
UTC
-0400,那么在插入行之前是否会发生到
UTC
0000
的
转换?我之所以这样问是因为和都是
从
UTC
转换到操作系统
指定
的
时区
。 我知道特别寄存器,它让我相信没有转
浏览 1
提问于2014-04-21
得票数 1
回答已采纳
1
回答
如何在从SQL Server读取数据时更改:
spark
.read.jdbc使用
的
默认
时区
scala
、
jdbc
、
databricks
我使用
的
是Databricks Runtime 4.2 (包括Apache
Spark
2.3.1、
Scala
2.11)val data_frame =val(,,) 我
的
源表上
的
所有SQL Server日期
时间
列
都映射到数据框
中
的
时间
戳
列
,默认<
浏览 1
提问于2018-07-18
得票数 3
2
回答
根据当地
时区
进行调整
的
最佳方法是什么?
php
、
datetime
、
odbc
在存储数据时使用now()获取
时间
戳
可能是错误
的
? 当我向用户显示日期/
时间
时,他当然希望看到本地
时间
,如果他输入与
时间
相关
的
数据,而不是我使用now(),那么他
将
输入本地日期/
时间
。为什么代码在对话
中
变得混乱--处理
时间
戳
的
最佳实践是什么?
UTC
/locla
时间
?如何以及何时进行调整?
浏览 7
提问于2010-11-14
得票数 1
回答已采纳
1
回答
Postgres+SQLAlchemy在使用default=func.now()时
将
时间
转
换为
UTC
python
、
postgresql
、
datetime
、
sqlalchemy
、
timezone
Integer, primary_key=True), ...它在Postgres
中
创建一个表CREATE TABLE foo id serial NOT NULL, ...本地
时区
被正确设置(检查Python
的
datetime.datetime.now()显示我
的
本地
时
浏览 1
提问于2015-07-30
得票数 12
2
回答
向AWS迁移MySQL on时
的
时区
问题
mysql-5.6
、
amazon-rds
、
master-slave-replication
、
timezone
我有MySQL 5.6数据库,PST
时间
格式在现场服务器.现在,我们愿意
将
数据库迁移到RDS。 为此,我们
从
物理服务器获取备份,并在RDS和安装复制中进行还原,以同步数据。但发现
时间
变到了世界协调时。我们发现RDS
中
的
时间
格式是
UTC
,所以我们在参数组中将time_zone
的
时间
格式改为PST。但是我们无法更改默认
的
time_zone参数。因此,
从
主服务器到
UTC
浏览 0
提问于2019-01-24
得票数 2
1
回答
SparkSession变量是由星火壳(
scala
)执行
的
,是val还是var?
scala
、
apache-spark
、
apache-spark-sql
、
spark-shell
我正试图将我
的
Spark
脚本(用
spark
-shell编写)转
换为
Scala
、对象、方法(def)等,因此我为
spark
-submit创建了JAR。我使用
Spark
进行了大量调用,该SQL对
时区
执行了大量
时间
戳
计算。我必须显式地设置以下配置(因为每个分布式节点都可能配置了不同
的
默认
时区
),以确保我
的
时区
对于该方法
中
任何
S
浏览 5
提问于2020-02-24
得票数 0
回答已采纳
2
回答
如何将不同
的
时区
应用于PySpark
中
的
时间
戳
apache-spark
、
datetime
、
pyspark
、
apache-spark-sql
我正在使用Pyspark,我
的
输入数据包含一个
时间
戳
列
(包含
时区
信息),就像这样。我想要创建这个
时间
戳
的
America/New_York表示。我
的
理解是,最好
的
工具是from_
utc
_timestamp。虽然当我使用它时,我会得到一些不明智
的
结果。当它应该是 datetime.datetime(2012, 11, 20, 12,
浏览 5
提问于2021-08-27
得票数 3
1
回答
火花
将
时间
戳
从
CSV转
换为
Parquet“本地
时间
”语义
apache-spark
、
parquet
.load(filename)对于输入文件
中
的
任何
时间
戳
列
,Parquet输出
将
包含一个具有即时语义
的
时间
戳
,解释当前
Spark
会话/JVM
时区
中
源数据
中
的
时间
字符串。这意味着,我可能会有差异,除非所有星火作业运行在
浏览 0
提问于2020-09-01
得票数 1
6
回答
web应用程序
中
的
时区
处理
java
、
oracle
、
date
、
datetime
、
timezone
1)
将
web服务器和数据库服务器
的
时区
设置为
UTC
,并在获取数据(数据和
时间
)时转
换为
用户本地
时区
。 同时在javascript/java/oracle
中
存储需要将用户本地
时区
转
换为
UTC
的
浏览 8
提问于2015-10-26
得票数 10
1
回答
将
timestamp timezone转
换为
Bigquery
中
具有其他
时区
的
datetime
sql
、
google-bigquery
我在bigquery中有一个外部表(来自GCS),它通过自动模式检测datetime
列
,并使用
UTC
在表
中
创建
时间
戳
列
。我
的
数据
的
时区
是中部(美国/芝加哥)。 ? 我知道
时区
是中央
时区
,我想用
UTC
时区
创建
另一
个
列
。我尝试使用parse_timestamp/转
换为
字符串,然后使用
时
浏览 21
提问于2021-09-29
得票数 0
回答已采纳
2
回答
mySQL如何确定
时间
戳
字段
的
时区
?
mysql
、
timezone
、
timestamp
根据 它从哪里得到这些信息。<e
浏览 4
提问于2011-07-25
得票数 0
回答已采纳
2
回答
如何在R中使用RODBC
从
Sql Server读取
utc
时间
戳
?
sql-server
、
r
、
timezone
、
utc
、
rodbc
我正在尝试
将
一些数据
从
Sql Server 2008导入到R
中
,使用RODBC:results <- sqlQuery(db, "select timestamp from table where some-restriction") 数据存储在"datetime“类型
的
列
中
所有的<em
浏览 2
提问于2011-09-20
得票数 2
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Apache Spark 2.4 内置的 Avro 数据源实战
数据质量和验证检查
大数据分析Python的datetime日期时间教程
一个 “不存在的时间”
Spark SQL DataFrame与RDD交互
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券