腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
Spark
-
如果
dataframe
中
的
某个
日期
有
多个
时间
戳
可用
,
则按
时间
戳
降序
和
删除
apache-spark
我
有
下面的
spark
数据帧/数据集。08-01 10:10:002021-08-02 yyy 2021-08-02 07:15:00 在上面的
dataframe
中
,对于同一组
日期
和
名称,
如果
我
有
超过1条记录,我必须对
时间
戳
进行
降序
排序,只保留第一行,并
删除
日期
浏览 35
提问于2021-08-03
得票数 0
回答已采纳
1
回答
KPI调整表
kpi
、
adjustment
我
有
一个包含每月KPI摘要
的
表格。客户现在希望能够对原始数据进行调整。我必须考虑到调整以及保留原始数据。我生成
的
报告将显示原始数据+或减去任何调整。 下面是我需要做
的
一个例子。对如何编码
有
什么想法吗?
浏览 0
提问于2010-07-29
得票数 0
2
回答
如何解析
日期
时间
?
scala
、
apache-spark
、
apache-spark-sql
我正在尝试解析当前类型为string
的
date列。它
的
格式是我
有
火花2.1版本。我试过以下几种方法这将返回2005-04-24,但没有
时间
戳
。然后我试着
spark
.sql("select TO_DATE(Date_Resulted, 'yyyy-MM-ddTHH:mm:ssZ'
浏览 2
提问于2019-09-20
得票数 2
回答已采纳
1
回答
等同于
spark
中
日期
的
数字
apache-spark
、
hive
、
apache-spark-sql
在excel
中
,43517
的
等效值是2019年4月16日。当
dataframe
从excel
中
读取值时,它会将其作为整数读取,但我希望将其转换为
时间
戳
。df =df.selectExpr(“cast(
日期
作为
时间
戳
)
日期
”) 取值= 43517;结果= 1970-01-01 09:06:...
浏览 18
提问于2021-02-19
得票数 0
1
回答
如何从火花数据
中
筛选/提取无效
时间
戳
值
python
、
apache-spark
、
pyspark
、
apache-spark-sql
我
有
一个由
时间
戳
列组成
的
XYZ记录
的
数据,该
时间
戳
列由无效
的
值组成,如下所示这需要创建两个dataframes,一个由有效
的
时间
戳
值组成,另一个包含无效
的
时间
戳
值,如下所示: 无效记录df应该具有无效
时间
戳
的
值:不知道如
浏览 5
提问于2021-08-06
得票数 1
回答已采纳
1
回答
红色排序集根据分数
和
日期
时间
作为平局破门?
sorting
、
optimization
、
lua
、
redis
、
sortedset
我需要
的
平局是记分
的
日期
。- Score 40 User2 User3我看到
的
唯一解决方案是在条目上存储上一次更新
的
日期
时间
如果
结果长度大于x,则至少有一条领带,因此我将使用2个键对Lua
中
的
较小列表进行排序。 这个方法看起来很慢,我需要让它为成千上万
的</em
浏览 4
提问于2017-05-16
得票数 2
回答已采纳
3
回答
在PHP
中
按
日期
顺序订购项目?
php
、
date
、
sql-order-by
我正在研究WordPress主题,它具有一些自定义功能,包括添加包含字符串格式
的
开始
和
/或结束
日期
的
“事件”
的
功能。 最后一次活动:2010年12月11日
浏览 5
提问于2010-07-22
得票数 0
回答已采纳
2
回答
Spark
Structured Streaming如何确定事件是否迟到?
apache-spark
我通读了
spark
structured streaming文档,我想知道
spark
structured是如何确定事件已经迟到
的
?它是否将事件
时间
与处理
时间
进行比较?1)这个处理
时间
是从哪里来
的
?由于它
的
流,它是否假设有人可能正在使用具有处理
时间
戳
的
上游源,或者
spa
浏览 0
提问于2018-02-26
得票数 4
2
回答
将当前
时间
戳
添加到
Spark
dataframe
,但按当前
日期
将其分区,而不将其添加到
dataframe
中
java
、
dataframe
、
apache-spark
、
parquet
、
partition-by
据我所知,通过这样做,我们可以将当前
时间
戳
添加到
dataframe
:df.withColumn("time_stamp", current_timestamp()) 但是,
如果
我们想通过从
时间
戳
派生它,而不将它添加到
dataframe
中
,将其按当前
日期
进行分区,从而将其保存为一
浏览 35
提问于2022-04-18
得票数 0
1
回答
将
时间
分布在毫秒内以获得平滑
的
曲线
python
、
pandas
、
dataframe
、
datetime
我
有
一个
dataframe
,其中一列包含
日期
时间
。
日期
时间
是到秒。我需要自动将毫秒加到秒数
中
,因为每个秒值都有
多个
值。例如,2019年2月21日下午3:50:41,我
有
35次这个
时间
戳
。
如果
我可以将毫秒加到这个
时间
戳
上,那么当我绘制曲线时,它将是一条平滑
的
曲线。并且每隔一秒
的
值具有不同数量
的
实
浏览 39
提问于2019-05-30
得票数 2
回答已采纳
1
回答
如何在java servlet
中
确定cookie过期
日期
?
servlets
、
cookies
Java servlet API返回一个具有getMaxAge方法
的
。它返回cookie存在多长
时间
,但不知道何时在浏览器中将其
删除
。 是否可以通过servlet API计算过期
日期
?
浏览 1
提问于2015-10-23
得票数 2
1
回答
Pyspark toPandas()超出边界纳秒
时间
戳
错误
pandas
、
apache-spark
、
pyspark
、
apache-spark-sql
我正在试着把一个火花
DataFrame
转换成熊猫。
如果
我
删除
了所有的
时间
戳
列,那么它就可以工作,但是我想把整个表都放到Pandas
中
。
有
几列
浏览 140
提问于2021-02-23
得票数 2
回答已采纳
1
回答
如何在合并时手动将
时间
戳
强加于增量表版本?
apache-spark
、
databricks
、
delta-lake
我正在不断更新数据库
中
的
Delta表,使用:delta_table.alias("t").mergeset=... # update columns values=... # insert columns稍后,我想使用
时间
戳
查询表
的
不同版本"s3://BUC
浏览 13
提问于2022-11-14
得票数 0
回答已采纳
2
回答
如何从熊猫样式对象
的
datetime列
中
删除
时间
戳
python
、
pandas
、
styles
我
有
一个没有
时间
戳
的
日期
列
的
DataFrame
:但是,一旦我将style应用于df
的
另一列,例如:
DataFrame
成为一个样式对象,"Date"列获得以前没有的
时间
戳
,如下所示:我尝试使用以下方法从Date列
中
浏览 4
提问于2022-01-19
得票数 2
回答已采纳
1
回答
Windows批处理:从字符串创建
时间
戳
batch-file
、
timestamp
我想
删除
比
某个
任意
日期
(希望在代码
中
手动指定
的
日期
)更早
的
任何文件。for %%f in (./*) do echo %%~tf ...and我可以将字符串或数字与gtr
和
lss进行比较,但我不能很好地将
时间
<em
浏览 4
提问于2012-03-01
得票数 1
回答已采纳
2
回答
将Sql
时间
戳
转换为Java
日期
?
java
、
mysql
、
date
、
jdbc
我
有
一个数据库,这将有标准
的
sql格式
的
UMT
时间
戳
。如何提取数据并使用它设置java date对象?据我所知,mysql对于java来说是yyyy-mm-dd hh:mm:ss
的
,
日期
/
时间
的
东西总是让我摸不着头脑。
如果
任何人知道
有
一个好
的
库,我愿意接受建议。
浏览 4
提问于2012-06-16
得票数 0
回答已采纳
2
回答
在星火
DataFrame
中格式化TimestampType
scala
、
apache-spark
、
apache-spark-sql
、
type-conversion
但我需要
的
格式是yyyy-MM-dd HH:mm:ss ie,不包括微秒精度。另外,我想将它保存为
时间
戳
字段,同时将其写入一个拼花文件
中
。因此,我字段
的
数据类型应该是格式yyyy-MM-dd HH:mm:ss
的
时间
戳
。它们能够将字段转换为
时间
戳
,但具有微秒
的
精度。 谁能帮助将
时间
戳
数据类型保存到具有所需格式规范
的
parquet文件
中</e
浏览 2
提问于2017-07-06
得票数 3
2
回答
如何扩展
spark
dataframe
中
的
数据子集
python
、
dataframe
、
apache-spark
、
pyspark
我
有
一个包含
多个
列
的
spark
dataframe
,重要
的
是一列带有
日期
时间
戳
,另一列带有值。
如果
值对应于
某个
特定
时间
之前
的
日期
时间
,我希望将value列
中
的
所有值按一个常量进行缩放。20 | 0.01 | 100 | 1 | 2020-10-14 | 2 | 200
浏览 23
提问于2021-04-21
得票数 0
回答已采纳
1
回答
火花将
时间
戳
从CSV转换为Parquet“本地
时间
”语义
apache-spark
、
parquet
考虑一下将CSV读入
DataFrame
并将其写成Parquet
的
最小火花作业:df.write.parquet("parquet_folder/") 对于输入文件
中
的
任何
时间
戳
列,Parquet输出将包含一个具有即时语义
的
浏览 0
提问于2020-09-01
得票数 1
1
回答
如何为CURRENT_TIMESTAMP配置代码工作簿
的
时区?
palantir-foundry
、
foundry-code-workbooks
如何配置代码工作簿
的
时区,以便在SQL
中
调用CURRENT_TIMESTAMP返回我
的
本地
时间
,而不是默认
的
UTC?
有
什么原因会被建议这样做吗?
浏览 13
提问于2020-09-25
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
肝了3天,整理了90个Pandas案例
大数据分析Python的datetime日期时间教程
Apache Spark 2.4 内置的 Avro 数据源实战
使用osquery进行远程取证
Fiori日期时间处理系列-ABAP如何处理日期和时间
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券