有没有内置的雅典娜函数可以在查询结果中显示给定行的底层S3文件创建/修改日期?我们有一个具有许多不同文件格式的大型数据湖,很难将这些信息添加到所有这些数据湖中。
发布于 2021-07-07 11:00:35
Amazon Athena支持Presto $path
伪列,它显示从中获取行的文件的名称,例如:
SELECT DISTINCT "$path" FROM table
有向Presto添加更多伪列的请求,例如上次修改的和文件大小,但(在撰写本答案时)它们在Presto中不可用。一旦他们在Presto,他们可能会在一段时间后找到去雅典娜的路。
请参见:
https://stackoverflow.com/questions/68277079
复制相似问题