腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
使用
athena
alter
table
语句
创建
分区
hive
、
amazon-athena
这个"create
table
“
语句
工作正常。CREATE EXTERNAL
TABLE
default.no_details_2018_csv ( `client_id` string, `code_2` string,)LOCATION 's3://some_bucket/
athena
-parquet
浏览 25
提问于2019-10-07
得票数 0
回答已采纳
1
回答
如何在不运行爬虫的情况下更新aws胶水表中现有的
分区
数据?
amazon-s3
、
aws-glue
、
amazon-athena
、
aws-glue-data-catalog
当我们
使用
手动上传到s3桶更新现有
分区
中的数据时,这些数据将显示在雅典娜胶水表中的现有
分区
中。但是当
使用
API更新数据时,上传到s3桶中的数据在现有
分区
中,而在胶水表中的数据存储在当前日期的不同
分区
中,但是在我的different(s3://aiq-grey-s3-sink-created-at-partition/topics/core.Test.s3/2022/07/19/)桶
分区</
浏览 9
提问于2022-08-03
得票数 0
1
回答
多个位置的雅典娜桌
hive
、
amazon-athena
一般结构如下所示:其中,{year}是
浏览 6
提问于2017-01-24
得票数 1
回答已采纳
1
回答
您能在一个"
ALTER
“命令中添加多个
分区
吗?
presto
、
amazon-athena
我
使用
Athena
对存储在S3桶中的一些日志文件进行查询,并
使用
分区
来分割每年需要查询的文件的停工天数。我想知道--由于我有大量的时间要添加到我的表中,我可以在一个
ALTER
TABLE
命令中完成所有这些工作吗?还是需要有与我想要
创建
的
分区
数一样多的
ALTER
TABLE
命令呢?这是我目前
使用
的命令的一个例子: logfiles ADD
浏览 2
提问于2017-10-19
得票数 7
回答已采纳
2
回答
在雅典娜中按日期进行
分区
partitioning
、
amazon-athena
、
partition-problem
我
使用
AWS雅典娜查询S3桶,它只在一天内对数据进行
分区
,
分区
看起来像S3当我试图让Glue每天运行更新
分区
时,它每天都会
创建
新的表(同步2017年,大约1500个表)。我尝试
使用
这样的
分区
投影: day string) 'has_encrypted_data'='false', 'projection.day.formatproject
浏览 3
提问于2021-02-08
得票数 2
2
回答
AWS
Athena
/S3中的分层
分区
是否有效?
amazon-web-services
、
amazon-s3
、
amazon-athena
我是亚马逊网络服务的新手,正在尝试
使用
S3和雅典娜作为一个用例。 我希望将数据保存为S3中的json文件,以便从雅典娜查询。为了减少数据扫描,我
创建
了如下目录结构 .../101/2020-04-29/*.json 在
Athena
中,根据我们期望的数据
创建
了表结构,并
创建
了2个
分区
,即customer (customerid)和dt (date)。我想查询客户'100‘的所有数据,并将扫描范围限制在我试图加载
分区
的目录,如下所示
浏览 24
提问于2020-04-30
得票数 2
2
回答
如何
使用
/不
使用
Glue Crawler自动化
ALTER
TABLE
添加
分区
amazon-web-services
、
aws-glue
、
amazon-athena
、
aws-glue-data-catalog
我注意到,添加
分区
更有效,因为我在s3中处理JSON数据。我设置的爬虫需要太长时间才能完成。当我只要求它“仅抓取新文件夹”时,它并没有真正添加新的
分区
。我还取消勾选了“
使用
表中的元数据更新所有新
分区
和现有
分区
”选项。 我本质上需要的是在添加新
分区
时自动添加
分区
(应该在几秒钟内发生)。
浏览 12
提问于2021-03-19
得票数 0
1
回答
是否可以从雅典娜查询中删除存储在S3存储桶中的整个表?
amazon-web-services
、
amazon-s3
、
amazon-athena
我想要一个表来存储一个对象一周的历史记录,然后用下周的历史记录替换它。在aws中实现这一目标的最佳方式是什么?
浏览 4
提问于2021-01-13
得票数 0
1
回答
每日AWS Lambda不
创建
雅典娜
分区
,但是命令成功运行
amazon-web-services
、
amazon-s3
、
aws-lambda
、
amazon-athena
我可以
使用
以下命令通过雅典娜控制台手动
创建
分区
:
浏览 0
提问于2019-08-01
得票数 0
回答已采纳
1
回答
如何在单元中获取表是由动态还是静态
分区
的
hadoop
、
hive
、
hiveql
、
beeline
、
hive-partitions
尝试查找表列表中的动态
分区
,尝试下面的命令,但是找不到找到方法的线索,show partitions <
table
_name> describe formatted <
table
_name
浏览 1
提问于2016-04-26
得票数 3
回答已采纳
2
回答
AWS Amazon
Athena
无法
使用
布尔型字段对数据进行
分区
amazon-web-services
、
hive
、
amazon-dynamodb
、
partitioning
、
amazon-athena
我试图用布尔值对Amazon
Athena
上的数据进行
分区
,但似乎行不通。or "name": "brocolis", "color": "green",}CREATE EXTERNAL
TABLE
fruits
浏览 0
提问于2020-02-06
得票数 1
2
回答
AWS更新雅典娜元:胶水爬虫与MSCK修复表
amazon-web-services
、
amazon-athena
、
aws-glue
当新
分区
被添加到雅典娜表时,我们可以
使用
Glue Crawler或MSCK修复表来更新meta信息。他们要花多少钱?哪一种更好?
浏览 0
提问于2019-05-23
得票数 6
回答已采纳
1
回答
自动化外部单元/雅典娜表
分区
管理
amazon-web-services
、
amazon-s3
、
bigdata
、
amazon-athena
、
aws-glue
有一个计划好的AWS胶水爬行器,它爬行S3前缀,并将新生成的S3路径作为新
分区
添加到关联的外部雅典娜表中。因此,我的外部表中的数据将自动刷新,并可用于查询。这个很好用。这里有一个新的要求,我想要与这个体系结构集成-用户可以标记一些S3 URL为无效的自我管理转移,我想要自动删除这些
分区
从我的外部表。看起来,即使我通过查询超级
分区
来删除
分区
,也会在下次胶水爬行器运行时再次出现。这里唯一的选项是从S3前缀中移动
浏览 0
提问于2018-07-26
得票数 2
2
回答
Amazon
Athena
ALTER
添加
分区
查询不工作
sql-workbench-j
、
amazon-athena
我试图
使用
SQLWorkBenchJ将
分区
添加到
Athena
中的表中。当在雅典娜查询编辑器中运行时,查询工作正常。当我
使用
SQLWorkbench运行它时,它不起作用PARTITION (folder= '10036', full = 'fullvalue') LOCATION 's3:/
浏览 0
提问于2017-02-06
得票数 0
2
回答
在ORACLE中重命名
分区
sql
、
oracle
、
indexing
、
database-partitioning
如果我们
使用
ALTER
table
RENAME PARTITION
语句
来重命名Oracle表中的现有
分区
,是否需要
使用
新更改的
分区
名重新
创建
本地
分区
索引?
浏览 2
提问于2009-12-30
得票数 4
回答已采纳
2
回答
外部表不返回其文件夹中的数据
hive
、
external
、
cloudera
我已经在Hive中的这个位置
创建
了一个外部表:() ROW FORMAT SERDE
浏览 4
提问于2014-09-10
得票数 4
回答已采纳
5
回答
从一个蜂窝表中删除所有
分区
?
hive
、
elastic-map-reduce
如何删除当前加载在Hive表中的所有
分区
?我可以用恢复
分区
语句
加载所有
分区
。但我似乎不能放弃所有
分区
。 我
使用
的是EMR支持的最新的Hive版本,0.8.1。
浏览 3
提问于2013-03-19
得票数 14
回答已采纳
3
回答
如何访问
分区
雅典娜表的子目录中的数据
aws-glue
、
aws-glue-data-catalog
2019/06/27/01/00001.json雅典娜能够在没有问题的情况下查询这个表并找到我的数据,但是当
使用
ALTER
TABLE
mytable ADD PARTITION (year=2019, month=06, day=27) LOCATION 's3://my-bucket/d
浏览 0
提问于2019-07-01
得票数 2
回答已采纳
1
回答
将数据插入新添加的列中
amazon-web-services
、
amazon-athena
、
athena
Athena
没有update
table
命令。不管怎么说,在不重新加载整个表的情况下,还可以这样做吗?我
创建
了一个测试表,然后添加了这样的列:我想用以下SQL
语句
更新该列: month(date_parse
浏览 18
提问于2022-08-22
得票数 0
回答已采纳
3
回答
使用
亚马逊网络服务胶水将红移文件转换为S3镶木地板文件
aws-glue
、
amazon-redshift-spectrum
但是我想在S3中
创建
这些表的备份,这样我就可以
使用
频谱来查询这些表。 为了将表从Redshift移动到S3,我
使用
了一个Glue ETL。我已经为AWS Redshift
创建
了一个爬虫。粘合作业将数据转换为地块,并将其存储在按日期
分区
的S3中。然后,另一个爬虫程序爬行S3文件以再次编目数据。 如何消除第二个爬虫并在作业本身中执行此操作?
浏览 28
提问于2019-04-23
得票数 2
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
怎样使用CREATE TABLE语句和SQL事务管理器来创建新表
【挑战年薪300K】Hive语句详解之DDL操作
Greenplum数据库使用总结-常见创建TABLE方式
SQL Server分区表(三):将普通表转换成分区表
mysql创建索引的三种方法
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券