我有一个CF模板来创建一个胶合表，它从S3 CSV文件中读取。- Name: last_name我想将TBLPROPERTIES {has_encrypted_data : false}添加到这个表中文档中没有关于加密属性的提示-
浏览 5提问于2018-01-26得票数 0
我的数据每天都存储在一个新的文件夹中。例如: /2021/04/01 /2021/04/02等等。} "globalUploadSettings": { }有没有办法让QuickSight加载至少一个月的数据(指向这里的s3:/2021/04/)，这样我就可以对那个月进行自动刷新了？
浏览 3提问于2021-04-03得票数 0
我正在尝试AWS胶水爬虫在雅典娜创建表格。我将其从Postgresql服务器中拉出。爬虫能够解析表，创建元数据，并显示粘合数据目录中的表和列，但表没有添加到雅典娜，尽管我已经从雅典娜添加了目标数据库。不确定为什么会发生这种情况，如果我从s3中选择csv源，那么它就能够在雅典娜中创建一个以_csv为后缀的表，有什么帮助吗？
浏览 2提问于2018-12-12得票数 2
1回答
这是一个很好的博客文章，解释了如何为雅典娜配置两个工作组。一个用于临时用户，另一个用于自动报告。
是否有一个云表单模板来自动化所有提到的步骤？
浏览 1提问于2019-07-21得票数 3
回答已采纳
我已经使用terraform创建了glue爬行器以在dynamodb上爬行，并创建了一个ETL作业来创建glue上下文。我可以查询雅典娜表。问题是当我试图创建一个新的作业，使用数据帧返回null或空值查询粘合表时。
浏览 27提问于2021-05-19得票数 0
1回答
我想通过Terraform创建一个雅典娜数据库，包括表和视图。我想(尽可能)用Terraform创建所有东西，这样我就不必担心生命周期等问题了。 据我所知，雅典娜数据库可以是Glue数据库，这取决于您选择的源。如果我选择AWSDataCatalog (胶水)作为雅典娜中的数据源，那么我用Terraform创建雅典娜数据库还是胶水数据库都没有关系，对吗？ 在Glue中，我还可以创建表
浏览 18提问于2020-10-06得票数 0
2回答
AWS glue爬虫有相关的成本，如何避免我们的爬虫在aws glue中。
有没有什么方法可以避免使用爬虫和从任何其他选项中推断模式，以便降低成本。
浏览 23提问于2020-02-17得票数 0
我有一个配置为每小时向S3存储桶提供数据的Cost and Usage report。我使用AWS Athena来查询。 配置附加在下面。但是，这些数据并没有出现在我的Athena查询中。我在表中也看不到任何与Cost Allocation Tags相关的列。
浏览 23提问于2021-11-03得票数 0
我的目标是通过cloudformation创建一个粘合作业。im处理的问题是Command属性似乎不支持内联代码(就像cloudformation lamba Code属性那样)。
浏览 2提问于2018-11-03得票数 0
我已经使用分区投影在雅典娜设置了一个表。我还没有在glue元数据目录中定义任何分区，我可以使用SQL在Athena OK中查看数据。当我使用此表设置Glue作业时，Glue似乎无法访问数据： data = glueContext.create_dynamic_frame.from_catalog(
print (data.count()) # returns 0 :( 有没有办法在不定义粘合元数据分区
浏览 30提问于2021-07-16得票数 1
回答已采纳
是否可以从AWS Glue表中获取分区的总数？我试图找到一种使用雅典娜控制台的方法，但似乎不可能。我的另一个选择是尝试使用JDBC或python连接到粘合表，看看是否可以检索计数，但这听起来太复杂了。
浏览 20提问于2021-05-12得票数 0
今天，我看到了一个简单的问题，将雅典娜胶水表的列从重命名为新名称。
首先，我在这里搜索并尝试了一些解决方案，如、和许多其他解决方案。不幸的是，没有工作，所以我决定使用我的知识和想象力。我发布这个问题的目的是为了分享，但也是为了了解别人是怎么做的，也许还会发现我重新发明了轮子。所以，如果你知道怎么做，也请分享你的方式。我的设置是，一个包含大量宝贵数据的雅典娜JSON表，通过C
浏览 6提问于2020-11-10得票数 3
回答已采纳
2回答
使用Boto3创建粘合表
、、、、
我们使用boto3方法创建一个粘合表。表被创建，我们可以从Hive或使用雅典娜boto3进行msck修复。 问题是数据没有填充到雅典娜，在雅典娜中只填充了分区的列。使用boto3创建表的代码 response = glue_client.create_table( Tab
浏览 47提问于2021-10-28得票数 0
2回答
我编写了一个脚本，它将在雅典娜上执行一个查询，并将结果文件加载到一个指定的aws S3位置。())
它确实有效，但问题是我有一个csv文件作为指定的位置唯一的办法，我设法获得我想要的是下载文件，将它与熊猫转换为拼板，以重新上传它。我不能在不获取文件的情况下直接转换，这是很烦人的。
有人有别的建议吗？我不想用CTAS。
浏览 3提问于2019-10-15得票数 3
回答已采纳
我使用Athena CTAS语句创建了一个表。根据Glue，我看到表存储在我的s3存储桶中。我进一步确认在我的s3存储桶中的预期位置有文件。 但是，这些文件不是地块文件(它们是无扩展名的)。当我尝试查询表并使用pd.read_csv读取csv输出时，也会发生类似的错误。在这里，错误是"'utf-8‘编解码器无法解码位置0中的字节0xee :无效的继续字节“。我尝试使用awswrangler，得到了
浏览 2提问于2020-08-22得票数 1
我想知道我们是否支持通过Athena读取KMS-CSE加密的增量格式化数据集？如果我在s3中使用KMS-CSE加密了清单本身，我能在雅典娜成功地读取它吗？使用下面的命令，我可以在雅典娜中创建表。/' 'has_encrypted_data'='true')查询有以下错误：
HIV
浏览 4提问于2020-01-21得票数 3
在本文中- 类似地，本文- 为什么不使用雅典娜直接查询DynamoDb呢？
浏览 2提问于2020-11-11得票数 1
因为当我应用下面的代码时，我找不到雅典娜数据库的加密状态。encryption_configuration { kms_key = aws_kms_key.mykey.arn}
我有一个没有启用加密的雅典娜数据库，所以如果我启用它，我是否丢失了这个数据库中的任何数据？
浏览 4提问于2022-06-01得票数 0
回答已采纳
2回答
爬虫是否遍历S3存储桶，并创建指向这些存储桶的指针？
当文档说“爬行器的输出由数据目录中定义的一个或多个元数据表组成”时，这些元数据表的目的是什么？
浏览 1提问于2018-12-04得票数 3
回答已采纳
我正在试图找出是否可以使用DynamoDB创建一个CloudFormation表，但在Rest中使用加密。我找到了以下开发指南，但它只告诉您如何使用控制台和AWS：创建表
从SDK的角度来看，您似乎需要在SSEEnabled上SSESpecification上设置一个属性到true，但是这能在cloudformation
浏览 1提问于2018-05-22得票数 5
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
