我想从存储在aws redshift上的数据生成拼图文件格式,我已经为其创建了连接和爬虫来获取数据信息。已成功获取所有数据库目录,但在运行作业来获取表数据、生成parquet文件并将其存储到aws时,AWS给我以下错误:
ip "someIp address“的反向dns解析失败
然而,我可以成功地生成拼图文件与源数据存储和目标数据存储是亚马逊网络服务S3。仅当我使用我的redshift集群作为源数据存储和S3作为目标数据存储时,才会生成错误。
我知道该错误与它向我显示错误的Route53服务无关。我还检查了我的安全组。它还允许VPC中的所有入站流量。我也检查过S3 bucket和Redshift在同一个地域。子网也是正确的。
发布于 2018-03-16 14:05:33
您需要为红移子网中的所有in创建反向DNS记录。
发布于 2018-04-19 19:22:38
您应该启用DNS主机名和解析。
转到您的VPC >选择您的VPC >单击操作>单击编辑DNS解析>单击是>单击保存
与上面类似,为您的VPC启用DNS主机名
单击操作>单击编辑DNS主机名>单击是>单击保存
发布于 2018-07-09 17:58:30
尝试将DNS UDP的胶合连接的SG出口规则设置为all。协议UDP,端口53。
https://stackoverflow.com/questions/48226311
复制相似问题