我的团队已经在AWS Glue中开发了多个爬虫程序来扫描数据和编目模式。我希望检查这些爬虫到我们的源码控制,但我无法找到这样做的方法。我是否可以将爬行器导出为JSON或XML,以便能够检入该文件?
发布于 2020-04-30 05:32:26
您可以通过运行aws cli命令来获取JSON。例如,要获取所有爬虫程序,您可以运行:
aws glue get-crawlers
要获取特定的爬虫程序,可以运行以下命令:
aws glue get-crawler --name
https://stackoverflow.com/questions/61482093
复制相似问题