我想知道如何通过Google Cloud Composer来节省成本。当你的dags都没有运行时,有没有办法让服务器降速呢?然后在dag需要运行时重新启动它?
它的成本太高了,因为我相信,即使我的dags没有运行,服务器仍然是正常运行的,我们正在收费。
谢谢,
发布于 2020-04-09 16:30:22
目前,无法启用/禁用Composer环境。为了在不使用的服务器上节省资金,需要一种类似于自动缩放的功能,request已经针对该功能进行了备案。在Medium网站上,你可以找到很多关于节省成本的有用信息。
在Cloud Composer中控制成本的一种方法是使用自动缩放。在GKE集群中,可以将节点数量设置为自动缩放,请遵循this guide。较小的Cloud Composer环境大小和较短的运行时间将是最佳实践。
Cloud Composer对分配给环境的计算资源收费,即使在没有部署DAG的情况下,组件也会继续运行。你可以减少/关闭的东西不多,你可以考虑其他的平台服务,比如Dataflow,它是无服务器的。
我希望上面的信息对你有用。
https://stackoverflow.com/questions/61109720
复制相似问题