开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

社区首页 >问答首页 >气流依赖关系相互覆盖

问气流依赖关系相互覆盖
EN

Stack Overflow用户

提问于 2018-10-24 23:40:51

回答 1查看 107关注 0票数 1

我不熟悉airflow (v1.10)。我有两个dags，每个dags都需要相同的依赖项，但版本不同。如何确保我的依赖项不会相互覆盖(例如，dag1.py需要v1版本的helper.py，dag2.py需要v2版本的helper.py )？

EN

回答 1

Stack Overflow用户

发布于 2018-10-26 16:49:44

一般来说，我认为你的问题有两种可能的解决方案：

Airflow有一个，它允许任务在自动创建和销毁的虚拟环境中运行。您可以为构建虚拟环境的任务传递python_version和需求列表。
设置docker注册表并使用而不是PythonOperator。这将允许团队根据特定需求设置自己的Docker镜像。(由dlamblin建议)

票数 1

EN

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/52973024

复制

相似问题