我试图通过传入一个ssh_conn_id来使用Airflow SFTPHook，但我收到了一个错误： No hostkey for host myhostname found.但是，将SFTPOperator与相同的ssh_conn_id一起使用可以很好地工作。如何解决此错误？
浏览 17提问于2019-01-23得票数 3
1回答
我正在运行Airflow 1.10，并尝试使用SFTP操作符和传感器访问SFTP。这依赖于SSHHook，因此我创建了一个带有主机、登录名、密码、端口和额外的{"no_host_key_check"："true"}的SSH连接。但是，我仍然收到错误"paramiko.ssh_exception.SSHException:找不到主机<>的主机键“。
是否有人在不指定主
浏览 0提问于2018-11-07得票数 1
我最近刚刚安装了带有码头容器的气流2.1.4，我已经成功地设置了postgres、redis、调度器、2倍本地工作人员，以及在同一台机器上的花。*** Log file does[Errno 113] No route to host
然后，我尝试用它的主机映射工人的<
浏览 5提问于2021-10-29得票数 1
回答已采纳
我有5名气流工人在5台不同的机器上运行。气流调度器也在其中一台机器上运行。我在这5台机器上复制了相同的airflow.cfg文件。我在不同的队列中设置了每天的工作流，比如DEV、QA等(每个工作人员使用一个单独的队列名运行)，这些队列运行良好。当我检查task_instance表时，我看到针对任务填充了正确的主机名。base_log_folder = /v
浏览 0提问于2019-04-09得票数 12
获取误差
print(sftp.pwd())但是，在运行脚本时，我会看到一个错误，说它找不到主机键(注意，即使使用原始的known_hosts文件路径，也会引发相同
浏览 9提问于2020-10-20得票数 2
回答已采纳
2回答
我正在设置一个分布式气流集群，其中除了芹菜工作人员以外的其他一切都在一个主机上运行，处理工作在多个主机上进行。气流2.0设置使用在气流文档中提供的yaml文件进行配置。在我的初始测试中，当我在同一台主机上运行所有东西时，我让体系结构工作得很好。问题是，如何在远程主机上启动芹菜工人？到目前为止，我试图创建一个修整版本的上述对接-写作，在这里，我只开始芹菜工人在工人主机，而不是其他。但我在数据库连接方面遇到了一些问题。在经过修剪的
浏览 19提问于2021-06-30得票数 7
回答已采纳
遵循下面文章中关于在Airflow中通过SMTP服务器发送电子邮件的类似说明：https://towardsdatascience.com/automating-emails-in-apache-airflow-a-how-to-guide-1d2330a29d1e 我没有使用默认的airflow.cfg来配置smtp主机，因为在我们的生产环境中，我们无法控制它。但在prod中，Airflow似乎无法连接到SMTP
浏览 72提问于2021-11-02得票数 0
我的想法是运行一个airflow作业来更新本地主机上的包；在主机上，airflow在docker container中运行。
浏览 22提问于2021-08-17得票数 0
1回答
我正在尝试通过airflow连接Postgres，但我收到一个错误:这是我的Postgres dag： """default_args = {'email_on_failure上的连接：enter image description here 和我当地的Postgress运行： 5f4a77a892da postgres "do
浏览 70提问于2021-10-13得票数 0
1回答
在多个端口上创建停靠器的副本
、、、、
我想做的是用芹菜在码头运行气流，我的问题是，我的芹菜工人在容器里，我不知道如何把它们放大。我的船坞-共济会档案：services: image: mysql:latest ports:/airflow.env
因此，我使用上面的文件运行docker -复合命令，它在localhost上的端口8793上启动一个worker实例，因为我正在从docker端口
浏览 3提问于2017-05-10得票数 0
回答已采纳
有没有一种方法可以对服务器进行ssh，并运行带气流的PythonOperator？我看起来有点像SSHExecuteOperator，但不是执行bash命令，而是执行一个python。
浏览 2提问于2016-12-01得票数 2
我有一个名为hello_world.py的文件保存在我的dag文件夹中，其中包含以下代码。from airflow import DAGfrom datetime import datetimetask_id='hello_world', 当我通过气流执行时，这是从码头在窗口运行的
浏览 3提问于2022-10-20得票数 0
我有一个设置，气流在码头容器中运行，并将它的日志目录映射到主机目录。在运行时，它创建一个文件系统链接/usr/local/airflow/logs/scheduler/latest，该链接在容器中有一个有效的目标，但不在主机中。我想完全忽略airflow/logs目录。理想情况下，在主机中，不要从容器内部创建文件系统链接气流。
浏览 3提问于2018-01-31得票数 2
回答已采纳
我有一个Jenkins项目，它从给定的回购中提取并包含更改，然后使用一个Ansible剧本部署到主机/s中。我编制了一个新的VM，将它添加到hosts文件中，并使用ssh-copy-id添加Jenkins机器的公钥。我收到了一个乒乓球，从我的不可接受的平和成功的SSH进入机器。", "unreachable": true}
Jenkins项目实际上与我的其他项目相同，VM与我的其他项目相同。其他
浏览 0提问于2021-03-09得票数 1
2回答
Machine1:气流-网络服务器，气流-调度器.Machine2:特定队列上的气流-工作人员.我正在使用CeleryExecutor。machine2上的任务成功运行(在本地驱动器上写入和删除文件)，但在machine1上的web中，我没有读取日志文件。*日志文件不存在: /home/airflow/logs/delete_images_by_ttl/delete_images/2018-10-29T12:24:23.299741+00:00/1.lo
浏览 0提问于2018-10-29得票数 1
回答已采纳
我在docker容器中运行airflow，并希望将我的airflow.cfg挂载为卷，这样我就可以快速编辑配置，而无需重新构建图像或直接在运行的容器中进行编辑。我能够将我的airflow.cfg挂载为一个卷，并且我的airflow the服务器在启动时成功地从它读取了配置。但是，当我在主机上进行编辑时，更改不会反映在docker容器中。停靠容器内的findmnt -M airflow.cfg
浏览 0提问于2019-03-26得票数 4
我想在Minikube上本地部署Airflow，并为DAG处理装载一个本地文件夹。Airflow的部署方式如下： --values values.yml \ Name: airflow-airflow-config
Optional:
浏览 4提问于2021-09-16得票数 0
1回答
我试图在Airflow上创建一个简单的DAG工作流，其中的数据被更新到我的本地主机PostgreSQL数据库。请有人告诉我为什么我的DAG失败，而我只有在使用CeleryExecutor时才会在日志中得到这些错误？我尝试使用LocalExecutor运行相同的DAG，但没有发现任何错误，而且运行很顺利。http://<worker hostname>:8793/log/PDI_Incr_20190407_v2/
浏览 1提问于2021-03-20得票数 1
回答已采纳
我正在运行一个ansible任务，但这更像是一个ssh问题；command: "rsync -zaP -e 'sshtemp_build_directory }}/artifacts.tar.gz {{ rsync_remote_user }}@{{ ansible_host }}:/tmp"
尽管我显式地禁用了主机键检查
浏览 0提问于2018-10-18得票数 0
回答已采纳
1回答
port=port, password=password, user=user)我正在使用Docker，Postgres的容器可以在insert_into', )Broken DAG: [/opt/airflow/dags/projeto_api.py] Traceback (mos
浏览 10提问于2022-07-13得票数 3
回答已采纳
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
腾讯云开发者
