我创建了一个托管数据集,存储在我要将培训代码导出到的桶中。在开始培训工作时,我遇到的错误是:
No such file or directory: 'gs://(bucket name)/dataset-5820440723492700160-image_classification_multi_label
我目前正在尝试在Airflow中使用FTPHook,以便将文件上传到远程ftp或从远程ftp下载文件。但是我不确定是否可以使用gs://路径作为源/目标路径的一部分。我目前不想在AF pod中使用本地文件夹,因为文件大小可能会很大,所以我宁愿直接使用gcs路径或gcs文件流。FTPHook(ftp_conn_id='ftp_default')
con