我正在使用Snowflake和一些JSON文件,我需要将它们上传到临时区域。因为Snowflake不允许大小超过1 1GB的文件,所以我不得不使用7zip将它们分割成更小的文件。I ended up with 4 files like the ones below 你可以在所附图片中看到的带有图案的Files were uploaded to the Staging area。我正在尝试使用以下命令将临时区域中的那些文件复制到另一个表
当我以
hadoop distcp /a/b/c/d gs:/gcp-bucket/a/b/c/ , where d is a folder on HDFS containing subfolders如果文件夹c已经在gcp上,那么它将d(及其子文件夹)从HDFS复制到c内的gcp中,但是如果c文件夹不在gcp上,那么它将在<