我在BQ中有一个表设置,如果我在某个日期分区上写入数据exists,我希望它被覆盖。我已经将job_config设置为使用WRITE_TRUNCATE。# Set partitioning bigquery.table.TimePartitioningType.DAY,它也总是覆盖表中的所有数据。例如,如果我有来自20190101-20190201的
配置单元分区表具有以分区日期作为文件夹的文件夹结构。我已经探索了将外部分区表直接加载到bigquery的可能性。我想知道的是,在将数据加载到dataflow之前,我将使用dataflow运行一些功能转换,因此是否可以使用bigquery实现此功能。我发现,如果我将分区日期添加为列,则使用partitioning is possible,但我正在寻找一种直接方法,该方法不会在转换期间添加列,而是在将数据加载到b