我已经创建了一个简单的管道,它从SQL Server表中读取数据,然后写入到BigQuery表中。然后,我将其配置为使用Spark并部署和运行。不过,在dataproc UI和DataFusion UI中,主要的集群创建作业仍然是"provisioning“。大约17分钟后,它失败了。 我在一个企业实例和一个基本实例中都尝试过。我已确保该实例服务帐号具有"CloudDataFusion API service Agent“角色。我已经运行了预览
Comparison of Developer, Basic, and Enterprise editions 我已经配置了一个正在退出的Dataproc配置文件: Compute profile 但是,当我需要在“Compute config”选项中选择这个新的配置文件时,我看不到它,即使文档指出在6.3以上的版本中应该启用它 option disabled on my instance 我的数据融合实例