在GCP上运行pyspark作业(使用dataproc 1.4),我正在尝试从GCP存储中读取数据。site-packages/google/cloud/storage/blob.py", line 54, in <module>ModuleNotFoundError: No module named 'google.cloud.iam' 我认为所有云依赖项都会
我在JupyterLab中试图从另一个PySpark笔记本中运行一个PySpark笔记本,但是我一直收到错误。ModuleNotFoundError: No module named 'pyspark'
这里的目标是有一个文件来设置配置,例如模式定义和函数,这些配置可以从使用这些定义执行不同任务的各种其他记事本中调用在本例中,dataload记事本必须运行configuratio