腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
3
回答
Azure数据库中的
Python
版本
python
、
databricks
、
azure-databricks
我试图找出我在Databricks中使用的
python
版本。想知道我试过print(sys.version)然而,当我去
集群
-> SparkUI ->环境%sh
python
--version每个工作人员/驱动程序节点会有不同的
python
版本吗?
浏览 2
提问于2020-06-10
得票数 5
回答已采纳
1
回答
hadoop /usr/bin/env:
python
:没有这样的文件或目录
python
、
hadoop-streaming
mapper 'mapper.py Reverse' -reducer reducer.py -file mapper.py -file reducer.py/usr/bin/env:
python
2.5UserGroupInformation.java:1136)但是,已经安装了较高版本的
python
$ which
python
/usr
浏览 13
提问于2013-03-12
得票数 0
1
回答
更改databricks上的路径环境变量
python
、
python-3.x
、
environment-variables
、
databricks
我需要更新我的
python
路径,以便可以在数据库上使用
python
3。在databricks notebook上: echo $PATH 然后,我运行: export PATH=/databricks/
python
3/bin
浏览 0
提问于2019-12-20
得票数 0
1
回答
无法通过远程在纱线Hadoop
集群
上启动
python
脚本
python
、
hadoop
、
hadoop-yarn
从几个星期以来,我试图通过远程访问或连接到纱线
集群
的pyspark来提交
python
脚本。 我对HADOOP世界很陌生。我想要的是在外部HADOOP
集群
上的本地shell中提交火花脚本。我的情况:外部hadoop纱线
集群
。可以进入重要的港口。我有Windows 7 64位/
Python
2.7.9 64位/Spark1.4.1。HADOOP
集群
运行时没有任何问题。我的问题是:通过HADOOP
集群
上的远程访问提交
python
脚本不起作用
浏览 2
提问于2015-08-21
得票数 2
2
回答
在纱线
集群
模式下运行
python
火花作业
python
、
apache-spark
、
hadoop-yarn
但是,当我使用纱线-
集群
模式时,作业无法启动,容器返回如下语法错误:上传时间:清华5月21日08:48:16 +0800 2015日志内容:
浏览 2
提问于2015-05-21
得票数 2
回答已采纳
1
回答
将
Python
脚本提交到星团中
apache-spark
、
pyspark
、
spark-submit
我试图将下面的
python
脚本提交到星团中。
浏览 0
提问于2018-03-03
得票数 1
1
回答
Azure DataBrick PYTHONPATH指着进口车轮?
azure
、
azure-databricks
我成功地创建了我的
python
项目的
python
轮子,下面是从这里开始的简单步骤:%pip install -r /dbfs/mnt/testdb-blob-container1/requirements.txt 然后,我通过Azure DataBrick界面:上传了我的项目的
python
浏览 1
提问于2021-03-28
得票数 0
1
回答
使用
Python
导出和导入Vertica查询结果
python-2.7
、
vertica
我希望将某些数据从Vertica
集群
(比如测试
集群
)复制到另一个Vertica
集群
(比如QA
集群
)。我可以手动地将查询结果转储到CSV文件中,然后在另一个
集群
上导入它。但是,我如何在
Python
脚本上不使用os或系统命令就可以做到这一点。我只想使用一些
Python
模块或适配器来完成它。到目前为止,我正在使用适配器,我能够连接到Test
集群
并将数据导入
python
列表,但是我无法使用适配器(即不使用
python
模块)将
浏览 2
提问于2018-05-30
得票数 0
1
回答
火花kubernetes java.io.InvalidClassException: org.apache.spark.scheduler.cluster.CoarseGrainedClusterMessages$RetrieveSparkAppConfig$
apache-spark
、
kubernetes
、
pyspark
我试图针对Kubernetes
集群
中的节点运行一个pySpark作业,但是当我试图创建一个pyspark.sql.SparkSession时,日志会被错误淹没:/bin/docker-image-tool.sh -p kubernetes/dockerfiles/spark/bindings/
python
浏览 1
提问于2020-06-17
得票数 1
1
回答
如何在从GCP dataproc
集群
中旋转的datalab实例中强制
python
版本同步?
google-cloud-platform
、
pyspark
、
google-cloud-dataproc
我已经使用图1.2在GCP中创建了一个Dataproc
集群
。我想在Datalab笔记本上运行Spark。如果我让Datalab notebook运行
Python
2.7作为它的内核,这很好用,但是如果我想使用
Python
3,我会遇到一个小的版本不匹配。脚本演示了不匹配: ### Configurationsys.path.insert(0, '/opt/panera/lib') os.environ['PYSPARK_
PYTHON
浏览 15
提问于2019-04-02
得票数 1
回答已采纳
1
回答
使用
python
连接到Couchbase时出错
python
、
couchbase
我成功地连接到浏览器上的couchbase服务器,如:X.X:8091,但当我想使用
python
连接到该服务器时,我会得到以下错误:这是我的
python
脚本 from couchbase.cluster import Cluster
浏览 4
提问于2022-02-20
得票数 1
1
回答
用Hive/
Python
减少Azure HDInsights问题
python
、
azure
、
hive
、
azure-hdinsight
使用Azure HDInsights和Hive/
Python
运行一个非常简单的测试示例。Hive似乎没有加载
Python
脚本。Hive包含一个名为“道布”字段的小测试表,我正试图使用
Python
脚本通过map-还原进行转换。 ADD FILE asv:///mapper_test.py;TRANSFORM (dob) USING '
python
浏览 5
提问于2013-08-20
得票数 0
1
回答
什么是solr
集群
组件
solr
、
cluster-analysis
我刚刚浏览了solr wiki页面以进行
集群
。但是我不知道使用
集群
的好处是什么。谁能告诉我什么是clusering,它在索引和搜索中的用途。 请回复
浏览 2
提问于2011-06-29
得票数 5
回答已采纳
1
回答
无法导入
python
2.7.10中的
集群
python
、
python-2.7
、
cluster-computing
我是
集群
的新手,刚刚安装了
集群
软件包(命令行: pip install cluster),并且想导入
集群
。/Versions/2.7/lib/
python
2.7/site-packages/cluster/__init__.py", line 25, in <module> __version__/setuptools-1.1.6-py2.7.egg/pkg_resources.py", lin
浏览 0
提问于2015-11-20
得票数 1
1
回答
创建一个完全隔离的
python
venv
python
、
apache-spark
、
pyspark
、
hadoop-yarn
、
python-venv
我在yarn
集群
上部署了pyspark应用程序,在所有节点都可以访问的挂载上部署了
python
venv。我遇到的问题是,节点上的
python
安装是不一致的,有些节点安装了必需的模块(这是
python
构建的一部分),而其他节点则不安装,这会导致频繁的崩溃。我注意到,在使用
python
-m venv创建一个venv时,它并不复制
python
安装,而是向它创建一个symlink。事实证明,与负责
集群
的团队就这一问题进行沟通非常繁琐,因此我想在挂载上创建一个完全隔离的<em
浏览 23
提问于2022-10-10
得票数 0
1
回答
hadoop流与anaconda(
python
)不工作
python-2.7
、
anaconda
、
hadoop-streaming
我正在使用hadoop流运行
python
脚本。我已经安装了
python
2.7和anaconda。它不起作用。除了下面的例外,job先生失败了。
浏览 1
提问于2015-05-11
得票数 0
2
回答
如何外部访问射线远程多节点
集群
?
python
、
amazon-web-services
、
kubernetes
、
remote-access
、
ray
关于射线多节点
集群
的访问,我有一个问题:编辑:这可以归结为以下问题: 是否有射线本机API从实际
集群
之外的计算机/服务器连接到远程群集?
浏览 2
提问于2019-12-30
得票数 2
1
回答
我想使用
python
boto3脚本将数据加载到
集群
中
python
、
amazon-web-services
、
amazon-redshift
、
boto3
我希望使用boto3脚本将数据加载到
集群
中。我希望使用boto3
python
创建一个脚本来执行以下操作: 我在boto3中看到,没有任何方法可以将数据加载到
集群
中。如何使用boto3或任何其他
python
包将数据加载到
集群
中?
浏览 0
提问于2019-07-14
得票数 1
回答已采纳
1
回答
如何在Azure HDInsight上升级
Python
版本
python
、
python-3.x
、
azure
、
azure-hdinsight
我们需要使用只运行在
Python
3.6或更高版本上的外部库。不幸的是,默认情况下,HDInsight只安装了
Python
3.5。有办法在HDInsight上升级
Python
的次要版本吗?
浏览 2
提问于2020-10-26
得票数 0
回答已采纳
1
回答
运行PySpark时AWS EMR的代码失败
amazon-web-services
、
pyspark
、
amazon-emr
我对notebook@ip-x-x-x-x$ more .sparkmagic/config做了如下更改 "kernel_
python
_credentials" : {aws emr create-cluster \ --release-label emr/emr-configuration.json 这告诉我,下面的
集群</em
浏览 8
提问于2020-06-06
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Python操作redis集群
redis集群配置及python操作
如何在CDH集群上部署Python3运行环境及运行Python作业
大数据集群服务安装-mysql,hive,azkaban,sqoop,spark,python
python连接数据库集群进行自动化运维
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券