SPARK_HOME/bin docker-image-tool.sh -r -t my-tag build 这返回找不到docker图像。此脚本必须从Apache Spark的可运行发行版运行。 但是所有的spark runnables都在这个目录中。spark-class spark-shell.cmd spark-sql2.cmd sp
浏览 50提问于2020-04-08得票数 0
我正在尝试根据官方网站上的说明在Kubernetes上启动spark。我按照说明使用他们提供的脚本创建了一个镜像，如下所示： --class org.apache.spark.examples.SparkPi \
--conf spark.executor.instance
浏览 38提问于2020-08-03得票数 0
我使用以下脚本部署了Apache Spark 3.2.0，该脚本从Python的分发文件夹中运行： ./bin/docker-image-tool.sh -r <repo> -t my-tag -p ./kubernetes/dockerfiles/spark/bindings/python/Dockerfile build 我可以使用Spark-Submit在K8s下创建一个容器。我的目标是运行
浏览 37提问于2021-11-15得票数 1
有没有办法让我们可以检测自上次构建以来BaseImage是否被修改过，这样我们就可以避免再次构建镜像？
浏览 19提问于2018-05-31得票数 1
我正在尝试在Openshift Origin Pod上部署一个镜像，该镜像在我的Docker存储库中可用：REPOSITORYTAG IMAGE ID CREATED SIZE--> Found Docker image 535da17 (9 weeks old) from for "tomcat9d
浏览 2提问于2017-04-05得票数 5
我已经为spark-submits构建了很长一段时间的罐子，它们的效果非常好。如果结合使用sbt-native-packager和sbt-assembly来构建docker镜像，其中包含启动spark驱动程
浏览 11提问于2019-07-08得票数 4
回答已采纳
我设法将我的镜像推送到google cloud registery，但当我尝试滚动升级我的集群时，什么也没有发生。我的circle.yml： build:
docker:curl -L -o /tmp/docker-$VER.tgz https://get.docker.com/b
浏览 4提问于2017-10-25得票数 1
是否可以从Dockerfile构建docker镜像，然后在创建的镜像中运行步骤？插件需要在pod模板中指定一个图像，所以我的第一次尝试是使用docker- in -docker，但步骤docker.image('jenkins/jnlp-slave').inside() {..}失败了image: docker:1.11 tty: tr
浏览 23提问于2019-02-19得票数 4
我有基于spring的spark 2.3.0应用程序。我正在尝试在kubernetes(minikube)上做spark submit。
浏览 0提问于2018-04-11得票数 2
我已经从：https://archive.apache.org/dist/spark/spark-$2.4.4/spark-$2.4.4-bin-hadoop2.7.tgz构建了一个镜像 下载后，我会这样做： cd spark-2.4.4-bin-hadoop2.7 && bin/docker-image-tool.sh build 然后构建我的镜像
浏览 135提问于2020-11-26得票数 1
回答已采纳
3回答
我正在通过docker compose创建一个图像，但是由于某种原因，它的名字变得加倍了？一切运行正常，没有问题，但图像名称看起来像‘poc_tool_poc_tool’，我如何更改名称或添加版本控制？docker ps：
c70753c4553e poc_tool_poc_tool "streamlit run --ser…" 17 minutes ago Up 11 minutes0.0.0.0:8889->8889/tcp p
浏览 0提问于2021-04-13得票数 1
我正在构建一个Mesos集群来运行Apache Spark。我更喜欢为我的Spark executors使用Docker容器，我可以使用spark-submit的客户端模式(使用--master mesos://mesosmaster:5050和--conf spark.mesos.executor.docker.image镜像供执行器使用时，似乎调度程序忽略了该参数，并尝试直接在Mesos沙箱中运行作业。实际上可以将集群调度程序与
浏览 7提问于2017-08-26得票数 1
") .set("spark.kubernetes.namespace", "spark-ml") \ .set("spark.executor.instances", "2") \
浏览 13提问于2021-03-04得票数 0
回答已采纳
我正在尝试从Docker image.Taking中提取Dockerfile查看popular answer，我执行了以下命令： docker run -v /var/run/docker.sock:/var/run/docker.sock --rm alpine/dfimage -sV=1.36 quay.io/opendatahub/spark-cluster-image:<e
浏览 16提问于2020-11-29得票数 1
回答已采纳
1回答
# Comment the image line, place your Dockerfile in the directory where you placed the docker-compose.yamlimage: ${AIRFLOW_IMAGE_NAME:-apache/airflow:2.2.3} image: docker.io/bitnami/spark:3
environment
浏览 11提问于2022-01-31得票数 0
我正在尝试在我自己的Dockerfile配置中使用Docker metasploit image，如下所示： FROM metasploitframework/metasploit-frameworkWORKDIR /usr/src/my-awesome-tool
ENTRYPOINT ["my-aw
浏览 17提问于2019-05-25得票数 0
我创建了一个注册表镜像。我可以在没有互联网的情况下提取图像吗？我使用以下命令创建了一个镜像：当我画一个像“你好世界”的形象时：我可以
浏览 3提问于2015-07-22得票数 0
2回答
访问容器中的数据库
、、、
虽然我是一个有一些理解困难的docker新手，但我为python-app单独构建了一个简单的图像和容器。问题是，我和我的团队可能想把DB放在docker里面。是否可以将数据库中的表/数据插入到docker-container中？
所有的数据库都有在线的docker-image，但我没有通过我们使用的数据和表的DB。编辑:好的，经过多次尝试后，我使用了命令"docker-machine ip“，这个IP对我有效，所以我的本地应用程序设法连接到Dockerised DB，
浏览 28提问于2019-07-18得票数 0
回答已采纳
$.org$apache$spark$util$Utils$$copyRecursive(Utils.scala:632)--name spark-pi \--conf spark.kubernetes.container.image=172.30.1.1:5000/myapp/
浏览 0提问于2018-05-22得票数 3
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
