一、项目介绍 二、搭建开发环境 三、功能扩展 四、项目运行效果 五、SSL 认证 六、项目部署 6.1 jar包部署 6.2 docker容器部署 一、项目介绍 升级版自助快递查询系统,采用SpringBoot...vnd.ms-excel;charset=utf-8"); //kuaidi.xls是弹出下载对话框的文件名,不能为中文,中文请自行编码 response.setHeader("Content-Disposition...httpConnector() { Connector connector = new Connector("org.apache.coyote.http11.Http11NioProtocol..."); connector.setScheme("http"); //Connector监听的http的端口号 connector.setPort(80).../start.sh #运行项目 tail 200 -f kuaidi.log #查看启动日志 6.2 docker容器部署 前提 Linux服务器 已安装Docker环境 Linux服务器已安装工具
Linux 驱动 >= 418.81.07 离线安装 满足安装前置条件后,可参照 Docker离线安装Nvidia-container-toolkit实现容器内GPU调用[6] 或如下内容执行离线安装...下载离线文件并安装 Components and Packages[7] 中说明了 NVIDIA Container Toolkit 的主要包: nvidia-container-toolkit nvidia-cotnainer-toolkit-base.../NVIDIA/libnvidia-container/tree/gh-pages/ 下载对应安装文件后(注意目标系统版本),按依赖关系倒序安装,如: rpm -i libnvidia-container1...-1.13.0-1.x86_64.rpm rpm -i nvidia-container-toolkit-1.13.0-1.x86_64.rpm 安装成功后可检查安装情况: $ nvidia-ctk...docker pull paddlecloud/paddlenlp:develop-gpu-cuda11.2-cudnn8-e72fb9 下载 CodeGen 的模型 Salesforce CodeGen
docke usermod -aG docker $USER 参考 https://yeasy.gitbooks.io/docker_practice/content/install/centos.html...5.6 查看帮助 docker COMMAND --help 如 docker run --help 注意 实际环境中应该慎用 docker commit,频繁使用commit会使镜像越来越臃肿,而应该使用...6 Dockerfile dockerfile是一个脚本,用来构建镜像,将构建镜像需要的修改、安装、构建、操作命令记录在一个文件中。...a87313f6956b 启动终止的容器:docker container start 进入容器 exec 或attach docker run -dit 如ubuntu docker container.../content/basic_concept/image.html centos安装virtualbox的办法:https://wiki.centos.org/zh/HowTos/Virtualization
Part1模型微调 1DeepSpeed 微调环境 DeepSpeed 依赖 PyTorch[6],完整的环境需求可见官方文档 Requirements[7],本文在 Docker 镜像中执行微调,使用...需在微调环境中安装微调脚本所需依赖 requirements.txt[11] 及 aiohttp 和 transformers。...这里需注意 run_clm.py 和 requirements.txt 要使用与安装的 Transformers 版本一致的源码 tag 中的文件,如上面链接均为 v4.21.1 版本的。...如使用 FauxPilot 提供的 Docker Compose 方式启动 FauxPilot Server 服务,可保持使用 /model 路径不变 以上面的命令为例,执行成功后会在 /path/to...提取上述文件(或使用 Salesforce 原始模型通过上述过程转换得到,不微调直接转换时这三个文件内容应该是正确的,可以在 FauxPilot Server 中正常使用),并覆盖自行转换出的文件,如:
完成之后,点击Deploy the container,启动容器 3.点击console,进入到容器的shell中,输入 apt-get update 进行升级,完成之后安装python环境和pip...apt-get update apt-get install python3 aptapt-get install python3-pip 安装python环境是因为mongo-connector...4.安装mongo-connector pip3 install 'mongo-connector[solr]' 5.将mongodb设置为指定副本启动,&表示在后台运行,(如果不加上前面那段,是连接不上的...docker的主机上运行,主要是容器中不好配置,无界面,如果不是使用的docker,可以在对应的路径内找到这俩个文件) sudo docker cp d0547a1ed6cfb260f4ca4f4e4c2c140fdb99421b75b5155e735b45a075a1c150...在mongodb容器中运行 mongo-connector mongo-connector --auto-commit-interval=0 -m localhost:27017 -t http://192.168.1.60
操作 1 Execute QueryHive接口,如命令行或Web UI发送查询驱动程序(任何数据库驱动程序,如JDBC,ODBC等)来执行。...中执行(有些查询没有MR任务,如:select * from table) Hadoop和Hive都是用UTF-8编码的 查询编译器(query complier),用云存储中的元数据来生成执行计划,步骤如下...hadoop的安装前面已经说过了,注意:Hive版本1.2以上需要Java 1.7或更高版本。...环境说明 操作系统 docker版本 ip地址 配置 centos 7.6 19.03.12 192.168.31.229 4核8g 我们采用远程模式安装hive,也就是将Mysql数据库独立出来,将元数据保存在远端独立的...Mysql服务器中。
本文档Fayson主要描述如何在Redhat7.4安装CDH6.2。...CDH6与CDH5的安装步骤一致,主要包括以下四部分: 1.安全前置准备,包括安装操作系统、关闭防火墙、同步服务器时钟等; 2.外部数据库如MySQL安装 3.安装Cloudera Manager; 4...2.Redhat7.4 3.JDK1.8.0_181 4.MariaDB-5.5.56 5.root用户安装 2 前置准备 2.1 hostname及hosts配置 集群中各个节点之间能互相通信使用静态...9.对于离线安装CDH6.x,分发Parcel出现hash校验失败的问题,是因为在CM6中修复了一个bug,让它不再忽略由http服务器发送的“Content-Encoding”的header信息,但是我们在...Redhat中安装的httpd服务,当它传输parcel文件时,默认会错误的设置“Content-Encoding”。
3 涉及软件环境搭建内容 如何在Centos7安装JDK1.8-u121详解 如何在Centos7安装Maven3.6.1详解 如何在Centos7安装Git详解 如何在CentOS7与Git配置免密码登陆详解...如何在Docker安装GitLab详解 如何在Docker创建NetWork网络详解 如何在Docker安装Registry私服详解 如何在Docker安装Jenkins详解 见附录 特别说明 ?...CONTAINER_ID=`docker ps -a | grep $IMG_NAME | awk '{ print $1 }'` # 获取镜像ID IMAGE_ID=`docker...= "" ]]; then docker rm -f $CONTAINER_ID fi # 判断是否存在删除开发镜像 if [[ "$IMAGE_ID" !...tar压缩文件,语法如: docker save 镜像名 -o 路径/镜像名.tar.gz 或 docker save 镜像名 -o 路径/镜像名.tar docker load 命令是用于导入使用
3 涉及软件环境搭建内容 如何在Centos7安装JDK1.8-u121详解 如何在Centos7安装Maven3.6.1详解 如何在Centos7安装Git详解 如何在CentOS7与Git配置免密码登陆详解...如何在Docker安装GitLab详解 如何在Docker创建NetWork网络详解 如何在Docker安装Registry私服详解 如何在Docker安装Jenkins详解 见附录 特别说明 1、...CONTAINER_ID=`docker ps -a | grep $IMG_NAME | awk '{ print $1 }'` # 获取镜像ID IMAGE_ID=`docker...= "" ]]; then docker rm -f $CONTAINER_ID fi # 判断是否存在删除开发镜像 if [[ "$IMAGE_ID" !...tar压缩文件,语法如: docker save 镜像名 -o 路径/镜像名.tar.gz 或 docker save 镜像名 -o 路径/镜像名.tar docker load 命令是用于导入使用
写在前面 在独立运行维护多个 Confluence 实例一年多之后,经历了多次的升级维护,确认了使用容器比宿主机直接安装是更为有效的维护方式。...基础准备 Docker Hub 上官方容器镜像:https://hub.docker.com/r/atlassian/confluence-server/tags - 本文将基于 7 系列新版本:...version: '3' services: confluence: image: atlassian/confluence-server:7.3.2-ubuntu container_name...然后在编排文件中,替换镜像名称,再次启动容器,插件市场就能正常访问了。...version: '3' services: confluence: image: confluence-server:7.3.2-ubuntu-fix container_name
写在前面在独立运行维护多个 Confluence 实例一年多之后,经历了多次的升级维护,确认了使用容器比宿主机直接安装是更为有效的维护方式。...基础准备Docker Hub 上官方容器镜像: https://hub.docker.com/r/atlassian/confluence-server/tags本文将基于 7 系列新版本: 7.3MySQL...version: '3'services: confluence: image: atlassian/confluence-server:7.3.2-ubuntu container_name...然后在编排文件中,替换镜像名称,再次启动容器,插件市场就能正常访问了。...version: '3'services: confluence: image: confluence-server:7.3.2-ubuntu-fix container_name: confluence-app
此时在离线环境下可能会遇到 https://github.com/PaddlePaddle/PaddleNLP/pull/5817 中描述的问题,可参照该 PR files[1] 中内容修改,以支持离线环境的正常使用...PaddleNLP 依赖 PaddlePaddle[2],PaddlePaddle 分为 paddlepaddle 和 paddlepaddle-gpu 两个版本,想使用 GPU 进行计算,需要安装 paddlepaddle-gpu...推荐使用 Docker 环境上手体验,安装 NVIDIA Container Toolkit[7] 之后,根据 CUDA 和 cuDNN 选择对应的镜像版本,如: docker run --name dev...解决思路 解决的思路很简单,在下载社区模型相关文件时,首先检查缓存路径中是否已经存在对应文件,如存在则直接使用,不存在再通过网络请求进行获取。...修改文件 可在错误堆栈中获取报错环境中需要修改的具体文件路径,如: /Library/Frameworks/Python.framework/Versions/3.9/lib/python3.9/site-packages
, 也知道了如何在多个container间通过网络通讯....在这章里我们将介绍如何在docker的container内管理数据以及如何在不同的container间共享数据。...我们将介绍两种主要的在docker中管理数据的方法: Data volumes Data volume container Data volumes 一个 data volume 就是一个在一个或者多个...安装一个目录作为数据卷 使用 -v 不仅能创建一个新的 volume, 还可以把宿主机一个目录mount到container里。...(译者:如开篇译者提到的docker的container是无状态的, 也就是说标记状态的数据,例如:数据库数据, 应用程序的log 等等, 是不应该放到container里的, 而是放到 Data Volume
安装最新版 Docker CE(社区版) sudo apt-get install docker-ce 6....myubuntu2 /bin/bash 查看容器 # 列出本机正在运行的容器 docker container ls # 列出本机所有容器,包括已经终止运行的 docker container ls...id # kill掉一个已经在运行的容器 docker container kill 容器名或容器id 删除容器 docker container rm 容器名或容器id 保存容器为镜像 docker.../ubuntu.tar 使用 Docker安装 FastDFS 1....container ls # 停止 docker container stop storage # 运行 docker container start storage FastDFS 客户端与自定义文件存储系统
在接收器端,我们使用ElasticSearch Connector将数据处理并将数据加载到Elasticsearch中。...配置栈 我们使用Docker和docker-compose来配置和部署我们的服务。.../producers/debezium-debezium-connector-postgresql/:/usr/share/confluent-hub-components/debezium-debezium-connector-postgresql.../producers/debezium-debezium-connector-postgresql/:/usr/share/kafka/plugins/debezium-debezium-connector-postgresql...我们的安装脚本如下所示: #!
一般为: docker build -t mlflow-docker-example:v1 -f Dockerfile ....除此之外,还有是有几个开源了蛮好的docker: Ycallaer/mlflowdocker, Docker container for mlflow 0.8 framework with azure...每次运行完训练脚本,MLflow都会将信息保存在目录mlruns中。...3 对比模型 mlflow ui [OPTIONS] 在mlruns目录的上级目录中运行下边的命令:mlflow ui 但是由于是docker 之中,就需要考虑mlflow的IP + 端口的用法了,需要使用...mlflow.exceptions.ExecutionException: Run (ID 'fc28f62058144c778a8ca2ae49d0c7ab') failed 一种方式就是conda activate mlflow-xxxxxx,然后把该安装的都安装了
本文直接讲解如何在Docker容器中实战部署一个Web应用程序,关于Docker相关的概念和如何安装Docker请参考相关资料完成。...第一步:工具准备 演示如何在Docker容器中部署一个Java Web应用程序,需要准备的软件工具包括:jre,tomcat和webapp应用。...需要在Dockerfile中完成如下几项工作: (1)安装jre (2)安装tomcat,并完成在tomcat中部署web应用的基本配置(为实现此功能:在制作镜像之前直接先完成tomcat的基础配置,然后直接拷贝到镜像中即可...编写Dockerfile #Build java web app container image FROM docker.cn/docker/ubuntu:14.04 MAINTAINER chenchanghui...,Docker容器已经启动,并且其中安装的tomcat已经成功启动。
可直接跳至 6.2 环境准备(其他服务器)继续阅读。 这是一篇全新安装教程,若你的服务器已有环境或者已有数据请谨慎重装系统!!!可直接跳至 6.2 环境准备(其他服务器)继续阅读。...这是一篇全新安装教程,若你的服务器已有环境或者已有数据请谨慎重装系统!!!可直接跳至6.2 环境准备(其他服务器)继续阅读。...然后点击登录,即可登录到服务器中 输入下面这句命令登录到 root 账号 sudo -i 6.1.3 安装 Nginx Proxy Manager(可选建议使用反向代理本教程选用NPM) 安装 Nginx...修改过程中请注意 删除//注释 修改完的配置文件如下图所示 6.3.3 新建docker-compose.yaml文件并编辑 执行以下命令,新建 docker-compose.yaml 文件并编辑 cd...的详细安装教程https://www.smalljun.com/archives/3174.html ,安装Docker-compose,然后再进行 第6.2步及其后续操作 9.
比如老库模型重构,数据迁移到新库,迁移过程中,如果有数据变更,既要写到老库,也要写到新库,两边同步更新。 优点:同步机制,保证了数据的实效性。...Search、Pulsar 等 业务场景: 数据库实时备份 ES 数据索引的构建和维护 分布式缓存(如:Redis)的同步维护 数据异构,订阅方可以按自己的业务需求订阅消费,如:Kafka、Pulsar...等 二、安装 MySQL 1、拉取 MySQL 镜像 docker pull mysql:5.7 2、查看镜像 docker images 3、启动 MySQL 进程 docker run \ -...ps -a CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS...,如: docker容器中使用vi或vim提示bash: vi: command not found的处理方法 因为没有安装vi编辑器,可以执行下面命令 apt-get update apt-get install
可直接跳至 6.2 环境准备(其他服务器) 继续阅读。 这是一篇全新安装教程,若你的服务器已有环境或者已有数据请谨慎重装系统!!!可直接跳至 6.2 环境准备(其他服务器) 继续阅读。...这是一篇全新安装教程,若你的服务器已有环境或者已有数据请谨慎重装系统!!!可直接跳至 6.2 环境准备(其他服务器) 继续阅读。...由于腾讯云的 Docker 容器镜像中的 Docker 已经安装了 docker-compose 。...然后点击登录,即可登录到服务器中 输入下面这句命令登录到 root 账号 sudo -i 6.1.3 安装 Nginx Proxy Manager(必需反向代理本教程选用NPM) 安装 Nginx...的详细安装教程https://www.smalljun.com/archives/3174.html ,安装 Docker-compose ,然后再进行 第6.2步及其后续操作 7.2 账号密码不对无法登录
领取专属 10元无门槛券
手把手带您无忧上云