首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

es从线上库导出数据并导入开发环境

于是,只能采用从线上es库导出文件,然后在开发环境原样搭建这么一个es库并导入的办法。 了解到线上es库,版本是5.4.3,准备在开发环境恢复的那个索引的数据量大概是有20来个g。...我们是使用elasticdump来进行数据导入导出的,数据量小的时候用这个还是可以,但20 来个g这种,导入的过程还是有一些坑的,当时一开始没加一些参数,搞了一晚上都没弄完,后面研究了下,速度才快了,所以简单记录下...pretty" 后台运行: 后台运行并记录pid到pid file: ....,我这边是先在本地虚拟机用npm安装这个module(有网络),然后把这个模块拷贝到内网es服务器上去跑导入本地文件的;当然它也支持从一个es/文件导出,直接导入到另一个es/文件。...根据导出语句写导入语句即可: 注意,数据量大的时候,下面语句比较慢,看完全文再操作。

34110
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Docker镜像的导入导出

    本文介绍Docker镜像的导入导出,用于迁移、备份、升级等场景,准备环境如下: CentOS 7.0 Docker 1.18 导入导出命令介绍 涉及的命令有export、import、save、load...docker import nginx-test.tar nginx:imp  或  cat nginx-test.tar | docker import - nginx:imp 区别 export命令导出的...tar文件略小于save命令导出的  export命令是从容器(container)中导出tar文件,而save命令则是从镜像(images)中导出 基于第二点,export导出的文件再import回去时...,无法保留镜像所有历史(即每一层layer信息,不熟悉的可以去看Dockerfile),不能进行回滚操作;而save是依据镜像来的,所以导入时可以完整保留下每一层layer信息。...如下图所示,nginx:latest是save导出load导入的,nginx:imp是export导出import导入的。

    1.6K30

    Docker镜像的导入导出

    导出镜像 在企业案例中,我们往往打包成一个镜像后,就会打包,然后把它发送给其他的同学来使用。...其实这样的场景是很普遍的,比如开发和测试同学都在异地的开发模式中,开发同学更新完代码后,进行发布并且使用Docker进行打包成镜像,那么可以把镜像文件直接发送给测试同学,测试同学导入镜像后,运行镜像就可以直接进行测试...那么在本案例中,我主要包一个centos的镜像,里面也是安装了vim的编辑器,然后再在另外一个docker的导入和执行。...在本地的docker中打包一个镜像,然后导出,在容器里面安装了vim的编辑器,详细的过程如下: #获取镜像 $ docker pull centos:7.8.2003 7.8.2003: Pulling.../var的目录下 $docker image save centos:7.8.2003 -o >/Users/***/Desktop/centos.taz 导入镜像 下面具体演示把本地的镜像文件上传到阿里云的服务器

    1.1K20

    Docker镜像的导入导出

    文章目录[隐藏] 镜像导入导出 容器导入导出 镜像导入导出 # 导入 命令 docker load [options] # 示例 docker load -i nginx.tar #或 docker...会成功导入镜像及相关元数据,包括tag信息 # 导出 # 命令 docker save [options] images [images...] # 示例 docker save -o nginx.tar...# 或 docker save > nginx.tar nginx:latest 其中-o和>表示输出到文件,nginx.tar为目标文件,nginx:latest是源镜像名(name:tag) 容器导入导出...imp 或 cat nginx-test.tar | docker import - nginx:imp 导入后相当于容器快照作为新的镜像 # 导出 命令 docker export [options]...示例 docker export -o nginx-test.tar nginx-test 其中-o表示输出到文件,nginx-test.tar为目标文件,nginx-test是源容器名(name) 导出的是容器当前运行的快照

    1.3K10

    JS module的导出和导入

    最近看了些Vue框架写的程序,发现自己的前端知识还停留在几年以前,发现现在Javascript程序里有各种各样的对module的导入和到处,导入乍一看跟python的语法挺像的无非就是把 from和 import...默认导出只有导出一个单一值,这个输出可以是一个函数、类或其它类型的值,这样在模块import导入时也会更 容易引用。...';console.log(cube(3));// 27 import导入模块 import语法声明用于从已导出的模块、脚本中导入函数、对象、指定文件(或模块)的原始值。...import模块导入与export模块导出功能相对应,也存在两种模块导入方式:命名式导入(名称导入)和默认导入(定义式导入)。...'jquery';import后面第一个 $是 {defaultas$}的替代写法。

    2.7K40

    Oracle导入导出的常见错误

    做数据的导入导出操作,最常用的就是imp/exp和impdp/expdp,经常会碰见各种错误,之前总结过一些,《解决导入过程中出现的ORA-02289错误》、《生产数据导入测试环境碰见的一些问题》。...   Oracle不同版本导入导出存在一些问题,比如从Oracle 9i中exp出来的dmp文件(在安装有oracle 9i的机器上使用exp命令),可以imp到Oracle 11g中去(装有Oracle...s handle  IMP-00000: Import terminated unsuccessfully 这是因为文件导出用的expdp,而导入时用的imp,所以导出导入格式不一样。...IMP-00000: Import terminated unsuccessfully 原因就是exp导出的时候,用的DBA角色的账号,因此要求导入的账号,需要含有DBA角色。...但一般很有可能,要导入账号是普通账号,没有DBA角色,也不可能临时被授予,这就比较费劲。 可能的解决方案: 1. 导出用户,执行导出前临时revoke DBA角色,完成导出后再授予DBA角色。 2.

    2.7K30

    基于注解的异步导入导出系统

    相信大家做Excel导入导出功能,都会遇到大数据量超时问题。...一般解决方法,采用异步操作,但每次都需要自己写异步的代码,为了减少重复不必要的工作,我决定开发一套基于注解的导入导出功能,并且支持异步操作。 基于EasyExcel封装,我们先来看使用。...List list) { //直接使用List list做业务逻辑 } List list为导出的数据,functionA方法中,注解里面会将导入的Excel读入到入参中List...图解原理 异步导出功能 异步导入功能 导入 如上图,异步操作都是新启一个线程进行导入导出,这样主线程和子线程一部分操作能并行执行,可以效解决超时问题。...导出文件上传到文件系统中,并返回文件信息 那么我们看看核心代码asyncExportExcel 这里我使用两个线程。

    1.3K10

    MySQL 数据库的导入导出

    目录 ---- 目录 导出数据库 导出数据和表结构 只导出表结构 导入数据库 首先建空数据库 导入数据库 ---- 导出数据库: 导出数据和表结构: 格式: mysqldump -u用户名 -...p密码 数据库名 > 数据库名.sql 举例: /usr/local/mysql/bin/ mysqldump -uroot -p abc > abc.sql 敲回车后会提示输入密码 只导出表结构...sql 举例:/usr/local/mysql/bin/ mysqldump -uroot -p -d abc > abc.sql 注:/usr/local/mysql/bin/ —> mysql的data...目录 导入数据库 首先建空数据库 mysql>create database abc; 导入数据库 方法一: 选择数据库 mysql>use abc; 设置数据库编码 mysql>set...names utf8; 导入数据(注意sql文件的路径) mysql>source /home/abc/abc.sql; 方法二: mysql -u用户名 -p密码 数据库名 < 数据库名.sql

    16.8K20

    深入理解Docker的导入导出

    深入理解Docker的导入导出 在 docker 的概念中, 有两套导入导出的概念. 分别是export 和 import还有save 和 load 百度搜索!...文件 导入对象 镜像 镜像 镜像层数 一层 多层 下面我们来一行一行的解释 操作对象 操作的对象不同, export 和 import 是用来导入导出容器用的, 而 save 和 load 是用来导入导出镜像用的..., 两者都是导出为一个 tar 包 导入对象 在导入上, import 和 load 通过 tar 包导入的都是一个镜像 导入的镜像层数 最大的区别就在这里, 通过export 和 import导出的容器形成镜像时..., 该镜像只有一层 通过save 和 load 导出的镜像保留了原镜像所有的层次结构, 导出时原镜像有几层, 导入的时候就还是有几层 想导出容器, 但是还想保留层次结构怎么办?...所以最后还是要再次强调: export 和 import 是用来导出导入容器用的, 导出的是容器的文件系统, 导出后的镜像只有一层 save 和 load 是用来导出导入镜像用的, 导出后保持着原镜像的层次结构

    80710

    MySQL导出导入命令的用例

    1.导出整个数据库   mysqldump -u 用户名 -p 数据库名 > 导出的文件名   mysqldump -u wcnc -p smgp_apps_wcnc > wcnc.sql   2.导出一个表...  mysqldump -u 用户名 -p 数据库名 表名> 导出的文件名   mysqldump -u wcnc -p smgp_apps_wcnc users> wcnc_users.sql   ...3.导出一个数据库结构   mysqldump -u wcnc -p -d --add-drop-table smgp_apps_wcnc >d:wcnc_db.sql   -d 没有数据 --add-drop-table...在每个create语句之前增加一个drop table   4.导入数据库   常用source 命令   进入mysql数据库控制台,   如mysql -u root -p   mysql>use...数据库   然后使用source命令,后面参数为脚本文件(如这里用到的.sql)   mysql>source d:wcnc_db.sql

    2.2K40

    Docker 中 MySQL 数据的导入导出

    服务器在使用了 Docker 后,对于备份和恢复数据库的事情做下记录: 由于 docker 不是实体,所以要把mysql的数据库导出到物理机上,命令如下: 1:查看下 mysql 运行名称 #docker... 2:备份docker数据库 由第一步的结果可知,我们的 mysql 运行在一个叫 mysql_server 的 docker 容器中。而我们要备份的数据库就在里面,叫做 test_db。...mysql 的用户名密码均为root,我们将文件备份到/opt/sql_bak文件夹下。...mysql_server【docker容器名称/ID】 mysqldump -uroot -p123456【数据库密码】 test_db【数据库名称】 > /opt/sql_bak/test_db.sql【导出表格路径...】 3:导入docker数据库 方法1: 先将文件导入到容器 #docker cp **.sql 【容器名】:/root/ 进入容器 #docker exec -ti 【容器名/ID】sh 将文件导入数据库

    4.4K30

    Mysql的控制台导入、导出

    今天在往数据库里面导入.sql文件时,发现大的文件根本没办法直接导入的。通过百度,在网上找到了两种解决办法,现在和大家分享一下吧!...3),将你需要导入的数据库文件复制粘贴到Import文件夹里。...(上面那种是在百度中直接找到的方法,我试过了,是可以的!) 第二种: 一般大的文档可以直接在mysql.exe应用程序中直接导入的!...但是,在整个操作过程中也会出现一些问题,比如,我在操作过程中出现了在导入过程中出现了乱码现象(正常情况是说的是几行几行受影响) 出现这样的乱码,首先在导入的过程中要注意的是不要直接导入压缩文件,一定要直接导入解压出来的...建议文件格式为utf-8格式的!(set names utf-8) (对于小文档,是很容易用这种办法导入的,也可以通过在数据库中直接导入的办法,在这里不做详细的介绍!

    1.4K50
    领券