首页
学习
活动
专区
工具
TVP
发布

如何快速装载数据?

我们在工作中经常需要将文本的数据快速、高效地导入到数据库中,同时也需要将数据库中的数据按照一定格式导出到文本中。在DM数据库中有什么好的方法呢?答案就是dmfldr工具。

Dmfldr(DM Fast Loader)是DM提供的快速数据装载命令行工具。用户通过使用dmfldr工具能够把按照一定格式排序的文本数据以简单、快速、高效的方式载入到DM数据库中,或把DM数据库中的数据按照一定格式写入文本文件。

Dmfldr系统结构如下:

当进行数据载入时,dmfldr客户端接收用户提交的命令与参数,分析控制文件与数据文件,将数据打包发送给服务器端的dmfldr模块,由服务器完成数据的真正装载工作。并分析服务器返回的消息,必要时根据用户参数指定生成日志文件与错误数据文件。

当进行数据导出时,dmfldr客户端接收用户提交的命令与参数,分析控制文件,将用户要求转换成相应消息发送给服务器端的dmfldr模块。服务器解析并打包需要导出的数据,发送给dmfldr客户端,客户端将数据写入指定的数据文件,必要时根据用户参数指定生成日志文件。

1

启动dmfldr

安装好DM数据库管理系统后,在安装目录的“bin”子目录下可找到dmfldr执行文件。启动操作系统的命令行窗口,进入“dmfldr”所在目录,可以准备启动dmfldr工具了。dmfldr的使用必须指定必要的参数,否则工具会报错“无效的参数个数”并退出。

2

查看dmfldr参数

dmfldr使用较为灵活,参数较多,用户可以使用“dmfldr help”查看各参数的简单信息。

Dmfldr help

格式:DMFLDR KEYWORD=value

注:USERID和CONTROL是启动dmfldr必须要指定的参数,USERID必须是第一个参数,CONTROL必须是第二个参数,这两个参数都不能省略;其余参数均为可选参数,可以不指定,指定时也无顺序要求。

2.1

USERID

用于指定登录数据库的信息,包含用户名、密码、服务器地址、端口号和安全证书存放路径。

参数值格式为:

用户名/密码[@主库地址[:端口号][#安全证书存放路径@安全证书密码]]

如果用户使用默认端口号5236登录则端口号可以不设置;如果登录的是本地的服务器则主库地址可以省略;如果不使用通信加密则安全证书相关设置可以省略。此参数为必选参数且必须位于参数位置的第一个。

2.2

CONTROL

控制文件的路径,字符串类型。控制文件用于指定数据文件中数据的格式,在数据载入时,dmfldr根据控制文件指定的格式来解析数据文件;导出数据时,dmfldr也会根据控制文件指定的列分隔符、行分隔符等生成数据文件。控制文件中还可以指定其他的一些dmfldr参数值。此参数为必选参数且必须位于参数位置的第二个。

3

dmfldr实战

本次测试环境为:

操作系统:中标麒麟 6

数据库系统:DM 8.1

3.1

控制文件

Cat /dm8/test.ctrl

3.2

数据文件

Cat /dm8/test.txt

3.3

创建数据表

3.4

装载数据

3.5

查询导入结果

4

dmfldr使用限制

dmfldr的使用存在以下一些限制:

• 不支持向临时表、外部表装载数据

• 不支持向系统表装载数据

• 不支持向带有位图索引的表装载数据

• 不支持向带有函数索引的表装载数据

• 不支持向带有全文索引的表装载数据

• 不支持向DCP代理装载数据

• dmfldr装载时,对约束进行检查

dmfldr的约束检查机制

今天的干货内容就到这里啦,快动手学习起来吧!下期再会!

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20191129A0JCX300?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券