sed+awk模拟简单sql查询(26天)

经常需要用sqlplus去查询一些数据字典类型的数据,这些数据量不大,而且需要环境之间都是一样的,所以就想使用离线查询的方式,把那些数据以平面文件的形式存放,然后通过系统级的操作来输出。以下使用 sed 和awk来实现。还有很多很多需要改进的地方,就当做是抛砖引用了

1.数据量极小的行级筛选

.....

echo 'MODU CC_VERSION           MODULE_VERSION       PROJ_NAME
---- -------------------- -------------------- ------------------------------'
data_path=`pwd`/data
data_file=${data_path}/ccmodule.data   --数据通过sqlplus spool 到这个文件中
sed -n "/$1/p"  $data_file|uniq

输出结果如下:

MODU CC_VERSION           MODULE_VERSION       DEV_PATH
---- -------------------- -------------------- ------------------------------
MO1        550                                   550                 devpath1
MO2        550                                   550                  devpath2
MO3        550                                   550                  devpath3
MO4        550                                   550                  devpath4

--因为这个数据量极小,而且数据行内的数据分布很有规律,所以我用了sed做了行级操作

2.多重查询条件

类似数据库查询中的 and or条件

......
cc_module=`echo $2|tr [[:lower:]] [[:upper:]]`
data_path=`pwd`/data
data_file=${data_path}/ccobj.data  --数据通过sqlplus spool 到这个文件中
echo 'MODU OBJECT OBJECT_NAME                    DB_AREA_CODE    VERSION
---- ------ ------------------------------ --------------- --------------------'
cat  $data_file |awk '
BEGIN{
cc_version="'$1'"
cc_module="'$cc_module'"
cc_index=1
}
{
if ($1== cc_module && $5 == cc_version)    --组合查询条件,and/or。。。
{
print cc_index,$0
cc_index=cc_index+1
}
}'
--查询结果如下
MODU OBJECT OBJECT_NAME                    DB_AREA_CODE    VERSION
---- ------ ------------------------------ --------------- --------------------
1 MO1  app       MO1_TAB1                          DB_AREA1                       550
2 MO1   app      MO1_TAB2                          DB_AREA2                        550

3.动态模糊匹配

类似数据中的Like 匹配

.......
obj_name=`echo $2|tr [[:lower:]] [[:upper:]]`
data_path=`pwd`/data
data_file=${data_path}/ccobj.data
echo 'MODU OBJECT OBJECT_NAME                    DB_AREA_CODE    VERSION
---- ------ ------------------------------ --------------- --------------------'
cat  $data_file |awk '
BEGIN{
cc_version="'$1'"
obj_name="'$obj_name'"
cc_index=1
}
{
if ($3~obj_name && $5 == cc_version)  --动态模糊匹配
{
print cc_index,$0
cc_index=cc_index+1
}
}'

输出结果如下:

MODU OBJECT OBJECT_NAME                    DB_AREA_CODE    VERSION
---- ------ ------------------------------ --------------- --------------------
1 MO1 DUMMY  MO1_TAB1                           DUMMY                         550
2 MO2 DUMMY  MO1_TAB2                           DUMMY                         550

原文发布于微信公众号 - 杨建荣的学习笔记(jianrong-notes)

原文发表时间:2014-03-29

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏云霄雨霁

数据库完整性总结

1264
来自专栏Django Scrapy

day2 oracle相关

数据库定义有三: 1 一门计算机学科 2 代表某个软件 3 某一种数据库软件产生的集合 DDL 数据库定义语句 DML 数据库操作语句 创建一张表: ...

2979
来自专栏性能与架构

MySQL STRAIGHT_JOIN

STRAIGHT_JOIN 与 INNER JOIN 的功能完全一致 使用 INNER JOIN 时,mysql会根据优化规则自动判断 应该先加载哪个表 但有时...

3265
来自专栏Python小屋

Python+SQLite开发无界面版通信录管理系统

本文重点在于演示Python对SQLite数据库的操作,以及命令行式菜单的工作原理和实现。 首先使用SQLite Database Browser创建SQLit...

35913
来自专栏Python

Mysql-2

用户操作与权限管理 MySQL用户操作 创建用户 方法一: CREATE USER语句创建 CREATE USER "用户名"@"IP地址" I...

1955
来自专栏xcywt

学习SQLite之路(四)

20160621 更新 参考: http://www.runoob.com/sqlite/sqlite-tutorial.html 1. SQLite   a...

1858
来自专栏小樱的经验随笔

基于约束的SQL攻击

前言 值得庆幸的是如今开发者在构建网站时,已经开始注重安全问题了。绝大部分开发者都意识到SQL注入漏洞的存在,在本文我想与读者共同去探讨另一种与SQL数据库相...

2679
来自专栏乐百川的学习频道

使用 pymysql 操作MySQL数据库

安装PyMySQL PyMySQL是一个Python编写的MySQL驱动程序,让我们可以用Python语言操作MySQL数据库。 首先,使用pip安装PyMyS...

2655
来自专栏杨建荣的学习笔记

简单分析shared pool(三) (r5笔记第94天)

提到shared pool,都会不由得和sql语句的解析过程联系起来,因为shared pool所做的主要工作就是解析sql语句,生成执行计划,在之前的两篇中...

2707
来自专栏杨建荣的学习笔记

一条SQL语句的执行计划变化探究(r10笔记第9天)

继续上次分析的一个问题,一个简单的SQL语句执行计划有些奇怪,明明可以走唯一性索引但是却走了另外一个索引。 当然了,最后逐步定位,发现是在直方图...

2563

扫描关注云+社区