利用shell脚本生成动态sql(67天)

在一些分布式环境中,可能涉及到的数据库有很多,相关的数据库用户也不少,有些看似简单的变更可能需要在不同的库,不同的用户间要进行复杂的操作。 现在我们有3套环境,一套是测试环境test,一套是准生产环境xprd,一套是生产环境prod, 比如在prod上有5个库一共20个用户,某一个变更可能在这20个用户里面要进行一些的操作。xprd里面和生产环境类似,也有数据库用户,test环境中有10个用户,需要在这10个用户中进行相应的操作。 最开始的时候,使用sqlplus和shell脚本,如下 sqlplus -s dbuser1/dbuser1@test <<EOF xxxxx EOF exit 。。。。。 但是发现每次在测试环境中部署的时候,得重新修改所有的用户名密码和数据库实例,在测试环境部署了之后,在准生产环境还得重新改一次,到生产环境还是得修改,每次改动都得花费不少的时间和精力,反复验证数据库连接串是否正确。如果脚本中有使用到db link,db link的名字也可能不一样,修改的时候就可能会漏掉。 每次做变更都很头疼。 这一次是下定决心来做改变了,决定使用shell脚本来生成动态的sql,通过将变量嵌入到sql中达到动态的效果。 下面是需要用到的环境变量,每一个后面都是一些数据库连接串。 专门用一个shell脚本来保存这些变量,conn_init.sh export testwork_conn=testtestWORK/TESTtestwork@TESTCUS1 export testwait_conn=testtestWAIT/TESTtestwait@TESTCUS1 export testssca_conn=testtestSSCA/TESTtestssca@TESTCUS1 export testsscb_conn=testtestSSCB/TESTtestsscb@TESTCUS1 export DIS1_testssca_conn=testDIS1SSCA/TESTDIS1ssca@TESTDIS1 export DIS1_testsscb_conn=testDIS1SSCB/TESTDIS1sscb@TESTDIS1 export DIS2_testssca_conn=testDIS2SSCA/TESTDIS2ssca@TESTDIS2 export DIS2_testsscb_conn=testDIS2SSCB/TESTDIS2sscb@TESTDIS2 export DIS3_testssca_conn=testDIS3SSCA/TESTDIS3ssca@TESTDIS3 export DIS3_testsscb_conn=testDIS3SSCB/TESTDIS3sscb@TESTDIS3 export DIS4_testssca_conn=testDIS4SSCA/TESTDIS4ssca@TESTDIS4 export DIS4_testsscb_conn=testDIS4SSCB/TESTDIS4sscb@TESTDIS4 export CUST_DBA_conn=testdba/testdba@TESTCUS1 export DIS1_DBA_conn=testdba/testdba@TESTDIS1 export DIS2_DBA_conn=testdba/testdba@TESTDIS2 export DIS3_DBA_conn=testdba/testdba@TESTDIS3 export DIS4_DBA_conn=testdba/testdba@TESTDIS4 export opr_conn=testOPRC/TESTOPRC@TESTCUS1 export test_mst_ins=testtestWAIT.TESTCUS1 然后在所有的sql脚本中,来引用这些变量,使没个脚本在执行前对应的环境变量都生效。 脚本的内容可能是下面的样子: chmod +x ./conn_init.sh . ./conn_init.sh sqlplus $testwork_conn<<EOF spool TEST_TAB_CHG.log set echo on CREATE TABLE TEST_TAB_CHG( HOT_LINE_NO VARCHAR2(25) CONSTRAINT test_l_HOT_LINE_NO_NN NOT NULL, ..... FUTURE_3 VARCHAR2(30)) TABLESPACE DATAL01 LOGGING ; grant UPDATE on MI9_OUTCOL_CS_HOTLINE to CCBSSOAUSR_SEL; !##testtestWAIT conn $testwait_conn CREATE TABLE TEST_TAB_CHG( FUTURE_3 VARCHAR2(30)) TABLESPACE DATAL01 LOGGING ; grant SELECT on TEST_TAB_CHG to testtestWORK_SEL; grant SELECT,UPDATE,INSERT,DELETE on TEST_TAB_CHG to testtestWORK_ALL; !##testOPRC conn $opr_conn Insert into DST_ACTIVE_SNAPSHOT (REFTABLENAME, SYS_CREATION....... commit; !##TESTDIS1 conn $DIS1_testssca_conn CREATE MATERIALIZED VIEW TEST_TAB_CHG REFRESH FORCE ON DEMAND WITH ROWID USING DEFAULT LOCAL ROLLBACK SEGMENT DISABLE QUERY REWRITE AS SELECT *FROM TEST_TAB_CHG @$ref_mst_ins; grant SELECT on TEST_TAB_CHG to PUBLIC; EOF exit 可以从上面的脚本看到相关的连接串都会从conn_init.sh中获取,为了确保连接串的正常,可以单独创建一个通用的文件,对已经存在的表来进行测试,比如说存在的表是TEST在所有的用户中都存在。 比如: test.sh sqlplus $testwork_conn <<EOF select count(*)from TEST where rownum<2; conn $testwait_conn select count(*)from TEST where rownum<2; conn $testssca_conn select count(*)from TEST where rownum<2; conn $ testsscb_conn select count(*)from TEST where rownum<2; 。。。。。

EOF exit 这样随时可以进行简单的测试,不用为连接串而苦恼了,可以专心考虑业务部分了。

原文发布于微信公众号 - 杨建荣的学习笔记(jianrong-notes)

原文发表时间:2014-05-09

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏Jerry的SAP技术分享

CDS view注解解析 - @Environment.systemField

下面的CDS view使用到了@Environment.systemField这个注解,定义了两个参数#SYSTEM_LANGUAGE和#USER。

1806
来自专栏乐沙弥的世界

参数CONTROL_FILE_RECORD_KEEP_TIME和MAXLOGHISOTRY

--**************************************************

793
来自专栏乐沙弥的世界

Oracle 审计失败的用户登陆(Oracle audit)

       对于在线交易系统,且Oracle用户在使用缺省的profile的情形下,多用户共享相同的数据库用户及密码,任意用户输入错误密码累计达到10次以上,...

713
来自专栏杨建荣的学习笔记

临时表空间故障处理 (33天)

最近测试环境需要把一些现有的存储空间匀出一部分来给新增的环境使用。 unix组的人很快就空间按照指定的比例重新切分好了。环境交给我的时候,我先把数据库起来,没有...

3566
来自专栏祝威廉

StreamingPro SQL Server 支持异步导出数据

StreamingPro可以很容易让你搭建一个Spark SQL Server 服务,并且提供Http 格式的接口进行交互。通常查询结果较小,但是如果用户的SQ...

783
来自专栏Jed的技术阶梯

利用Sqoop实现Hbase的数据与MySQL数据的互导

在服务器(主机名为repo)的mysql数据库中的"test"库中有一张"student"表,其中内容如下:

1193
来自专栏散尽浮华

Mysql之binlog日志说明及利用binlog日志恢复数据操作记录

众所周知,binlog日志对于mysql数据库来说是十分重要的。在数据丢失的紧急情况下,我们往往会想到用binlog日志功能进行数据恢复(定时全备份+binlo...

2648
来自专栏mySoul

Node 连接mysql数据库

github地址 https://github.com/jxcore/jxcore

1234
来自专栏「3306 Pai」社区

浅析ProxySQL用户管理

对于读写分离特别重要,保证了同一个事务中所有的语句都会路由到同一组示例,防止出现同一个事务中,上下文数据不一致的情况。例如,在不开启这个属性的情况下:

1221
来自专栏java学习

使用idea2017搭建SSM框架

我这里列出的是搭建完了之后所有的目录和文件,诸位先把目录文件建起来,然后我在给出文件内容

902

扫码关注云+社区