作者:刘新旺 MySQL DBA,专注于 MySQL 数据库多年,现就职一家本地生活服务类互联网公司,负责数据库相关工作。...,支持标准化上线流程,原生支持 MySQL 审核且数据库类型可扩展的 SQL 审核工具。...用户细分 主要使用人员:开发人员和 DBA ;开发人员希望便捷、高效、自主可控的上线业务 SQL ;DBA 希望便捷、高效、安全、高质量的审核 SQL 上线。...创建SQL工单-SQL语句输入框高度过高,点击审核后不方便查看到结果,建议降低高度增加宽度 (4)创建SQL工单-工单不支持自定义上线时间,同时也不支持定时上线 表现层 平台整体以白灰色色调为主,配色稳重简约...: DB 类型和实例关联模版这个管理力度很细 数据源关联流程,使审批粒度更加细致,管理更加方便 SQL 白名单,应对特殊情况,避免业务被规则卡死,同时避免管理人员直接操作数据库;sql 指纹相当于提供了统配功能
文章主要分为以下三部分内容: 一、SQLE 项目介绍 二、新版本主要功能介绍 三、完整的 Release 信息 一、SQLE 项目介绍 爱可生开源社区的 SQLE 是一款面向数据库使用者和管理者,支持多场景审核...,支持标准化上线流程,原生支持 MySQL 审核且数据库类型可扩展的 SQL 审核工具。...目前支持各种数据库规则 700+。...支持快速审核 SQL 现在,您可以直接提交需要审核的 SQL,无需创建工单,即刻获得审核结果。这个全新的功能将带来更快速、更高效的审核体验。...SQL 语句审核 编辑好 SQL 之后点击编辑框下方的 “审核” 按钮,即可查看到审核结果。审核结束后,可以回到审核记录列表追溯到每次审核的信息。 审核结果 2.
--- 一、 SQLE 介绍 SQLE 是一款由爱可生开源社区发起,面向数据库开发与管理人员,实现了 SQL 的「开发」-「测试」-「上线」等全流程覆盖,资源与权限精细化管理,兼顾简洁与高效,易维护、易扩展的的开源项目...二、 功能介绍 SQLE 的开发阶段 SQL审核主要是通过 SQLE 的功能审核任务来完成的,该功能定位是应对全场景 SQL 质量管控解决方案,能够在应用开发、测试、上线、生产等不同阶段对 SQL 进行质量管控...将 SQL 采集与SQL审核结合对数据库进行长期审核,目前支持Mybatis 扫描,慢日志,库表元数据,TopSQL ,应用程序 SQL 抓取(java应用)的场景审核。...应用开发阶段可以通过审核任务的 Mybatis 扫描类型的任务对应用代码做实时审核,Mybatis 扫描的审核任务需要通过 SQLE 提供的 Scanner 工具进行SQL采集并推送到 SQLE 进行SQL...因此在开发阶段也可以将SQL审核作为一个检查模块集成进CI流程。将 SQL审核事宜前置到开发阶段能够减少后期SQL审核的压力。
---- 一、 SQLE 介绍 SQLE 是一款由爱可生开源社区发起,面向数据库开发与管理人员,实现了 SQL 的「开发」-「测试」-「上线」等全流程覆盖,资源与权限精细化管理,兼顾简洁与高效,易维护、...将 SQL 采集与SQL审核结合对数据库进行长期审核,目前支持Mybatis 扫描,慢日志,库表元数据,TopSQL ,应用程序 SQL 抓取(java应用)的场景审核。...因此在开发阶段也可以将SQL审核作为一个检查模块集成进CI流程。将 SQL审核事宜前置到开发阶段能够减少后期SQL审核的压力。...当 jenkins 任务触发时会进行SQL审核 Jenkins 集成后进行SQL审核的效果如下两张图所示: 审核结果会立即通过 Jenkins 的任务返回,当 SQL 不合规触发规则建议,可以看到上图所示的构建失败的结果...本文关键字:#SQLE# #SQL审核# #事前审核#
1.2206.0-pre1 SQLE Release Notes SQL审核工具 SQLE 1.2206.0-pre1 于今天发布。以下对新版本的 Release Notes 进行详细解读。...仅可用新功能试用,不保证平滑升级 文章主要分为以下三部分内容: 一、SQLE 项目介绍 二、新版本主要功能介绍 三、完整的release信息 一、SQLE 项目介绍 爱可生开源社区的 SQLE 是一款面向数据库使用者和管理者...,支持多场景审核,支持标准化上线流程,原生支持 MySQL 审核且数据库类型可扩展的 SQL 审核工具。...支持TiDB专属审核规则【企业版】 group by语句必须包含select列表中的所有非聚合列 检查 SQL需要遵守 'MySQL的ONLY_FULL_GROUP_BY' 模式;例如:select a...下面是SQLE规则截图: 三、完整的release信息 Release Notes 特性 [#565] 支持 TiDB 类型数据库审核【企业版】 [#573] 新增4条TiDB专属规则【企业版】
对于SQL质量管理平台来说仅支持某一个类型的数据库(例如MySQL),那么是会有一定的局限性,SQLE在设计之初考虑支持多种数据库,因此产品设计时,将审核流程(业务)的代码和具体SQL审核上线的代码进行分离...,SQL审核上线通过插件的形式实现。...SQLE对外提供插件开发所需的接口和库,可以快速创建开启一个审核插件,无需升级软件,导入审核插件即可获对应数据库类型的审核上线能力,使用平台所有功能。...目标 首先将创建一个 Postgres 数据库审核插件,并添加两条规则,“禁止使用 SELECT *”和“创建的表字段过多”,并在开发过程中结合SQLE对Postgres数据库进行SQL审核上线工单的测试演示...2.编写最小化插件代码 在项目main.go文件内编写如下代码,即可最快的添加一个Postgres数据库审核插件,此时插件没有审核规则。
文章主要分为以下三部分内容: 一、SQLE 项目介绍 二、新版本主要功能介绍 三、完整的 Release 信息 一、SQLE 项目介绍 爱可生开源社区的 SQLE 是一款面向数据库使用者和管理者,支持多场景审核...,支持标准化上线流程,原生支持 MySQL 审核且数据库类型可扩展的 SQL 审核工具。...目前支持各种数据库规则 700+。...支持自定义审核规则 当用户根据业务需求需要创建新的审核规则时,可以使用平台的自定义规则功能。目前,用户可以在平台上通过正则表达式自定义 SQL 审核的规范,且新建的审核规则将作为全局资源使用。...调整了审核 SQL 和审核结果的页面布局,提升用户体验。 2. 增加了对 SQL 分析结果的展示,用户可以查看更完整的审核结果。
仅可用新功能试用,不保证平滑升级 文章主要分为以下三部分内容: 一、SQLE 项目介绍 二、新版本主要功能介绍 三、完整的 release 信息 一、SQLE 项目介绍 爱可生开源社区的 SQLE 是一款面向数据库使用者和管理者...,支持多场景审核,支持标准化上线流程,原生支持 MySQL 审核且数据库类型可扩展的 SQL 审核工具。...MySQL 审核场景化改造兼容事后审核模式 目前,SQLE的SQL审核在设计之初是为了满足SQL上线的审核,随着产品发展,我们支持了多场景下的事前事后审核。...(2).目前的SQL 审核对不同场景审核的兼容性不友好。...SQLE的SQL审核在设计之初是为了满足SQL上线的审核,通过上下文关联和基础对象验证满足上线SQL的正确性校验,这些在事后审核的场景下过于严格且审核的SQL是已执行过的(慢日志的SQL),导致部分SQL
最近完成了SQL审核功能的上线,发现用户体验上面还是存在一些问题,具体有以下几点: 1.关于字段注释的建议比较多,这些建议开发人员可能没有必要每个字段都进行注释; 2.有些SQL的建议太多,看到之后直接懵了...,不知道从哪儿下手; 3.有些任务比较紧急,SQL审核方面的任务太多,容易拖延实际工期; 针对以上问题,今天主要想的是按照一定的重要程度讲SQL审核结果进行分类,目前分为必须修改的错误SQL、警告...SQL以及待完善SQL,并且通过将不同的错误状态码按照一定映射关系映射到不同的审核等级上进行分类展示,这样可以高效的处理严重的问题,对于不严重的问题,则可以后续处理,让SQL审核模块更加试用。...今天的主要任务是将那些SQL审核的错误代码进行切分,利用代码进行前后端的分类、抽取、整理等工作,这里就不展示结果了,主要的成果将在这些任务完成之后进行集中展示。从而实现最终的功能。...今天就这么多,做的工作比较琐碎,改天整理一版出来作为最近SQL审核的最终成果。
SQL审核工具发布的思考 关于SQL审核发布 今天将前段时间做的SQL审核工具做了一场发布,邀请了一些后台和前端的开发同事,他们平时可能没有机会坐下来仔细的去审核自己写的SQL,今天通过SQL...审核工具的发布,大家一起聊了聊在写SQL的方面的一些经验和积累,总体来讲效果还是不错的。...由于我们的SQL审核工具具有打分的功能,可以根据当前这个SQL的执行情况,按照公司的开发规范给出一定的分数值,这种直观的反馈还是很吸引人的。...在今天的发布会当中,我们设定了有奖竞猜环节,就是说我们给出一句SQL,让开发人员去猜这个SQL可以打多少分,分数最接近的那个同学就可以得到我们的奖品,大家的兴致还是很高的,都在认真的审视这个SQL,然后通过自己的经验去分析结果...第三、在SQL审核工具的发布会上,大家还是找出了工具中存在的一些问题,可能确实存在一些语句,我们审核的不到位,比如说一个字段的注释是“电话号”,但是实际上字段类型给定的是char(256),这种情况除了人工
,支持多场景审核,支持标准化上线流程,原生支持 MySQL 审核且数据库类型可扩展的 SQL 审核工具。...新增IDE(Jetbrains系列)审核插件 SQLE的该插件满足开发人员在开发阶段进行实时自助式的静态SQL审核,实现开发阶段审核上线等各个SQL开发阶段的SQL开发规范。...,即当某个存在问题的SQL被修复后SQLE是无法感知到的,依然会对该SQL进行审核。...因此对于智能扫描类的场景提供增量审核的模式,可以忽略到一段时间内不再出现的SQL,仅对某段时间以来的SQL进行审核。...; 优化 [#626] 优化审核规则模版界面的表格模版与其他表格一致; [#625] 数据源界面增加数据库类型字段以及筛选条件方便进行分类查看; 缺陷修复 [#653] 修复老版本数据库插件在新版本SQLE
内容来源:2017 年 10 月 21 日,平安科技数据库架构师陈刚在“PostgreSQL 2017中国技术大会”进行《基于PG数据库插件的SQL规范审核工具》演讲分享。...阅读字数:6453 | 17分钟阅读 摘要 此议题的主题是PG数据库插件和SQL规范审核相关的内容。首先了解一下hook技术的基本原理。接下来将介绍一下SQL语句在PG数据库的分析解析和执行过程。...然后结合hook和SQL执行过程介绍一下SQL规范审核这个插件,聊一聊该插件的实现原理。最后做一下展望。...SQL规范审核插件 有了前面的HOOK技术和SQL解析的基础之后,接下来就介绍本次议题的主角了。SQL规范审核插件。...特点总结 下面总结一下审核插件的特点: 第一点,这个插件非常轻量,因为它使用的是数据库内核原生的SQL解析器,不需要额外开发的SQL解析器对SQL语句进行解析。
SQLE 介绍 SQLE 是一款由爱可生开源社区发起,面向数据库开发与管理人员,实现了 SQL 的「开发」-「测试」-「上线」等全流程覆盖,资源与权限精细化管理,兼顾简洁与高效,易维护、易扩展的的开源项目...SQL 的自动采集和统计,用户可以在 SQLE 上通过语句池页面统览应用内的 SQL 的分类与统计,迅速掌握应用内 SQL 的情况; 支持手动或自动审核 SQL ,用户可以在审核报告中知晓应用的 SQL...效果展示 事先部署好环境、需要接入的 Java 应用以及对应的数据库,并添加为数据源。...,可以看到目前应用已经执行的 SQL ; 查看审核报告,用户可以通过审核任务的审核报告了解到应用的 SQL 是否符合预设审核规则以便及时作出调整。...开发人员和 DBA 可以通过「审核报告」、「审核任务的 SQL 语句池」等功能完全掌握应用内的 SQL 审核结果、执行情况以及统计信息,完成了从「开发」直至「上线」这一过程中的 SQL 质量管控。
1.2207.0-pre1 SQLE Release Notes SQL审核工具 SQLE 1.2207.0-pre1 于今天发布。以下对新版本的 Release Notes 进行详细解读。...不保证平滑升级 文章主要分为以下三部分内容: 一、SQLE 项目介绍 二、新版本主要功能介绍 三、完整的release信息 四、后续规划 一、SQLE 项目介绍 爱可生开源社区的 SQLE 是一款面向数据库使用者和管理者...,支持多场景审核,支持标准化上线流程,原生支持 MySQL 审核且数据库类型可扩展的 SQL 审核工具。...插件内引入了大部分MySQL的审核规则,并去掉OceanBase MySQL模式不兼容的场景,使得SQLE审核能完全兼容OceanBase MySQL模式。...[#666] 修复MySQL的lower_case_table_names配置为2时,部分审核进行库表检查不符合预期的问题; [#667] 修复当MySQL审核语句包含系统表时,SQLE审核会提示表不存在的问题
,支持标准化上线流程,原生支持 MySQL 审核且数据库类型可扩展的 SQL 审核工具。...目前支持各种数据库规则 700+。...智能扫描支持 SQL 文件扫描 平台新增扫描任务,当前支持对 SQL 文件进行扫描。利用该扫描任务,用户可以在批量执行 SQL 前发现潜在的安全漏洞、提高数据库性能及数据库开发质量。...阅读推荐 开源产品测评之 SQL 上线能力 这里有 MySQL/Oracle 最常用的 SQL 开发规则 如何快速使用 SQLE 审核各种类型的数据库 SQLE 兼容 MySQL 8.0 测评 如何使用...SQLE 进行开发阶段 SQL 审核 关于 SQLE 爱可生开源社区的 SQLE 是一款面向数据库使用者和管理者,支持多场景审核,支持标准化上线流程,原生支持 MySQL 审核且数据库类型可扩展的 SQL
1.2112.0 SQLE Release Notes SQL审核工具 SQLE 1.2112.0 于今天发布。...一、SQLE 项目介绍 爱可生开源社区的 SQLE 是一款面向数据库使用者和管理者,支持多场景审核,支持标准化上线流程,原生支持 MySQL 审核且数据库类型可扩展的 SQL 审核工具。...sqle 文档 https://actiontech.github.io/sqle-docs-cn/ 发布信息 https://github.com/actiontech/sqle/releases 数据审核插件开发文档...,提高单个规则的定制灵活性度 [#121] 增加规则配置项,提高规则的适用范围 [#129] SQL输入支持输入联想,补全关键字,提高录入效率 [#171] 数据源支持域名,支持录入并审核云数据库 优化..."改表时,表空间超过指定大小(MB)审核时输出osc改写建议" 触发时导致程序崩溃的问题
,支持标准化上线流程,原生支持 MySQL 审核且数据库类型可扩展的 SQL 审核工具。...二、新版本主要功能介绍 1、SQL上线流程优化 社区版的SQL审核上线流程支持了审批环节,可以为不同的项目配置不同的审批人权限。...-> SQL上线】; 审核任务新增权限:“创建审核任务”,“查看他人创建的审核任务”,可对审核任务进行细分的权限管理。...[#463] Mybatis XML文件审核的流程兼容解析iBatis XML文件。 优化 [#469] 优化规则模板界面“应用的数据库”列布局。...缺陷修复 [#425] 修复过长的SQL文本审核导致SQLE审核报错的问题【社区反馈】 [#443] 修复MySQL给字段指定非预期的字符集排序规则匹配规则 “建议使用规定的数据库排序规则“的问题【社区反馈
1.2111.0 SQLE Release Notes SQL审核工具 SQLE 1.2111.0 于今天发布。...一、SQLE 项目介绍 爱可生开源社区的 SQLE 是一款面向数据库使用者和管理者,支持多场景审核,支持标准化上线流程,原生支持 MySQL 审核且数据库类型可扩展的 SQL 审核工具。...,并 支持 PostgreSQL 数据库审核插件 支持 Oracle 数据库审核插件 优化 优化白名单页面展示框 #39 优化添加审核计划时的提示信息 #41 调整插件层 API #59 缺陷修复...修复系统配置(邮箱配置,LDAP配置)密码无法修改的问题 #78 修复 release 分支无法触发 CI 流程问题 #66 修复 MyBatis XML 解析器解析空文件 panic 问题 #61 修复数据库审核插件审核规则定义不生效的问题...#57 #107 修复角色删除后,该角色绑定的用户还能访问绑定的数据源的问题 #77 修复命令行参数启动SQLE时 panic 的问题 #65 修复使用 Mybatis Scanner 扫描的 XML 内SQL
SQL审核定制进度 今天一天都在做SQL审核定制的事情,尝试定制的审核规则如下,一共13条,每天审核规则后面给出了预估难度,其中红色标注的审核规则是今天完成的部分,剩余的是需要后续接着完善的规则...11.**** SQL语句不可以出现隐式转换,比如 select id from 表 where id='1'; 12.*** float,double不建议使用 ?
领取专属 10元无门槛券
手把手带您无忧上云