首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

首次揭秘1112背后的云数据库技术!| Q推荐

是什么样的数据库撑起了 2021 年的 11 12 的稳定进行?...《数据 Cool 谈》第三期,阿里巴巴大淘宝技术部 12 队长朱成、阿里巴巴业务平台 11 队长徐培德、阿里巴巴数据库 11 队长陈锦赋与 InfoQ 主编王一鹏,一同揭秘了 11 12 背后的数据库技术...“那这背后对于一个新的数据库产品类型的要求,实际上整个业界大家都是在探索阶段。” 写在最后 11 12 背后的数据库技术支持远不止于此。... 11 12 丰富的运营活动和千亿交易额背后,数据库层面是包括 RDS、PolarDB、Tair、ADB(ADB3.0) 以及 Lindorm 等数据库产品提供的组合技。...2021 年是阿里巴巴首个云上 100% 上云的 11 的一年,也是阿里云数据库全面云原生化的一年,但是峰值计算成本相比 2020 年下降了 50%,云数据库巨大的商业价值和潜力可见一斑。

31.7K50

数据库审计

产品简介 中安威士数据库审计系统(简称VS-AD),是由中安威士(北京)科技有限公司开发的具有完全自主知识产权的数据库审计产品。...4.业务审计 1)常规审计规则  引擎名称、数据库实例、数据库类型  数据库用户、操作系统用户、主机  数据库IP、客户端IP  数据库MAC、客户端MAC  客户端程序、客户端端口...5.运维审计 针对运维人员对数据库服务器的运维操作进行审计,支持的协议有:TELNET、POP3、SMTP、IMAP等。...通过在Web服务器上安装插件实现三层审计,将HTTP访问和SQL访问准确关联,把数据库访问行为 有效定位到业务工作人员,实现有效追责、定责 全面审计数据库操作,为安全事件提供事后追查依据 》输出合规报表...对数据库安全的要求包括:业务审计、满足等保评测、防止信息泄漏以及溯源。该需求涉及到公民的隐私信息保护和内部越权数据访问的整治。  解决方案 通过旁路,在数据中心部署了中安威士数据库审计系统。

2.6K50
您找到你想要的搜索结果了吗?
是的
没有找到

大数据Hadoop的数据库审计数据库审计

Hadoop架构下数据库审计难在哪里?...为了满足Hadoop架构下各种应用需求,引入了数据库仓库工具(HIVE)、非结构化数据库(HBase)等子项目解决数据的处理分析与数据实时交互需求,同时为了简化Hadoop管理工作,HUE、Phoenix...因此,在Hadoop大数据架构环境下要实现有效审计,必须同时对各种UI管理界面、编程接口同时审计,具备Hadoop架构各种协议解析、编程语言解析能力。...其审计难点可总结为: 1、Hadoop大数据非结构化数据(NO SQL),传统方案无法实现此类数据的综合安全监控; 2、Hadoop中数据库连接工具的多样化,传统方案只能对典型的C/S客户端访问方式进行安全监控...更多数据库审计内容详见商业新知-数据库审计

2.8K30

Redis延迟删-架构案例2021(三十二

通过对需求的分析,在数据管理上初步决定采用关系数据库(MySQL)和数据库缓存(Redis)的混合架构实现。 经过规范化设计之后,该系统的部分数据库表结构如下所示。...3、适用数据库的触发器,在更新时候会自动更新其他表。 1的话可能改动比较大,综合实际情况,供应商改动都不大,这时候一般采用定时器就好。...常见redis和数据库同步方案,被动同步和主动同步。 1)被动同步:当每次新增和修改的时候,去更新redis,当没值的时候,查询数据库把值赋值到redis,当修改的时候,也修改redis的数据。...(有不同步问题采用延迟删解决) (延迟删是在存入数据库之后,睡眠一段时间,再把redis数据删掉,保证后面redis数据和数据库的一致) 2)主动同步:主动在程序读取mysql的binlog日志,把日志里的数据写入到...数据处理:数据一般通过网关上传到云数据库,这样更容易处理和分析数据,以及更安全和容灾性。 系统性能:在云平台上处理,更强数据处理能力,性能更好。

32820

数据库审计】旁路式与植入式数据库审计技术有何差别

在日渐火热的数据库安全领域,数据库审计应该是应用最为广泛,用户接受度最高的产品了,没有之一。...本文将对目前数据库审计市场上的两类技术路线进行分析,从使用效果出发,浅析两者在各维度的审计效果上存在哪些差异,呈现产品真正能实现的功能和价值。希望能为广大用户在数据库审计产品的选型上提供参考依据。...概括来讲,两类数据库审计的技术路线区别,根本来自于两者的部署方式、获取数据库访问记录的途径不同以及SQL解析方式不同,审计效果自然不同。...植入式:属于注册代理程序的“侵入式”审计,利用数据库的自审计插件(如Oracle的FGAC插件),读取数据库审计日志,依赖的是数据库自身审计能力,这里有一个很大的问题,如果数据库自身不具备审计能力,那么这类数据库审计产品就无法支持对此类型数据库审计...植入式:数据库审计产品在注册实例的时候,需要手工输入IP端口数据库实例,还需要sys用户及口令,向数据库中注册用户及程序。

2.1K70

真实案例:数据库审计在入侵行为审计中的作用

数据库审计数据库安全管理中的重要性不言而喻,下面让我们通过陕西省某大学一则真实的案例来体会数据库审计在入侵行为审计中的作用。...(虽然1小时就到了现场,但是客户本身对业务、对数据库审计都非常熟悉,效率非常高啊有木有!)...2 事后审计追踪过程 该客户网络中有数千台计算机,客户在查看数据库审计设备时,发现有大批量的返回结果集超过1000行的select数据查询告警,通过查询数据库审计告警日志及原始审计日志,通过会话关联分析...通过上述配置,我们就可以在安恒明御数据库审计与风险控制系统中及时发现入侵行为、以及非合规操作行为,使得DBA能更有效的对数据库安全进行保障。...其实数据库审计能做的事情非常多,未来,安恒信息的安全专家将为您带来更多关于数据库安全方面的文章,感谢您的支持!

3.2K50

Spark机器学习实战 (十二) - 推荐系统实战

推荐系统项目中,讲解了推荐系统基本原理以及实现推荐系统的架构思路,有其他相关研发经验基础的同学可以结合以往的经验,实现自己的推荐系统。...1 推荐系统简介 1.1 什么是推荐系统 1.2 推荐系统的作用 1.2.1 帮助顾客快速定位需求,节省时间 1.2.2 大幅度提高销售量 1.3 推荐系统的技术思想 1.3.1 推荐系统是一种机器学习的工程应用...Chih-Jen) 2 推荐系统原理 可能是推荐系统最详细且简单的入门教程 官方文档指南 协同过滤 协同过滤通常用于推荐系统。...MovieLens有一个网站,您可以注册,贡献自己的评分,并接收由GroupLens组实施的几个推荐者算法这里之一的推荐内容。...基于Spark的机器学习实践 (九) - 聚类算法 基于Spark的机器学习实践 (十) - 降维算法 基于Spark的机器学习实践(十一) - 文本情感分类项目实战 基于Spark的机器学习实践 (十二

1.1K30

Spark机器学习实战 (十二) - 推荐系统实战

推荐系统项目中,讲解了推荐系统基本原理以及实现推荐系统的架构思路,有其他相关研发经验基础的同学可以结合以往的经验,实现自己的推荐系统。...1 推荐系统简介 1.1 什么是推荐系统 [1240] [1240] [1240] 1.2 推荐系统的作用 1.2.1 帮助顾客快速定位需求,节省时间 1.2.2 大幅度提高销售量 1.3 推荐系统的技术思想...1.3.1 推荐系统是一种机器学习的工程应用 1.3.2 推荐系统基于知识发现原理 1.4 推荐系统的工业化实现 Apache Spark [1240] Apache Mahout [1240] SVDFeature...(C++) [1240] LibMF(C+ +,Lin Chih-Jen) [1240] 2 推荐系统原理 [1240] 可能是推荐系统最详细且简单的入门教程 官方文档指南 协同过滤 协同过滤通常用于推荐系统...Spark的机器学习实践 (九) - 聚类算法 基于Spark的机器学习实践 (十) - 降维算法 基于Spark的机器学习实践(十一) - 文本情感分类项目实战 基于Spark的机器学习实践 (十二

2.8K40

简单实现MySQL数据库的日志审计

0x0 背景 由于MySQL社区版没有自带的审计功能或插件,对于等级保护当中对数据库管理的要求的就存在一定的不满足情况的,抛开条条框框不说数据库的日志是值得研究的,通过收集数据库的日志到企业SOC平台便于安全事件的溯源与故障分析...根据等级保护内容第四章“数据库管理系统安全技术要求”中 第四节“数据库安全审计”中明确提出数据库管理系统的安全审计应: 1. 建立独立的安全审计系统; 2. 定义与数据库安全相关的审计事件; 3....设置专门的安全审计员; 4. 设置专门用于存储数据库系统审计数据的安全审计库; 5. 提供适用于数据库系统的安全审计设置、分析和查阅的工具。...Audit_json_file这个参数要整体控制是否开启审计功能使用命令: Set variables audit_json_file=on 开启审计功能: ?...Audit_whitelist_users: 不审计user用户的所有命令 Aduit_record_cmds: 需要进行审计的命令种类 ?

1.8K41

数据库三层架构审计解密

通常情况下,客户端不直接与数据库进行交互,而是通过COM/DCOM通讯与中间层建立连接,再经由中间层与数据库进行交互。 2、什么叫三层审计? 三层审计数据库审计领域的业界难题之一。...所谓三层审计,是将应用层区域的审计数据与数据库层区域的审计数据综合起来进行“关联分析”,从而将应用层操作准确对应到数据库层的操作。...当发生安全事件时,根据关联审计记录的日志信息,可快速定位到网络中的责任人。所以,通过三层审计即可实现应用与数据库的有效关联,追踪到最终用户端。...业界传统的做法是采取“模糊匹配”方法来实现“关联分析”,即:审计系统首先分别审计出浏览器到Web服务器,Web服务器到数据库服务器两类的事件,前者是HTTP事件,后者是SQL事件,然后需将这两条事件关联起来...关于更多数据库审计,详见“商业新知-数据库审计” 图谱标签

1.7K40

MySQL 8.0 数据库审计日志平台部署

数据库审计平台(简称DB Audit),实时记录用户操作数据库的行为,对数据库操作进行细粒度审计的合规性管理,对数据库遭受到的风险行为进行实时告警。...通过对用户访问数据库行为记录、分析和汇报,来帮助DBA事后生成合规报告、事故追根溯源,同时通过搜索技术提供高效查询审计报告,定位事件原因,以便日后查询、分析、过滤,实现加强内外部数据库网络行为的监控与审计...第二种:依赖于开启Percona Audit Plugin插件的审计方法,存在的弊端是数据库审计功能的开启会影响数据库本身的性能、审计日志以txt文本格式存放在本地磁盘里,对于审计数据的挖掘和迅速定位是个棘手的问题...审计日志数据从专用存放syslog的数据库中获取,所以LogAnalyzer不需要改变现有的架构。...使管理人员对用户的行为一目了然,真正做到数据库操作行为可监控,违规操作可追溯。本文以第二种方案介绍,借助LogAnalyzer打造轻量级数据库审计日志平台。

76480
领券