[每天五分钟,备战架构师-11]数据库系统

数据挖掘 Data Mining

数据挖掘就是从大量的、不完全的、有噪声的、模糊的、随机的实际应用数据中,提取隐含在其中的、人们事先不知道的,但又是潜在有用的信息和知识的过程。

几年来随着大数据、人工智能技术的发展,数据挖掘迎来了一个小高潮,其发展离不开以下几项技术的支持:

  • 海量大数据收集与存储,ES、Hadoop为代表。
  • 强大的集群计算处理能力,以Spark、MapReduce为代表。
  • 数据挖掘算法,以TensorFlow为代表。

数据挖掘与传统数据分析的本质区别是数据挖掘是在没有明确假设的前提下去挖掘信息、发现知识。数据挖掘所得到的信息应具有先知,有效和可实用三个特征。

数据挖掘的功能

  • 自动预测趋势和行为,例如预测市场的变化。
  • 关联分析,例如在医学影响领域研究图像和疾病的关系。
  • 聚类。
  • 概念描述。
  • 偏差检测。

数据挖掘常用技术

  • 关联分析
  • 序列分析
  • 分类分析
  • 聚类分析
  • 预测
  • 时间序列分析

数据挖掘的流程

数据挖掘的流程大致如下:

  • 问题定义。
  • 建立数据挖掘库。
  • 分析数据。
  • 调整数据。
  • 模型化。
  • 评价和解释。

数据分析的过程需要不同专长的人员参与,主要分为三类:

  • 业务分析人员,要求精通业务,能够解释业务对象,并提出业务需求。
  • 数据分析人员,精通数据分析技术,并对统计学有熟练的掌握,具备将业务需求转化为数据挖掘各步操作的能力,并能够选择合适的技术。
  • 数据管理人员,能够管理数据采集和数据仓库。

常见的数据库管理系统

教材中介绍了四款数据库管理系统,分别是Oracle、Sybase、Informix、SQL Server,都是体量非常大的数据库,单单从教材的内容是不足以了解各个数据的技术内容的。相对来说,目前Oracle、SQL Server仍被众多的国内金融、大企业所使用,但是Sybase、Informix的使用越来越少。而随着互联网起来的Mysql、MongoDB,以及Redis内存型数据库越来越流行。

Oracle

Oracle仍是当今世界中非常重要的一款商用数据库管理系统,通过RAC、DataGard等技术来提供数据的安全性保证,并且通过ExData一体机来输出高性能的数据库管理系统。Oracle的技术细节讲起来一本书都不够,教材中的内容很多都比较老了,建议大家简单扫一眼即可。

Sybase

Sybase是C/S架构的数据库管理系统。

Informix

Informix是一个跨平台的数据库管理系统,现在很多开源的数据库系统大多不支持小型机或者支持都比较弱,目前看趋势都是采用X86服务器。

SQL Server

SQL Server是Windows平台上的数据库管理系统,具有强大的功能,主要包括四个基本服务器组件 Open Data Services、MSSQL Server、SQL Server Agent、MSDTC。

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏Java后端技术栈

简单聊一下推荐系统的基本要素!

其中,前三者是和机器学习没有任何关系的,但却是推荐效果最好的三种方式。一般说来,这部分内容应该占到总的推荐内容的80%左右,另外20%则是对长尾内容的个性化推荐...

1613
来自专栏编程坑太多

程序出现bug是必然出现的情况还是程序猿水平有限导致的?

PS:最最大的bug是,明明程序运行的好好的,但项目失败了。你叫程序员怎么查?我只是个搬砖的,大厦为什么会倒,我哪知道啊~

390
来自专栏AI研习社

如何设计与实现 SuperScript 交互式会话引擎(附PPT)

SuperScript 是一款开源的交互式会话引擎,它带有弱AI、自然语言理解、简单易用和灵活可扩展的特点。SuperScript 也是目前开源领域内最优秀的聊...

5658
来自专栏FreeBuf

基于开源程序漏洞的攻击在2017年将增长20%

现在,无论是商业软件还是程序员自行开发的小程序,开源代码已经变得越来越普遍了,而开源似乎也已经成为了一种趋势。但需要注意的是,Black Duck软件公司的研究...

2118
来自专栏新智元

机器人,给我来一瓶82年的农夫山泉

1392
来自专栏ATYUN订阅号

【业界】创建深度学习数据平台时,你需要考虑的五个因素

AiTechYun 编辑:nanan 随着AI应用程序和深度学习算法的成熟,许多组织正在制定计划,以弄清楚它们将如何从数据中提取差异化竞争优势。 ? 事实上,在...

3306
来自专栏ThoughtWorks

业务分析实践:10个常见问题 | TW洞见

今日洞见 本文作者:ThoughtWorks-亢江妹。 本文所有内容,包括文字、图片和音视频资料,版权均属ThoughtWorks公司所有,任何媒体、网站或个人...

3559
来自专栏镁客网

为AR滤镜效果而战!Facebook收购计算机视觉公司Fayteq

1170
来自专栏腾讯技术工程官方号的专栏

大型DCI网络智能运营实践

? 9月14-15日,GOPS全球运维大会上海站圆满举行,为期两天的运维盛宴,为各位运维人带来了相互交流和学习的绝佳平台,来自腾讯技术工程事业群(TEG)网络...

1472
来自专栏FreeBuf

关GPS也没用:手机电池电量会暴露你的行踪,定位准确率高达90%

电池电量也会泄露手机位置信息?是的,这并不是天方夜谭。安全研究人员已经实现了一种方法,通过智能手机电池消耗精确获得的你的位置信息。 或许有的朋友会说,只要我关...

19610

扫码关注云+社区

领取腾讯云代金券