本文中包含了数据挖掘初学者常见的问题，DMFighter对我以前回复的一些问题进行了精心的整理，在此也感谢他的辛勤工作。因为访问我博客的很多读者会不断重复提这些问题，所以我把DMFighter整理的帖子也转载过来，请初学者们先行阅读，希望能解答一些你们的疑惑。当然，我的回复也只是个人见解，不免有失偏颇，也欢迎大家进行探讨，给出你们的意见和建议。 所有内容均来自互联网的一些博客，感谢他们的建议，在此我把一些比较好的汇总一下，大家共享 请问：现在数据挖掘开发主流平台和编
一位数据挖掘成功人士 给 数据挖掘在读研究生 的建议： 关于数据挖掘方面的研究，我原来也走过一些弯路。其实从数据挖掘的起源可以发现，它并不是一门崭新的科学，而是综合了统计分析、机器学习、人工智能、数据库等诸多方面的研究成果而成，同时与专家系统、知识管理等研究方向不同的是，数据挖掘更侧重于应用的层面。 因此来说，数据挖掘融合了相当多的内容，试图全面了解所有的细节会花费很长的时间。因此我建议你的第一步是用大概三个月的时间了解数据挖掘的几个常用技术：分类、聚类、预测、关联分析、孤立点分析等等。这种了解是比较粗的
目前国内外关于大数据的谈论很多，大多是谈运营级别的，或者说从服务端、服务方提得较多一些。笔者要跟大家交流的问题是作为各类企业尤其是客户方的企业来说，大数据跟他们有什么关系，或者说作为企业方怎样去参与，这是企业方现在面临的最大问题。 这个问题的答案重点在于大数据应该从小数据开始。因为现在很多企业面临的最大问题不是怎么用大数据，而是内部的一些小数据整合出现问题，或者小数据都没用好的情况下怎么用大数据。大数据应该是从小数据逐渐演变上去的，是一个正常的生态，而不是瞬间变化的。大数据这个概念跟自媒体的概念类
目前国内外关于大数据的谈论很多，大多是谈运营级别的，或者说从服务端、服务方提得较多一些。笔者要跟大家交流的问题是作为各类企业尤其是客户方的企业来说，大数据跟他们有什么关系，或者说作为企业方怎样去参与，这是企业方现在面临的最大问题。 这个问题的答案重点在于大数据应该从小数据开始。因为现在很多企业面临的最大问题不是怎么用大数据，而是内部的一些小数据整合出现问题，或者小数据都没用好的情况下怎么用大数据。大数据应该是从小数据逐渐演变上去的，是一个正常的生态，而不是瞬间变化的。大数据这个概念跟自媒体的概念类似，需要企
之前找实习还有秋招的时候看了不少大神的帖子，现在也来回馈一下~ 感觉这方面帖子也不多。
原INSEAD教授曾鸣在公司的内部交流中说到，公司发展都会经历三个阶段，第一个阶段是认清自己的方向，但是不完全知道路怎么走；第二个阶段是知道路上有些步子是对的，有些步子是错的，渐渐去掉错误的，集中精力坚持做正确的；第三个阶段是全力争取高速增长。世上没有一家永远高速增长的公司，一个生命长的公司是在这三阶段里不断轮回。 其实，电子商务公司能顺利走完三阶段，就有些成绩出来了。如何让公司顺利走完这三个阶段？曾教授悟出了一些“道”：在第一个阶段，公司发展的动力是由下而上的发展的，这个阶段鼓励员工大胆创新大胆去做；
求助各位数据挖掘前辈~~ 还有几天就马上研一了，我学的是数据挖掘方向，具体方向应该是微博文本类，这段时间学的挺乱的，一直没有个方向的感觉。假期期间把老师推荐的《web数据挖掘》看了一大半，java又看了一遍，发现也总是忘，可能还是练得少。看了一些python，前面的部分跟java还是很像的，看的很快，到了模块那，又感觉学的好痛苦。 我想请教一下各位前辈，如果研究生毕业想从事数据挖掘方向，我们是俩年研究生，也就是明年9月份就要签工作了。 1 我应该学些什么，哪些书籍或者技能是必须要会的呢，或者是对找工作有利
AI时代，在招聘网站公布的招聘数据中，“算法”、“机器学习”、“数据挖掘”相关岗位平均招聘薪资高于其余同等学历、工龄要求的技术岗位30%以上甚至更高，吸引了一大波人开始学习数据挖掘。
不管是数据分析师还是数据挖掘工程师，我们的目标都是认识数据，从数据中发现需要的信息。 所需要的技能 做数据分析，统计的知识肯定是需要的，Excel、SPSS、R等是需要掌握的基本技能。 我是做数据挖掘
关键字全网搜索最新排名 【机器学习算法】：排名第一 【机器学习】：排名第一 【Python】：排名第三 【算法】：排名第四 关于数据挖掘 提到收据挖掘（Data Mining， DM），很多想学习的同学大多数都会问我： 什么是数据挖掘？ 怎么培养数据分析的能力？ 如何成为一名数据科学家？ （简称数据挖掘工程师为DMer） 我认为，在学习DM之前你至少需要明白以下几点： 数据初期的准备通常占整个数据挖掘项目工作量的70%左右； 数据挖掘本身融合了统计学、数据库和机器学习等学科，并不是新的技术； 数据挖掘技术更
以后想从事数据挖掘行业，但不清楚数据挖掘工程师的工作到底是做什么？ 如果仅仅只是用excel，sas，python，r语言等工具来用现有的算法进行数据挖掘，总感觉比软件工程师的工作量要小，那为什么很多数据挖掘工程师的招聘要求还特别高？ 是否很多数据挖掘工程师还需要对具体场景设计新的算法和方案来进行数据挖掘？ 如果现在要学习的话是否还需要学习hadoop，hive等之类的分布式应用的平台？ 对于数据挖掘，以下为个人的理解： 数据挖掘，从字面上理解，就是在数据中找到有用的东
IT派 - {技术青年圈} 持续关注互联网、大数据、人工智能领域 互联网在经历前几年的繁荣之后，现在开始进入寒冬，资本家不再像以前那样大胆地投资，纷纷攥紧自己的口袋。但是从整个互联网行业来看，大数据却一枝独秀，逐渐崛起。 我们正处于一个大数据飞速发展的时代，我们所做的一切事，不论是在互联网中或者是互联网之外，都会留下数字的痕迹。比如刷卡购物，网络搜索，手机上网，乃至在网上每一个小小的点击都会被一一记录下来。各行各业，大数据技术应用也越来越广泛，对于大数据人才的需求也越来越大。 如果你学的是大数据，那么恭喜
以后想从事数据挖掘行业，但不清楚数据挖掘工程师的工作到底是做什么？ 如果仅仅只是用excel，sas，python，r语言等工具来用现有的算法进行数据挖掘，总感觉比软件工程师的工作量要小，那为什么很多数据挖掘工程师的招聘要求还特别高？ 是否很多数据挖掘工程师还需要对具体场景设计新的算法和方案来进行数据挖掘？ 如果现在要学习的话是否还需要学习hadoop，hive等之类的分布式应用的平台？ 对于数据挖掘，以下为个人的理解： 数据挖掘，从字面上理解，就是在数据中找到有用的
数据挖掘：What？Why？How？ 磨刀不误砍柴工。在学习数据挖掘之前应该明白几点： 数据挖掘目前在中国的尚未流行开，犹如屠龙之技。 数据初期的准备通常占整个数据挖掘项目工作量的70%左右。 数据挖掘本身融合了统计学、数据库和机器学习等学科，并不是新的技术。 数据挖掘技术更适合业务人员学习（相比技术人员学习业务来的更高效） 数据挖掘适用于传统的BI（报表、OLAP等）无法支持的领域。 数据挖掘项目通常需要重复一些毫无技术含量的工作。 如果你阅读了以上内容觉得可以接受，那么继续往下看。 学习一门技术要和行业
导读：很多人不明白学习数据挖掘以后干什么，这个问题也经常被问到。记得刚学数据挖掘的时候，有一个老师说学数据挖掘有什么用，你以后咋找工作。当时听了，觉得很诧异，不知道他为何有此一问。数据挖掘在国外是一份
前言：对于一个陌生的领域，最重要的还是方向，有人引导那会更好，把有限的时间花在必要的事上，做一件正确的事。 说明：这篇文章是新年后的第一篇文章，算是微信互动问答和小密圈的综合，最近也有不少朋友问我这方面的问题。 一、来聊聊入门 2月2号，晚上九点。 我刚到上海，还没下高铁就有一位陌生的朋友主动添加我的微信。 在表达来意以后，我分别邀请了他进大数据挖掘畅谈的微信群，以及大数据挖掘杂谈的小密圈。 没过多久，他很客气的向我请教了一个苦恼很久的问题： "他说自己是从事Java开发的，但是工作经验不是很久，况且也
问题：如何系统地学习数据挖掘？ 虽然是本科毕业，但是在看数据挖掘方面的算法理论时经常感觉一些公式的推导过程如天书一般，例如看svm的数学证明，EM算法..，感觉知识跳跃比较大， 是我微积分学的不好还是中间有什么好的教材补充一下，数据挖掘系统的学习过程是怎么样的，应该看那些书(中文最好)？ 回答者：Han Hsiao 数据挖掘：What？Why？How？ 这个问题思考了很久，作为过来人谈一谈，建议先看下以前的一些回答。 什么是数据挖掘？ 怎么培养数据分析的能力？ 如何成为一名数据科学家？ 磨刀不误砍柴工。在学
读者问：虽然是本科毕业,但是在看数据挖掘方面的算法理论时经常感觉一些公式的推导过程如天书一般,例如看svm的数学证明,EM算法..,感觉知识跳跃比较大, 是我微积分学的不好还是中间有什么好的教材补充一
很多人不明白学习数据挖掘以后干什么，这个问题也经常被问到。记得刚学数据挖掘的时候，有一个老师说学数据挖掘有什么用，你以后咋找工作。当时听了，觉得很诧异，不知道他为何有此一问。数据挖掘在国外是一份很不错的工作。我喜欢数据挖掘，因为它很有趣。很高兴以后就从事这方面的工作啦。写论文之余，也考虑一下数据挖掘工程师的职业规划。 以下是从网上找的一些相关资料介绍，和即将走上数据挖掘岗位或是想往这方面发展的朋友共享： 数据挖掘从业人员工作分析 1.数据挖掘从业人员的愿景： 数据挖掘就业的途径从我看来有以下几种，(注意：本
当今这个时代，说数据就是金钱一点都不夸张。随着向一个基于应用的领域过渡，数据则呈现出了指数级增长。然而，大部分数据是非结构化的，因此它需要一个程序和方法来从中提取有用信息，并且将其转换为可理解、可用的形式。 而在数据挖掘任务中，有大量的工具可供使用，比如采用人工智能、机器学习，以及其他技术等来提取数据。 以下为您推荐六款强大的开源数据挖掘工具： 1、RapidMiner 该工具是用Java 语言编写的，通过基于模板的框架提供先进的分析技术。该款工具最大的好处就是，用户无需写任何代码。它是作为一个服务提供
看数据挖掘方面的算法理论时经常感觉一些公式的推导过程如天书一般,例如看svm的数学证明,EM算法..,感觉知识跳跃比较大,那么数据挖掘系统的学习过程是怎么样磨刀不误砍柴工。在学习数据挖掘之前应该明白几点： 数据挖掘目前在中国的尚未流行开，犹如屠龙之技。 数据初期的准备通常占整个数据挖掘项目工作量的70%左右。 数据挖掘本身融合了统计学、数据库和机器学习等学科，并不是新的技术。 数据挖掘技术更适合业务人员学习（相比技术人员学习业务来的更高效） 数据挖掘适用于传统的BI（报表、OLAP等）无法支持的领域
数据挖掘：What？Why？How？ 这个问题思考了很久，作为过来人谈一谈，建议先看下以前的一些回答。 什么是数据挖掘？ 怎么培养数据分析的能力？ 如何成为一名数据科学家？ 磨刀不误砍柴工。在学习数据
作为数据挖掘常用的两个工具软件，R软件和weka软件各有千秋，本文对这两种数据挖掘软件进行了比较与分析。 R软件介绍 R是统计领域广泛使用的一款软件，是一个开放的统计分析和图形显示的程序设计环境，它与S编程语言相似。 R 可以看作是贝尔实验室（Bell Laboratories）的Rick Becker，John Chambers和Allan Wilks开发的S语言的一种实现。S语言是一种用来进行数据探索、统计分析、作图的解释型语言。最初S语言的实现版本主要是S-PLUS。S-PLUS是一个商业软
说起大数据，有个成语可以来形容一下它的现状：遍地开花！ 如今，在国内，只要是个IT公司(说的是非传统行业)，出去的时候，感觉要是说自己公司没有涉足大数据都不好意思。 所以，现在的情况大部分是这样的：一个创业公司哪怕只有十多人的开发团队，也非得整一个大数据小组出来，我们不止要做大数据离线处理，还要做离线处理，不止有数据分析报表，我们还得进行深度的数据挖掘，做到精准的个性化推荐，流弊的数据预测！ 偶滴娘亲啊，寥寥数人，不止要搭起一整套完整的数据收集、数据传输、数据离线实时处理，不止要维护hadoop集群、s
新一轮毕业季即将到来，就业问题又将成为讨论的热点，今年会是大学生们就业的春天吗？据权威数据显示，2015年全国普通高校毕业生人数达到749万，2016年全国普通高校毕业生人数达到765万，2017年的毕业生总人数再创新高，达到700万。大学生们面临的就业形势依然严峻，就业的春天不会来临。 那么毕业生们应该怎么做呢？我们先来分析下就业形势。 在全国仅34%企业招聘活动保持稳定的现状下，每年毕业的大学生人数正在不断的上涨，一个岗位可能存在上百的竞争者。 在这样残酷的就业环境下，求职者更应该找好自己的方向。土木
数据挖掘，又称为资料探勘、数据采矿。它是数据库知识发现（英语：Knowledge-Discovery in Databases，简称：KDD）中的一个步骤，是一个挖掘和分析大量数据并从中提取信息的过程。其中一些应用包括市场细分 - 如识别客户从特定品牌购买特定产品的特征，欺诈检测 - 识别可能导致在线欺诈的交易模式等。在本文中，我们整理了进行数据挖掘的 8 个最佳开源工具。
作者是浙江大学计算机硕士，通过自己的努力终于拿到了心仪的offer（搜狗Web数据挖掘助理研究员），实现了从事互联网数据挖掘的梦 想。他对数据挖掘这个行业的兴趣，以及为了进入这个行业所做的准备和努力，非常值得想进入这一行业的在校生或朋友们参考。
导读：作者wrchow是浙江大学计算机硕士，通过自己的努力终于拿到了心仪的offer（搜狗Web数据挖掘助理研究员），实现了从事互联网数据挖掘的梦想。他对数据挖掘这个行业的兴趣，以及为了进入这个行业所做的准备和努力，非常值得想进入这一行业的在校生或朋友们参考。 由于本科专业是生物信息(可以理解为生物统计学或者与基因数据相关的数据挖掘学科)，所以那时已经开始接触数据挖掘，对统计也算有一定的基础。记得大二的时候，我便开始学用matlab，然后玩弄SVM，神经网络之类的机器学习算法做一些分析和实验。现在想
1. 读书《Introduction to Data Mining》，这本书很浅显易懂，没有复杂高深的公式，很合适入门的人。另外可以用这本书做参考《Data Mining : Concepts and Techniques》。第二本比较厚，也多了一些数据仓库方面的知识。如果对算法比较喜欢，可以再阅读《Introduction to Machine Learning》。
新媒体管 基础篇： 1. 读书《Introduction to Data Mining》，这本书很浅显易懂，没有复杂高深的公式，很合适入门的人。另外可以用这本书做参考《Data Mining : Concepts and Techniques》。第二本比较厚，也多了一些数据仓库方面的知识。如果对算法比较喜欢，可以再阅读《Introduction to Machine Learning》。 2. 实现经典算法。有几个部分： a. 关联规则挖掘 (Apriori, FPTree, etc.) b. 分类 (C
缘起 之所以有这个话题，是因为周末加班中午吃饭与一个同行朋友聊起了这个话题，之后再细细地结合一些其他接触的东西，确实是有些感触的。
阿里投资微博后，有声音说微博会成为一个大号美丽说。甚至有人说这是阿里对社会化电商的狙击。事实上，淘宝并不会狙击社会化电商，相反它们会拥抱社会化电商。三段论之一分析了淘宝需要更多流量，进而需要更多外部流量生产机器。如果说微淘有点社会化电商的味道，我信。但将新浪微博和社会化电商甚至大号美丽说拽到一起，我认为挺难的。 首先微博仍然是一个信息媒体，再加上些许社交功能。它不应该成为美丽说。 人 们上去不只是没到思考“买啥”的阶段，连“想买”都没到。这时候电商广告的出现就跟有人街边抓住我促销的感觉一样。不仅烦，命中
前面对数据挖掘相关资源等等进行了总结。但是，很多人不明白学习数据挖掘以后干什么，这个问题也经常被问到。记得刚学数据挖掘的时候，有一个老师说学数据挖掘有什么用，你以后咋找工作。当时听了，觉得很诧异，不知道他为何有此一问。数据挖掘在国外是一份很不错的工作。我喜欢数据挖掘，因为它很有趣。很高兴以后就从事这方面的工作啦。写论文之余，也考虑一下数据挖掘工程师的职业规划。以下是从网上找的一些相关资料介绍,和即将走上数据挖掘岗位或是想想这方面发展的朋友共享： BI职业发展方向：数据分析师---商业分析师-
互联网在经历前几年的繁荣之后，现在开始进入寒冬，资本家不再像以前那样大胆地投资，纷纷攥紧自己的口袋。但是从整个互联网行业来看，大数据却一枝独秀，逐渐崛起。
通过上网查询以及看同行对会议的公共认识，数据挖掘领域的顶级会议是KDD(ACM SIGKDD Conference on Knowledge Discovery and Data Mining)，公认的、排名前几位的会议是KDD、ICDE、CIKM、ICDM、SDM，期刊是ACM TKDD、IEEE TKDE、ACM TODS、ACM TOIS、DMKD、VLDB Journal等。会议及期刊的全称如下： 会议 ACM SIGKDD Conference on Knowledge Discov
问题：如何系统地学习数据挖掘？ 虽然是本科毕业,但是在看数据挖掘方面的算法理论时经常感觉一些公式的推导过程如天书一般,例如看svm的数学证明,EM算法..,感觉知识跳跃比较大, 是我微积分学的不好还是
问题：如何系统地学习数据挖掘？ 虽然是本科毕业,但是在看数据挖掘方面的算法理论时经常感觉一些公式的推导过程如天书一般,例如看 svm 的数学证明,EM 算法..,感觉知识跳跃比较大, 是我微积分学的不
一直以来有人问：“ 数据分析 VS 数据挖掘 VS 数据科学家，它们到底有什么不同？入行大数据的话该怎么选？” 估计 90% 程序员，包括一些数据相关工作的⼩伙伴，都给不出准确回答。最近整理了这张对比长图，来回答这个问题！PS. 被问次数太多了，实属无奈
随着大数据的爆发，中国IT业内环境也将面临新一轮的洗牌，不仅是企业，更是从业人员转型可遇而不可求的机遇。如果将IT人士统一比作一条船上的海员，大数据就是最大的浪潮，借浪潮之势而为之，可成功从普通程序员转行成为大数据专家。 在美国，大数据工程师平均年薪达17.5万美元，在中国顶尖的互联网公司里，大数据工程师的薪酬比同级别的其他职位高出30%以上。DT时代来得太突然了，国内发展势头很猛，而大数据相关的人才却非常地有限，在未来若干年内都会是供不应求的状况，因此程序员们，你们的春天到了！ 当然，专行也并非一朝一
做数据挖掘也有些年头了，写这篇文一方面是让我写篇文，朋友作为数据挖掘方面的参考，另一方面也是有抛砖引玉之意，希望能够和一些大牛交流，相互促进，让大家见笑了。 Q&A： Q:学习,最近在看集体智慧编程,
月薪2.5万没有那么难。 尤其是做为一名开发者，这个目标很容易实现，只要你在2018年把握好这一点。 目前，普通的Hadoop大数据工程师起薪也在25K/月，数据挖掘、机器学习、人工智能相关人才薪资
甲：数据挖掘 很多地方招聘还是挺喜欢这样专业的，但是前提是你得过笔试关。 为了笔试，学习C和数据结构 数据挖掘的时候学习算法和推理机制等，看看数据分析，神经网络之类。数据挖掘要学的东西很多。 乙:好的基础是必须的，数学、统计等学科要有功底；必须有良好的产品理解能力，不然你作的东西根就都是没用的；前途来说：现在一个一般的起薪15000。以后这东西的用途会更多。非常有用。 丙：你选模式识别吧。。。和你的大方向比较吻合。而且在搜索引擎应用也非常广泛，需求也比较大。 数据挖掘要学的东西很多，特别是数据库和数据仓库、
导读：吾日三省吾身，过年胖了吗？情人节过了吗？发际线还好吗？别想这么多啦，程序员和数据科学家的世界里，只有Python值得你费脑子！今天为大家准备了10本数据分析相关好书，助你早日成为Python大神！
自问自答的问题，缘起是因为数据挖掘入行不久，一直上拉勾网看各种公司的招聘JD，人工看一方面是时间很消耗，更严重的是抓不住重点，最近刚好入手python爬虫，试图简化这部分工作。另一方面学习爬虫之后，发现自己整天上网手动翻网页找信息这个动作很low，所以花了两天的时间连爬取带写文档。文档中同时附上github代码，各位想上手python的童鞋可以下载玩一下，（自知代码粗浅，大牛求放过~） 工具：windows7，python3.4，IDE PyCharm 4.5 Python代码： 抓取 https://
缘起是因为数据挖掘入行不久，一直上拉勾网看各种公司的招聘JD，人工看一方面是时间很消耗，更严重的是抓不住重点，最近刚好入手python爬虫，试图简化这部分工作。另一方面学习爬虫之后，发现自己整天上网手动翻网页找信息这个动作很low，所以花了两天的时间连爬取带写文档。文档中同时附上github代码，各位想上手python的童鞋可以下载玩一下，（自知代码粗浅，大牛求放过~） 工具：windows7，python3.4，IDE PyCharm 4.5 Python代码： 抓取： https：//github.co
《Python数据挖掘简介》一文主要介绍了Python语言的基础知识、使用场景以及数据挖掘的优势。Python是一种解释型、面向对象并具有动态语义的高级程序设计语言，适合进行数据挖掘。Google、NASA等著名公司都使用Python进行数据挖掘。使用Python编程技巧进行数据挖掘具有解释型语言方便调试、跨平台编程作业、丰富的应用编程接口以及开源免费使用等优势。
数据挖掘是从大量数据（包括文本）中挖掘出隐含的、先前未知的、对决策有潜在价值的关系、模式和趋势，并用这些知识和规则建立用于决策支持的模型，提供预测性决策支持的方法、工具和过程。
无论你是想从事大数据相关职位的职场小白，还是准备往高处走的牛牛。小白有了这些在校招中过关斩将，牛牛们温故知新跨过业务壁垒。 B格高的HR，或者想要个助理的大数据工作者也可以了解下同行是怎么筛选人。 非主流的可以拿来撩HR妹纸，折腾面试的小鲜肉………………………… 数据分析 1、提前想好答案 数据分析师面试常见的77个问题 http://www.ppvke.com/Answer/question/25782 （典型的面试题，有些题是与业务结合的，不深不浅，忽悠漂亮HR妹纸必不可缺的神器。HR也可以看看提升
我投的岗位“软件研发工程师”。到了面试现场，选择了Java语言（有对应的面试官）。不过，后面进行了交叉面试，被推到了“数据研发”岗位。 一面： 首先，自我介绍。 我：“我做过两个项目。写过几篇论文和专利。还参加过阿里巴巴大数据竞赛。同时，出于个人兴趣，我还阅读了一下HDFS的少部分源码，理解了一下HDFS的核心思想，实现了一个功能非常简单，并且还不完善的HDFS。” 面试官1：“说一说你写的论文中的某一篇的创新点？” 我：“我写的文章或者专利，主要遵循一个
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
云直播
对象存储
