1. 首页
  2. 大数据

论数据分析、数据挖掘、数据统计、OLAP 之间的差异是什么?谁的观点你最赞同?

PPV课大数据

Han Hsiao 观点:

简单说:数据挖掘就是从海量数据中找到隐藏的规则,数据分析一般要分析的目标比较明确,数据统计则是单纯的使用样本来推断总体。主要区别:“数据分析”的重点是观察数据,“数据挖掘”的重点是从数据中发现“知识规则”KDD(Knowledge Discover in Database),数据统计的重点是参数估计和假设检验。

1. “数据分析、数据统计”得出的结论是人的智力活动结果,“数据挖掘”得出的结论是机器从学习集(或训练集、样本集)发现的知识规则。

2. “数据分析”需要人工建模,“数据挖掘”自动完成数学建模,“数据统计”则是把模糊估计变得准确而定量。可以通过机器学习自动建立输入与输出的函数关系,根据KDD得出的“规则”,给定一组输入参数,就可以得出一组输出量。

举个简单的例子:有一些人总是不及时向电信运营商缴费,如何发现它们?数据分析:通过对附近人口的生活习惯、业余爱好、教育背景、收入分布、家庭组成等进行全方面分析,发现很多人都习惯在收到欠费通知以后再缴费。结论就是提前发放短信提醒。数据挖掘:通过编写机器学习聚类算法发现无法通过观察图表得出的深层次原因。发现家住在五环以外的人,由于居住环境偏远没有时间上营业厅缴费。结论就需要多设立一些营业厅或者自助缴费点。数据统计:通过统计学推理方法组成样本的试验单元进行参数估计和假设检验,我们发现不及时缴钱人群里的贫困人口占82%。所以结论是收入低的人往往会缴费不及时。结论就需要降低资费。


孟京朝观点:

数据分析是面对具体的应用需求从现有的数据中分析出统计数据,是对数据更深层次的整理。

数据挖掘从数理统计,数据库,统计学中发展来的综合交叉学科,运用各种方法从各种数据源中获取知识的过程,数据源可以来自关系数据库,文件,web数据,文本,流数据等,挖掘的方法也有很多种,应用最多的有关联规则,聚类,分类,以及离群点检测,高级的应用如航空航天,智慧城市等。

OLAP是联机分析处理,与OLTP(联机事务处理)相对应的,主要是基于不同物理分布的数据库进行针对分析的处理技术,而不是面相具体事务的,面相具体事务的应用主要涉及终端用户,比如铁路的售票人员的售票行为。联机分析处理是将不同物理分布的数据进行整合分析得到汇总,统计信息,基于数据仓库。


张丰寸观点:

首先是数据分析、数据挖掘、数理统计这三者。其实这都属于数据分析。数据分析就是从一堆信息中提取有用的信息(数据是描述信息的最精确的方式,所以一般叫数据分析)来支持你的决策。

数据分析是比较广义的,数据挖掘、数理统计一般都从分析的复杂度或者模型的特点来区分出来的一部分数理统计基本就是利用统计学的知识构建模型,来提取有用关键的信息,来支持决策;数据挖掘,顾名思义,关键信息埋藏的很深,我们必须使用很高明的工具和方法、模型才能把有用的信息挖出来,包括很多统计学模型、机器学习等等。

有了专门的数据挖掘,剩下的一般称成为数据分析(狭义的)。然后呢,说起OLAP,就要从数据分析的步骤来说了。

数据分析基本分为几个步骤:数据采集->数据整理->数据分析(广义的)->数据展现(支持决策)

OLAP主要说的从数据整理到分析的部分,如何有效的组织数据,让数据分析(或者数据挖掘)能够更快更好的进行。

说说你支持谁的观点,还有你有什么好的建议?可以点击底部阅读原文,进入社区去对此文章进行评论。

PPV课其他精彩文章:


0、回复“活动”查看PPV课社区百日掘金活动-积分兑换Iphone 5s、MINI金条

1、回复“干货”查看干货 数据分析师完整知识结构

2、回复“答案”查看大数据Hadoop面试笔试题及答案

3、回复“设计”查看这是我见过最逆天的设计,令人惊叹叫绝

4、回复“可视化”查看数据可视化专题-数据可视化案例与工具

5、回复“禅师”查看当禅师遇到一位理科生,后来禅师疯了!!知识无极限

6、回复“啤酒”查看数据挖掘关联注明案例-啤酒喝尿布

7、回复“栋察”查看大数据栋察——大数据时代的历史机遇连载

8、回复“数据咖”查看数据咖——PPV课数据爱好者俱乐部省分会会长招募

9、回复每日一课查看【每日一课】手机在线视频集锦

PPV课大数据ID:ppvke123

大数据人才的摇篮!专注大数据行业人才的培养。

大数据资讯,每日分享!

数据咖—PPV课数据爱好者俱乐部!

原文始发于微信公众号(PPV课数据科学社区):论数据分析、数据挖掘、数据统计、OLAP 之间的差异是什么?谁的观点你最赞同?

原创文章,作者:ppvke,如若转载,请注明出处:http://www.ppvke.com/archives/26218

联系我们

4000-51-9191

在线咨询:点击这里给我发消息

工作时间:周一至周五,9:30-18:30,节假日休息