banner

数据分析、数据挖掘、数据统计、OLAP 之间的差异是什么?

作者: 大数据观察来源: 大数据观察时间:2017-05-11 15:36:520

作者: 孙文亮

我觉得前三个正好是广义数据分析的三个方向:

数据分析 。专注于中小网站分析优化,网站地图、结构优化,SEO。多使用第三方工具如:开源分析模块(BIRT),CNZZ,Google Analytics(以下简称GA)。通过对网站属性数据(如pv, uv, 新用户占比,搜索词,跳出率,蹦失率,访问时长,忠诚度等)的分析,对网站结构、内容进行优化。此方向更偏产品一些,极大的依赖分析经验和对数据的敏感 度。 代表人物Justin Cutroni,网站分析领军人物,精通GA/GWO,作有博客Analytics Talk: http:// cutroni.com/blog/ 国内代表人物宋星,经营网站分析在中国: http://www. chinawebanalytics.cn/ ,蓝鲸,经营蓝鲸的网站分析笔记: http:// bluewhale.cc/ ,Joegh,经营网站数据分析: http:// webdataanalysis.net/ 数据挖掘 。数据挖掘主要是面向决策,从海量数据中挖掘不为人知、无法直观得出的结论。例如内容推荐、相关度计算等。此工作更注重数据内在联系,数据仓库组建,分析 系统开发,挖掘算法设计,甚至很多时候要亲力而为的从ETL开始处理原始数据,因此对计算机水平有较高要求。一般广度上不及数据分析,但深度上更为深入。 使用工具除海量数据库如Oracle,分布式计算Hadoop,C++,Java,Python等编程语言外,也有可能会用到第三方挖掘工具如Weka。 此方向更偏技术一些,代表人物Jeff Hammerbacher,曾经的Facebook首席科学家,曾参与编写《数据之美》,部分内容如下: http://www. 360doc.com/content/11/0 222/10/2459_95014883.shtml 延伸阅读《探索推荐引擎内部的秘密》,可以体验一下数据挖掘的魅力: http://www. ibm.com/developerworks/ cn/web/1103_zhaoct_recommstudy1/index.html http://www. ibm.com/developerworks/ cn/web/1103_zhaoct_recommstudy2/index.html http://www. ibm.com/developerworks/ cn/web/1103_zhaoct_recommstudy3/index.html 数据统计 。专注于建模及统计分析,通过概率、统计、离散等数学知识建立合理模型,充分发掘数据内容。例如用回归分析,充分利用网站历史数据,进行评估、预测、反向 预测、发掘因素。利用贝叶斯方法建立模型来进行机器学习、聚类、垃圾邮件过滤等。常用工具如:SAS,R,SPSS。 此方向更偏重数学,尤其是统计学。像哈佛数学毕业的Hammerbacher在这方面也很强。数据统计不局限于互联网,像传统行业尤其是医疗、金融等领域中,用处也是极大。

而OLAP其实是一个建立数据系统的方法,核心思想就是建立多维度的数据立方体,以维度(Dimension)和度量(Measure)为基本 概念,辅以元数据,实现可以钻取、切片、切块、旋转等灵活、系统、直观的数据展现。这种思想可以被以上三种方向借用,像GA就带有这种风格,数据仓库也经 常用到此种模式。

但由于互联网的数据量较大、维度众多,会导致数据爆炸。因此一般会灵活变通,综合使用。严格使用OLAP的一般都是些制造业、零售业等相对传统的行业,作为BI的延伸,对公司决策提供有力支撑。

———————————————————————————

由于此问题回答的比较早,当时就只考虑了互联网的定义,现在看来很片面。感谢@吕高明 的补充:

banner
看过还想看
可能还想看
热点推荐

永洪科技
致力于打造全球领先的数据技术厂商

申请试用
Copyright © 2012-2024开发者:北京永洪商智科技有限公司版本:V10.2
京ICP备12050607号-1京公网安备110110802011451号 隐私政策应用权限