学习数据分析需要掌握哪些技能

商业智能BI，数据仓库DW，数据挖掘DM

商业智能：百货商店利用数据预测用户购物行为属于商业智能，相比于数据仓库、数据挖掘，它是一个更大的概念。商业智能可以说是基于数据仓库，经过数据挖掘后，得到了商业价值的过程。所以说数据仓库是个近况，数据挖掘是炼金术，而商业报告则是黄金

数据仓库：百货商店积累的顾客的消费行为行管会存储在数据仓库中，他可以说是BI这个房子的第几，搭建好DW这个第几只有，才能进行分析实用，最后产生价值。

数据挖掘：在商业智能中经常会使用到数据挖掘技术。数据挖掘的核心包括分类、聚类、预测、关联分析等任务，通过这些炼金术，我们可以从数据仓库中得到宝藏，如商业报告

数据挖掘的四大任务：

1.分类
通过训练集得到一个分类模型，然后用这个模型可以对其他数据进行分类。

2.聚类
聚类就是讲数据自动聚成几个类别，聚到一起的相似度达，不在一起的差异性大，往往使用聚类来做数据划分。

3.预测
通过当前的历史数据来预测未来趋势，帮助我们更好的识别机遇和风险。

4.关联分析

发现数据汇总关联规则

当得到数据之后，我们要对数据进行预处理，处理步骤分为：

1.数据清洗

主要是为了去除重复数据，去噪声以及填充缺失值。

2.数据集成
将多个数据源中的数据存放在一个统一的数据存储中

3.数据变换
将数据转换成适合数据挖掘的 形式，比如通过归一化将属性数据按照比例缩放，这样就可以将数值落在一个特定的区间内，比如0~1.