数据分析的基本步骤

系统管理员 2024-02-05 15:47 34阅读 0赞

了解过[数据分析的概念][Link 1]之后，我们再来说下数据分析的常规步骤。

## 明确目标 ##

首先我们要确定一个目标，即我们要从数据中得到什么。比如我们要看某个指标A随时间的变化趋势，以期进行简单的预测。

![59e17ed0133e45f281d05d67b11a1ae7.png][]

## 数据收集 ##

当确定了目标之后，就有了取数的方向。比如我们要观察A随时间的变化，就要记录A的值。或者从已经记录了A的值的数据库、文件、日志等取数。

![135c0bd19a114cabaffaf8e66d5b8984.png][]

## 数据清洗和预处理 ##

有时候我们收集的数据并不是完全有效的，或者并不能为我们的服务。这个时候就需要把这部分数据剔除。或者有时候我们收集到的是文本数据，需要做一下归类，使用数字等符号来做替代，方便做数据的相关性分析，这个时候就需要对数据左小处理。

![8071b8cbf75948f5ba406fe1ddc08e35.png][]

## 探索性数据分析(EDA) ##

使用统计图表来多维度展示数据，更直观地去查看数据地特征。

![c0abe0f596ff46e7bb4d8131b90b6a75.png][]

## 数据分析和建模 ##

选择适当的数据分析方法和建模技术，来将得到地结论模型化。比如把折线图拟合成曲线。

![3f25ea23ec4d4debbe50214a22fed2c4.png][]

## 评估模型 ##

使用测试数据测试模型，评估模型准确性。

## 利用模型 ##

利用模型做一些数据预测，支撑我们目标之上地目标。

[Link 1]: https://blog.csdn.net/zcy_wxy/article/details/135006631
[59e17ed0133e45f281d05d67b11a1ae7.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/05/aceb55fec5ca43a194bcd482c58a774f.png
[135c0bd19a114cabaffaf8e66d5b8984.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/05/49b07478a4ca49ffb92bfbfd6c609c68.png
[8071b8cbf75948f5ba406fe1ddc08e35.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/05/50122a303d584fc399890c10e71326d7.png
[c0abe0f596ff46e7bb4d8131b90b6a75.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/05/1ce6da6258684f758e7f55cf0110e04a.png
[3f25ea23ec4d4debbe50214a22fed2c4.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/05/6aed8d261738451e9f292769c7c28037.png