当前位置:首页 > 大数据 > 正文

大数据分析基本流程包括哪些步骤

2、 1. 数据获取:大数据分析师工作的首要步骤是获取数据。 这一步骤涉及识别并访问存储企业数据的数据库或数据源。 掌握基础的SQL(结构化查询语言)知识对于读取和组织数据至关重要。 2. 数据理解:在获取数据之后,分析师需要对数据进行初步的理解和清洗。

3、 (一)问题识别 大数据分析的第一步是要清晰界定需要回答的问题。 对问题的界定有两个标准,一是清晰、二是符合现实。 (二)数据可行性论证 论证现有数据是否足够丰富、准确,以致可以为问题提供答案,是大数据分析的第二步,项目是否可行取决于这步的结论。

1、 3、数据处理:通过技术手段,对收集的数据进行提取、清洗、转化和计算,异常值处理、衍生字段、数据转换等具体步骤。 4、数据分析:这里主要有两个技术手段,统计分析和数据挖掘,找到相关的数据关系和规则,然后利用业务知识来解读分析结果。

4、 数据收集 数据收集是按照确定的数据分析内容,收集相关数据的过程,它为数据分析提供了素材和依据。 数据收集主要收集的是两种数据,一种指的是可直接获取的数据,另一种就是经过加工整理后得到的数据。 做好数据收集工作就是对于数据分析提供一个坚实的基础。