数据开发流程
数据开发的总体流程包括业务数据、数据集成、数据处理、数据存储和数据展现。其中,数据集成、数据处理、数据存储可以在青云大数据工作台完成。
数据开发的流程如下所示:
- 业务数据:用户的业务系统每天会产生大量结构化的数据,存储在业务系统所对应的数据库中,比如 MySQL 中。
- 数据集成:用户需要将业务系统的数据添加至大数据工作台中,才可对业务数据进行分析处理。大数据工作台提供的数据源管理工,可以支持多种数据源类型。
- 数据处理:大数据工作台通过创建并开发作业,可以对业务数据进行加工处理。
- 数据存储:分析与处理后的结果数据,可以导出至目标存储,以供业务人员使用。
- 数据展现:可以通过报表等展现方式,将结果数据进行展示与分享。