# 数据开发使用场景

通过数据上报服务、数据集成服务和实时数据入湖,收集各种预处理的数据到数据仓库后,数据开发工程师根据项目的业务需求设计工作流。经过一序列的数据加工,将数据写入项目预设的轻度汇总层、临时中间层、高度汇总层数据模型。最终输出满足业务增长的数据集清单、数据指标清单

# 本内容你将获得

  • 架构设计
  • 使用场景
  • 功能列表

# 数据开发服务架构

架构描述:

  • 数据开发工程师创建工作流,设计工作流任务
  • 系统维护员为工作流设置定时调度策略
  • 系统维护员监控工作流执行情况

# 使用场景

  • 连接mysql数据源,按照项目业务需求,开发工作流的有向无环图
  • 连接hive数据源,按照项目业务需求,开发工作流的有向无环图

# 功能列表

序号 功能 描述 状态 备注
1 仪表盘 流程定义统计、任务状态统计、流程状态统计 完成
2 数据源中心 数据源的管理界面 完成
3 项目管理 数据开发服务按项目维度组织管理整个项目的工作流、工作流实例、任务实例 完成
4 项目管理-工作流定义 界面表格、创建工作流、编辑工作流、运行、定时、定时管理、复制删除工作流 完成
5 项目管理-工作流实例 界面表格、编辑、重跑、恢复失败、停止、暂定、删除、甘特图 完成
6 项目管理-任务实例 界面表格、强制成功、查看日志 完成

# 其它