数据集成服务

产品描述

数据集成服务提供在线设置ETL作业、转换任务的定时运行策略，监控任务的执行情况，查看任务执行日志的功能。保障多种数据格式、源头的数据经过清洗转换后及时有效地送达组织的数据仓库，强有力地支撑后续的数据开发、数据挖掘

针对人群

• 数据维护人员
• 数据开发人员
• 项目经理
• 产品经理
• 技术经理

业务架构图

架构描述：

• 根据业务需求开发作业任务、转换任务
• 上传转换任务、作业任务并设置定时调度策略
• 数据集成服务定时运行任务，从来源数据库抽取数据并导入数据仓库

产品优势

在线管理ETL任务

提供B/S模式的web界面，使有浏览器的地方即可管理、监控数据集成任务的需求成为并提供了统一管理ETL作业任务、转换的入口

在线调度ETL任务

提供在线设置任务定时运行的功能，降低了调度ETL任务的难度，是调度ETL任务的好帮手

日志级别

通过设置任务的日志级别(最小日志、行级日志、基本日志、详细日志、调试日志)，开发者和维护者可从日志中捕获有用信息，进行错误定位及任务优化

任务监控

通过列表呈现任务的运行状态、下次调度时间，让系统管理员一目了然地掌控集成任务

任务统计

从多种维度统计任务的运行情况，保障数据集成任务稳定、有效地运行，提高数据集成的质量

任务失败通知

利用平台提供的通知管理服务，用户可定制通过短信、邮件、钉钉、微信、腾讯短信，阿里云短信，阿里云电话，华为短信等渠道接收告警信息的功能

任务存储

利用平台提供的存储管理服务，用户可将任务上传到多个存储渠道进行备灾存储及享受到优质的上传、下载功能

功能列表

• 仪表盘：呈现作业、转换的运行信息。如总作业数、成功次数、失败次数等
• 定时策略：管理定时任务策略配置。用于系统自动扫描定时任务，按时、周期性的执行任务
• 任务分类：管理作业、转换的维度
• 作业管理：管理作业任务清单及执行的定时策略
• 转换管理：管理转换任务清单及执行的定时策略
• 作业日志：呈现作业任务的执行开始、结束时间、时长、运行结果及日志详情
• 转换日志：呈现转换任务的执行开始、结束时间、时长、运行结果及日志详情
• 作业监控：统计作业任务执行的成功次数、失败次数、运行状态、最近调度及完成时间、下次调度时间
• 转换监控：统计转换任务执行的成功次数、失败次数、运行状态、最近调度及完成时间、下次调度时间

其它

• 无