数据治理中心 DATAARTS STUDIO-数据开发概述:数据开发的主要功能

时间:2024-09-09 17:46:35

数据开发的主要功能

表1 数据开发的主要功能

支持的功能

说明

数据管理

脚本开发

  • 提供在线脚本编辑器,支持多人协作进行SQL、Shell、Python脚本在线代码开发和调测。
  • 支持使用变量和函数。

作业开发

  • 提供图形化设计器,支持拖拉拽方式快速构建数据处理工作流。
  • 预设数据集成、SQL、Shell等多种任务类型,通过任务间依赖完成复杂数据分析处理。
  • 支持导入和导出作业。

资源管理

支持统一管理在脚本开发和作业开发使用到的file、jar、archive类型的资源。

作业调度

支持单次调度、周期调度和事件驱动调度,周期调度支持分钟、小时、天、周、月多种调度周期。调度周期配置为小时,系统支持按间隔小时和离散小时配置调度周期。

运维监控

  • 支持对作业进行运行、暂停、恢复、终止等多种操作。
  • 支持查看作业和其内各任务节点的运行详情。
  • 支持配置多种方式报警,作业和任务发生错误时可及时通知相关人,保证业务正常运行。
support.huaweicloud.com/usermanual-dataartsstudio/dataartsstudio_01_0401.html