使用功能
一站式数据运营平台
贯穿数据全流程的一站式治理运营平台,帮助企业构建完整的数据中台解决方案。
丰富的数据开发类型
支持多人在线协作开发,提供丰富的调度配置策略与海量的作业调度能力。
统一调度和运维
全面托管的调度,支持多种调度周期。
管理功能
数据集成
多种方式异构数据源高效接入,支持用户稳定高效地对海量数据进行移动。
数据架构
数据建模可视化、自动化、智能化。通过统一指标平台建设实现规范化指标体系。
数据服务
提升访问查询检索效率。为您提供快速将数据表生成数据API的能力。
数据治理中心数据开发使用指导
-
作业调度支持每月最后一天
-
补数据场景使用介绍
-
生成元数据
-
获取SQL节点的输出结果值
-
IF条件判断教程
-
For Each节点使用介绍
-
获取Rest Client节点返回值教程
-
开发一个Python脚本
-
开发一个Hive SQL作业
-
开发一个DWS SQL作业
-
开发一个DLI Spark作业
-
开发一个MRS Flink作业
本教程介绍如何在数据开发模块上进行MRS Flink作业开发。通过MRS Flink作业实现统计单词的个数。
本教程介绍如何在数据开发模块上进行MRS Flink作业开发。通过MRS Flink作业实现统计单词的个数。
-
开发一个MRS Spark Python作业
-
Env内嵌对象
-
Job内嵌对象
-
StringUtil内嵌对象
-
DateUtil内嵌对象
-
JSONUtil内嵌对象
-
Loop内嵌对象
-
OBSUtil内嵌对象
-
常用的EL表达式
-
简易变量集
简易变量集提供一系列自定义变量,自定义参数会根据任务调度的业务日期、计划时间等自动替换为具体的值,实现动态替换。
提供一系列自定义变量,自定义参数会根据任务调度的业务日期、计划时间等自动替换为具体的值,实现动态替换。
-
表达式使用示例
-
配置环境变量
配置作业参数时,当某参数隶属于多个作业,可将此参数提取出来作为环境变量,环境变量支持导入和导出。
配置作业参数时,当某参数隶属于多个作业,可将此参数提取出来作为环境变量,环境变量支持导入和导出。
-
配置调度身份
配置作业调度身份后,作业执行过程中,以配置的调度身份与其他服务交互。调度身份分为委托和IAM账户两大类。
配置作业调度身份后,作业执行过程中,以配置的调度身份与其他服务交互。调度身份分为委托和IAM账户两大类。
-
配置节点并发数
设置一个作业空间同一时间允许正在运行的作业的最大并发数。用户根据实际业务需要配置节点的最大并发数。
设置一个作业空间同一时间允许正在运行的作业的最大并发数。用户根据实际业务需要配置节点的最大并发数。
-
配置默认项
主要介绍默认项的配置。当前只有DAYU Administrator或Tenant Administrator权限的用户才有默认配置项的相关操作权限。
主要介绍默认项的配置。当前只有DAYU Administrator或Tenant Administrator权限的用户才有默认配置项的相关操作权限。