检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
该连接。 数据连接中的数据湖认证信息如果发生变化(如密码过期)时,此连接会失效。建议您将数据湖认证信息设定为永久有效,避免由于连接失败导致业务受损。 当前DataArts Studio不支持对接“Kerberos加密类型”为“aes256-sha2,aes128-sha2”的MR
{ "id" : "1141755876370214912", "level" : 6, "name_ch" : "业务对象", "name_en" : "Business Object" } ] } 响应示例 状态码: 200 Success,
tenant_id String 项目ID。 group_id String 组ID,ID字符串。 biz_name String 业务名。 biz_id String 业务ID,ID字符串。 operation_status String 操作结果类型枚举。RUNNING(运行中)、SUCC
gent时,通过这些数据连接提交SQL脚本、Shell脚本、Python脚本等任务的同时运行上限为200,超出的任务将排队等待。建议您按照业务量情况规划多个Agent分担压力。 在调度Shell、Python脚本时,Agent会访问ECS主机,如果Shell、Python脚本的调
String 版本标记,只读。 description String 版本描述。 biz_id String 业务对象ID,ID字符串。 biz_type String 业务实体类型。 枚举值: AGGREGATION_LOGIC_TABLE: 汇总表 ATOMIC_INDEX: 原子指标
运营过程中核心数据的存在和一致性。 数据质量管理是数据应用和运营过程中数据准确性、一致性、完整性、及时性、唯一性、有效性的重要保障,是数据业务价值创造的重要前提。 数据目录管理模块完成元数据的采集和注册,为数据应用和数据消费提供了解数据的窗口。 数据服务管控实现在数据服务开发过程
tenant_id String 项目ID。 group_id String 组ID,ID字符串。 biz_name String 业务名。 biz_id String 业务ID,ID字符串。 operation_status String 操作结果类型枚举。RUNNING(运行中)、SUCC
理。 为dlg_agency委托授权 为dlg_agency委托授权时,应按照您的业务场景,从表1中选择所需的授权项或系统权限进行授权,其中授权项或系统权限二者选其一配置。 本例以MRS权限管理业务场景为例进行说明,则需要授予的权限为IAM权限、MRS/DWS数据连接Agent权
tenant_id String 项目ID。 group_id String 组ID,ID字符串。 biz_name String 业务名。 biz_id String 业务ID,ID字符串。 operation_status String 操作结果类型枚举。RUNNING(运行中)、SUCC
ClickHouse数据源所在集群的Manager页面,选择“集群 > 服务 > ClickHouse > 实例”,查看ClickHouseServer所在的“业务IP”。 192.168.0.1 端口 配置为要连接的数据库的端口。 说明: 如果使用Server节点,开启“SSL加密”,配置默认端口。登录MRS
周期性数据集成。DataArts Studio基础包中已经包含一个数据集成CDM集群,由于规格限制,仅用于测试、试用等非正式业务场景。如果您需要创建用于业务场景的CDM集群,则可通过购买按需计费的批量数据迁移增量包来进行创建。 按需计费 套餐包(按需资源包) 批量数据迁移增量包支持按需计费和套餐包计费两种计费方式。
er_DataService”,在“开发者”角色权限的基础上为其去除其他组件的增删改及操作权限,并赋予该数据运营工程师此角色,既能满足实际业务使用,也避免了权限过大的风险。 参考访问DataArts Studio实例控制台,以DAYU Administrator或Tenant A
业名称。 用户可以对已选择的作业名称进行删除并重新添加。 说明: 选择作业名称时,建议选择业务流程最下游的节点任务,选择后,影响该节点数据产出的上游节点都将被纳入基线监控范围,不推荐将业务流程上所有的任务都添加到基线上。 优先级 设置基线的优先级,支持以下优先级: 1 2 3 4
strings 父类资产类型。 business_attributes 否 Object 业务属性,数据类型Map<String, Map<String, Object>>,key:业务关系类型,value:业务关系。 multi_attributes 否 Object 承担密级和标签的多值
通过EL表达式获取返回值 Rest Client算子可与EL表达式相配合,根据具体的场景选择不同的EL表达式来实现更丰富的用法。您可以参考本教程,根据您的实际业务需要,开发您自己的作业。EL表达式用法可参考EL表达式。 如图3所示,Rest Client调用了MRS服务查询集群列表的API,然后执行Kafka
通过EL表达式获取返回值 Rest Client算子可与EL表达式相配合,根据具体的场景选择不同的EL表达式来实现更丰富的用法。您可以参考本教程,根据您的实际业务需要,开发您自己的作业。EL表达式用法可参考EL表达式。 如图3所示,Rest Client调用了MRS服务查询集群列表的API,然后执行Kafka
strings 父类资产类型。 business_attributes Object 业务属性,数据类型Map<String, Map<String, Object>>,key:业务关系类型,value:业务关系。 multi_attributes Object 承担密级和标签的多值对象数据结构,数据结构Map<String
er_DataService”,在“开发者”角色权限的基础上为其去除其他组件的增删改及操作权限,并赋予该数据运营工程师此角色,既能满足实际业务使用,也避免了权限过大的风险。 参考访问DataArts Studio实例控制台,以 Administrator或Tenant Admin
对收到的通知消息进行确认,可以在指定的时间范围内选择何时进行处理。 2400 120 获取消息详情 获取消息详情。此功能仅用作信息详情展示,不用做业务处理,因此不展示编号等后台参数。 2400 120 授权管理接口 表5 授权管理接口 API 说明 API流量限制(次/10s) 用户流量限制(次/10s)
常是定时(例如每天、每周)执行,主要处理大量历史数据,用于批量分析和数据仓库。 实时处理:对源源不断产生的新数据进行实时处理和分析,以满足业务对数据的即时性需求。这种处理方式要求数据在产生后能够立即被处理,并给出相应的结果或触发相应的操作。 选择目录 选择作业所属的目录,默认为根目录。