正在生成
详细信息:
检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
开发实时处理单任务DLI Spark作业 前提条件 参见新建作业创建一个实时处理的单任务DLI Spark作业。 配置DLI Spark作业 表1 配置属性参数 参数 是否必选 说明 作业名称 是 输入DLI Spark作业名称。 作业名称只能包含英文字母、数字、下划线和中划线,且长度为1~64个字符。
为什么权限同步到DLI中,会提示权限不够? 权限同步到DLI的任务通过云服务委托(dlg_agency)完成,因此需要委托拥有IAM认证服务相关权限,具体所需权限如表1所示。 表1 待授予权限 权限名称 配置目的 是否必选 授权项/系统权限(二者选其一配置即可) IAM权限 系统
"1194963842254491648", "directory_path" : "test_czh_dir", "description" : "", "from_public" : false, "create_by" : "ei_dayu_y00321344_01"
"c131886aec...", "name": "IAMUser", "description": "IAM User Description", "areacode": "", "phone": "",
CREATED_BY 按照创建人排序 UPDATED_AT 按照更新时间排序 UPDATED_BY 按照更新人排序 NAME 按照数据密级名称排序 DESCRIPTION 按照数据密级描述信息排序 desc 否 Boolean 排序规则。 请求参数 表3 请求Header参数 参数 是否必选 参数类型
表7 CatalogVO 参数 参数类型 描述 name_ch String 中文名称。 name_en String 英文名称。 description String 描述信息。 qualified_name String 扩展名。 guid String guid,自动生成。 code
5c57c82882", "name" : "app_test_001", "description" : "This is the app's description.", "app_key" : "fbbf9462bb434cb4a13ee7d2bb70c418"
sql_info String 定义关系。 abnormal_table_template String 异常表模板。 result_description String 结果说明。 create_time Long 创建时间,13位时间戳(精确到毫秒)。 creator String
String API名称。 description String API描述。 approval_time Long 审核时间。 manager String API 审核人名称。 deadline Long 使用截止时间。 relationship_type String 绑定关系。
规则组名称。 rules Array of DataClassificationRuleQueryDTO objects 规则实体。 description String 规则组描述。 created_by String 规则组创建人。 created_at Long 规则组创建时间。
否 String 排序字段, createdAt, createdBy, updatedAt, updatedBy, name, description 请求参数 表3 请求Header参数 参数 是否必选 参数类型 描述 workspace 是 String 工作空间ID,获取方法请参见实例ID和工作空间ID。
自定义字段,附加字段会成为一个新的字段加入到Hudi表的建表中。 表1 附加字段值支持情况 类型 示例 常量 - 内置变量 源端host ip地址:source.host 源端schema名称:mgr.source.schema 源端table名称:mgr.source.table
secrecy_level_name String 数据密级名称。 secrecy_level_number Integer 数据密级等级。 description String 数据密级描述。 created_by String 创建者。 created_at Long 创建时间。 updated_by
"BBBBAAAAUAAAAAAAAAAHAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAACAAAAAAAAAAAAAAABAAAABytUyVSWMg67IP2tk6fF1X6jUYS8nlmVbRODgL7C+mmRAQAAAQAAAAAAAAAQpuhN7t03SdfK1H/oX806zra
great security risks. It is recommended that the AK and SK be stored in ciphertext in configuration files or environment variables and decrypted
great security risks. It is recommended that the AK and SK be stored in ciphertext in configuration files or environment variables and decrypted
0dc1a7b88-workspace-9ce2cfd08fda4f3b95faa5ba65fa5ec3", "description" : null, "owner" : "0833a573fe80d5401f6dc010a775569a",
步失败超过10次,则会终止调度。 由于联邦用户在只有用户组信息,因此联邦用户无法同步。 由于数据源只会同步自身租户的用户信息,因此对于通过IP连接等方式非当前租户的数据源集群无法同步。 当前用户同步仅支持MRS Hive和DWS数据源,DWS数据源必须进行用户同步,MRS数据源可
Array of ApiPublishDTO objects 发布信息列表(专享版)。 type String API类型。 枚举值: API_SPECIFIC_TYPE_CONFIGURATION: 配置类API API_SPECIFIC_TYPE_SCRIPT: 脚本类API
数据表ID,只读。 logic_tb_name String 逻辑实体名。 logic_tb_guid String 逻辑实体的guid,只读。 description String 描述。 status String 实体的发布状态,只读,创建和更新时无需填写。 枚举值: DRAFT: 草稿 PUBLISH_DEVELOPING: