检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
事实表通常整表数据规模较大,以新增数据为主,更新数据占比小,且更新数据大多落在近一段时间范围内(年或月或天),下游读取该表进行ETL计算时通常会使用时间范围进行裁剪(例如最近一天、一月、一年),这种表通常可以通过数据的创建时间来做分区以保证最佳读写性能。 维度表数据量一般整表数据规模较小,以更新数据为主,新增
集群状态描述:Normal(正常)。 id String 集群ID。 isFrozen String 集群是否冻结:0:否,1:是。 updated String 集群更新时间,格式为ISO8601:YYYY-MM-DDThh:mm:ssZ。 status String 集群状态: 100:创建中。 200:正常。
String 创建者。 l1 String 主题域分组中文名,只读,创建和更新时无需填写。 l2 String 主题域中文名,只读,创建和更新时无需填写。 l3 String 业务对象中文名,只读,创建和更新时无需填写。 approval_time String 审核时间。 approver
String 创建者。 l1 String 主题域分组中文名,只读,创建和更新时无需填写。 l2 String 主题域中文名,只读,创建和更新时无需填写。 l3 String 业务对象中文名,只读,创建和更新时无需填写。 approval_time String 审核时间。 approver
各领域数据治理工作组:在各领域数据范围内进行数据治理的工作,依据数据治理委员会制定的数据治理方法和总则,制定本领域数据治理目标和工作计划,负责领域数据资产的看护,维护更新相应数据标准和及相关元数据,设计本领域数据度量和规则,监控收集数据质量问题并持续改进提升,主动升级数据相关问题。最终完成领域内数据资产的看护,并支撑数据治理目标的达成。
删除数据连接 dataWarehouse deleteDataWarehouse 创建工作空间 workspace createWorkspaces 更新工作空间 workspace updateWorkspaces 删除工作空间 workspace deleteWorkspaces 冻结工作空间
SQL脚本可以查看右侧的数据表,单击表名前面的单选框,可以查看该数据的列名、字段类型和描述。 支持通过“责任人”和“更新时间”进行过滤查询,方便快速过滤出最近更新的脚本。 脚本开发支持细粒度权限管控,在数据安全模块对数据开发脚本目录权限管控策略进行配置。 脚本开发的使用流程如下:
String 创建者。 l1 String 主题域分组中文名,只读,创建和更新时无需填写。 l2 String 主题域中文名,只读,创建和更新时无需填写。 l3 String 业务对象中文名,只读,创建和更新时无需填写。 approval_time String 审核时间。 approver
图3 导入原子指标 下载原子指标导入模板,编辑完成后保存至本地。 选择是否更新已有数据。 如果系统中已有的编码和模板中的编码相同,系统则认为是数据重复。 不更新:当数据重复时,不会替换系统中原有的数据。 更新:当数据重复时 系统中的原有数据为草稿状态,则会覆盖生成新的草稿数据。 系
6000 40 测试创建数据连接 测试创建数据连接。 3000 20 查询单个数据连接信息 查询单个数据连接信息。 12000 60 更新数据连接信息 更新数据连接信息。 6000 40 删除数据连接 删除数据连接。 6000 40 购买实例 表3 购买实例 API 说明 API流量限制(次/min)
在详情页面,选择“日志信息”,在左侧日志列表中单击具体日志文件,即可实时查看作业的运行日志。 图1 日志信息1 图2 日志信息2 支持作业日志主题更换。 作业日志默认实时滚动更新,可在右上角去掉勾选“日志滚动”选项。 支持下载日志到本地,可单击右上角文件下载按钮进行下载。 父主题: 实时集成任务运维
String 排序字段 CREATED_AT 按照创建时间排序 CREATED_BY 按照创建人排序 UPDATED_AT 按照更新时间排序 UPDATED_BY 按照更新人排序 NAME 按照数据密级名称排序 DESCRIPTION 按照数据密级描述信息排序 desc 否 Boolean
SYNC_PARTIAL_FAIL 存在失败 DELETE_FAIL 删除失败 DELETING 删除中 UPDATING 更新中 DATA_UPDATED 数据存在更新 sync_msg String 策略同步信息。 sync_log String 同步运行日志, 格式为 字段同步信息+换行符。
作业最近一次运行实例运行结束时间,当jobType为BATCH时才有本字段。 lastUpdateTime 否 Long 作业最后一次更新时间。 lastUpdateUser 否 String 作业最后一次更新用户。 path 否 String 作业的路径。 singleNodeJobFlag 否 boolean
集群配置状态:In-Sync:配置已同步。Applying:配置中。Sync-Failure:配置失败。 updated String 集群更新时间,格式为 ISO8601:YYYY-MM-DDThh:mm:ssZ。 status String 集群状态: 100:创建中。 200:正常。
String 规则组创建人。 created_at Long 规则组创建时间。 updated_by String 规则组更新人。 updated_at Long 规则组更新时间。 project_id String 项目ID。 表4 DataClassificationRuleQueryDTO
Read:读权限 Write:写权限 Excute:执行权限 Hive Hive数据库、数据表、列的权限: Select:查询权限 Update:更新权限 Create:创建权限 Drop:drop操作权限 Alter:alter操作权限 All:所有执行权限 Temporary UDF
下个节点ID,没有则为尾节点。ID字符串。 id 是 String 创建时传空,更新时必填。ID字符串。 qualified_id 否 String 认证ID,自动生成。 create_by 否 String 创建人。 update_by 否 String 更新人。 bizmetric_num 否 Integer
创建时间。 update_time Long 更新时间。 is_owner Boolean 是否当前空间的API。 is_authorized Boolean 是否已被授权。 is_update_recently Boolean 是否最近更新(三天内更新过该API)。 is_release_recently
下个节点ID,没有则为尾节点。ID字符串。 id 是 String 创建时传空,更新时必填。ID字符串。 qualified_id 否 String 认证ID,自动生成。 create_by 否 String 创建人。 update_by 否 String 更新人。 bizmetric_num 否 Integer