检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据治理各模块域之间的关系 数据治理主要模块域之间的关系如下图所示: 图1 数据治理各模块之间的关系 数据标准为数据开发和设计工作提供核心参考,同时也通过数据开发实现数据标准化落地。数据标准为数据应用提供“一致的语言”;数据标准为主数据管理提供主数据定义的基准,数据标准也是数据质
array”。具体介绍请参考一般图数据格式。 说明: 只有单值类型支持“char array”数据类型,多值类型不支持该数据类型。 操作 删除:删除不需要的属性。 单击“确定”完成操作,当元数据创建完成后,元数据文件将展示在元数据管理页面。 在元数据管理页面,您可以查看元数据的存储路径,状态,修改时间,等信息。
开启数据库代理 功能介绍 为指定实例开启数据库代理。 该接口计划于2024-04-30下线。 调用接口前,您需要了解API 认证鉴权。 调试 您可以在API Explorer中调试该接口。 接口约束 如果您需要使用该功能,请联系客服提交开启数据库代理权限的申请。 该接口支持仅支持RDS
MySQL)”时,该选项可见。 数据库用户名 业务数据库用户名称。 数据库密码 业务数据库的数据库用户密码。 业务数据库的IP地址或域名、数据库用户名和密码,会被系统加密暂存,直至删除该迁移任务后自动清除。 图7 灾备数据库信息 表9 灾备数据库信息 参数 描述 数据库实例名称 默认为创建灾备任务时选择的GaussDB(for
复杂数据类型 Spark SQL支持复杂数据类型,如表1所示。 表1 复杂数据类型 数据类型 描述 使用格式 ARRAY 一组有序字段,使用指定的值构造ARRAY数组。可以为任意类型,要求所有字段的数据类型必须相同。 array(<value>,<value>[, ...]) 具体使用示例详见:ARRAY示例。
为一个逻辑卷,实际写入数据时会先往一个基本物理卷上写入,当存储空间占满时再往另一个基本物理卷写入。 条带化:有两块以上数据盘时才可支持选择条带化模式。创建逻辑卷时指定条带化,当实际写入数据时会将连续数据分成大小相同的块,然后依次存储在多个物理卷上,实现数据的并发读写从而提高读写性能。条带化模式的存储池不支持扩容。
出现字段超长,数据同步失败 执行创建OBS外表的SQL语句时,提示Access Denied GDS导入失败后,磁盘占用空间增大 GDS导入数据时,脚本执行报错:out of memory 使用GDS传输数据的过程中,报错:connection failure error 使用DataArts
什么是数据血缘关系? 大数据时代,数据爆发性增长,海量的、各种类型的数据在快速产生。这些庞大复杂的数据信息,通过联姻融合、转换变换、流转流通,又生成新的数据,汇聚成数据的海洋。 数据的产生、加工融合、流转流通,到最终消亡,数据之间自然会形成一种关系。我们借鉴人类社会中类似的一种关
初始化数据盘 场景及磁盘分区形式介绍 使用脚本初始化Windows数据盘 使用脚本初始化Linux数据盘 初始化Windows数据盘(Windows 2008) 初始化Windows数据盘(Windows 2019) 初始化Linux数据盘(fdisk) 初始化Linux数据盘(parted)
ERC721、ERC1155和ERC998是什么意思? ERC721、ERC1155和ERC998均为数字资产标准协议。 ERC721和ERC1155均支持铸造/流转,SDK里对两个协议的接口是通用的。 ERC998支持数字资产的组合和拆分,并支持铸造可组合资产。 父主题: 咨询类问题
初始化数据盘 初始化概述 初始化Linux数据盘(容量小于等于2TiB) 初始化Linux数据盘(容量大于2TiB) 初始化windows数据盘
数据目录如何可视化展示数据血缘? 数据血缘在数据目录中展示,首先要完成元数据采集任务,其次数据开发作业中要包含支持自动血缘解析的节点类型和场景,或者在作业节点中已自定义血缘关系的输入表和输出表。当存在运行成功的数据开发作业调度任务时,系统会生成作业中的血缘关系,并在数据目录中进行可视化展示。
数据集成 数据集成普通任务 数据集成组合任务
数据治理模块域 数据治理主要专注于如下模块域: 数据集成 数据集成用来完成数据入湖动作,不是简单的数据搬家,而是按照一定的方法论进行数据备份。数据入湖的前提条件是满足6项数据标准,包括:明确数据Owner、发布数据标准、定义数据密级、明确数据源、数据质量评估、元数据注册。此标准由
户可以使用“数据加载”工具,将数据从OBS空间迁移到数据服务MRS中,进而在“数据建模”和“数据处理”中对MRS中已标注数据进行数据处理,最后通过“运营中心>数据集发布”发布数据集。在“模型训练服务”中,可以订阅数据集进行模型训练。 图1 标注后的数据处理流程图 父主题: 时序数据标注
数据库迁移 RDS支持导入哪些数据库引擎的数据 为什么要采用mysqldump和pg_dump工具迁移 RDS for MySQL实例迁移中,大量binlog文件导致数据盘空间不足 使用mysqldump导出大表的注意事项 mysqldump的6大使用场景的导出命令
硬终端显示丢包率阈值A和B分别表示什么意思? A表示一般丢包率,缺省值为1%;B表示严重丢包率,缺省值为5%。 丢包率相关提示如下: 丢包率小于或等于阈值A,遥控器操作界面不显示丢包率图标。 阈值A<丢包率<阈值B,遥控器操作界面显示丢包率图标为黄色。 丢包率大于或等于阈值B,遥控器操作界面显示丢包率图标为红色。
恢复数据 使用云服务器备份恢复数据 使用云服务器备份创建镜像 使用云硬盘备份恢复数据 使用云硬盘备份创建新云硬盘 使用SFS Turbo备份创建新文件系统 使用云桌面备份恢复数据 使用文件备份恢复数据 使用混合云备份恢复数据
补数据监控 在数据开发模块控制台的左侧导航栏,选择“运维调度 > 补数据监控”,进入补数据的任务监控页面。 用户可以在图1的页面中,查看补数据的任务状态、业务日期、并行周期数、补数据作业名称、创建人、创建时间以及停止运行中的任务。系统支持按补数据名称、创建人、日期和状态进行筛选。
下的数据库、数据表和字段。 单击可以查看数据连接目录树下的数据库、数据表以及字段信息。DWS SQL、DLI SQL、MRS Hive SQL代理模式均支持查看目录树,其他数据连接均不支持。 如果您在使用数据开发前,已创建了数据连接和对应的数据库和数据表,则可跳过数据管理操作,直接进入脚本开发或作业开发。