检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
题信息在系统中是否已存在。 不更新：当主题信息已存在时，将直接跳过，不更新。 更新：当主题信息已存在时，更新已有的主题信息。 在导入主题信息时，只有创建或更新操作，不会删除已有的主题信息。 上传模板 选择所需导入的主题设计文件。 所需导入的主题设计文件，可以通过以下两种方式获得。
MySQL与MRS Hudi字段类型映射 Migration会根据源端的字段类型按默认规则转换成目的端字段类型，并以此完成自动建表和实时同步。 字段类型映射规则 当源端为MySQL，目的端为Hudi时，支持的字段类型请参见下表，以确保数据完整同步到目的端。 表1 MySQL >Hudi支持的字段类型
限。 该参数支持配置正则表达式，实现导出满足规则的所有数据库。 SCHEMA_E 表名 “使用SQL语句”选择“否”时，显示该参数，表示要抽取的表名。单击输入框后面的按钮可进入表的选择界面，用户也可以直接输入表名称。 如果选择界面没有待选择的表，请确认表是否已经创建，或者对应连接里的账号是否有元数据查询的权限。
CT权限。 否 抽取分片字段 “按表分区抽取”选择“否”时，显示该参数，表示抽取数据时使用该字段进行数据切分，CDM依据此字段将作业分割为多个任务并发执行。一般使用数据均匀分布的字段，例如以自然增长的序号字段作为分片字段。 单击输入框后面的按钮可进入字段选择界面，用户也可以直接输入抽取分片字段名。
MySQL到DWS实时同步中，DWS为什么需要对主键null值进行过滤？ 问题描述 MySQL到DWS链路 ，由于DWS的表是手动建立的，主键和MySQL不同。当DWS的主键字段在MySQL 中是非主键字段，如果该字段在MySQL中出现null值那么，写入到DWS中将会报错，报错信息如下：
存储模式：可以根据具体应用场景，建表的时候选择行存储还是列存储表。一般情况下，如果表的字段比较多（大宽表），查询中涉及到的列不多的情况下，适合列存储。如果表的字段个数比较少，查询大部分字段，那么选择行存储比较好。 扩大字符字段长度：当目的端和源端数据编码格式不一样时，自动建表的字符字段长度可能不够用
导入的码表在系统中是否已存在。支持以下选项： 不更新：当码表已存在时，将直接跳过，不更新。 更新：当码表已存在时，更新已有的码表信息。如果码表处于“已发布”状态，码表更新后，您需要重新发布码表，才能使更新后的表生效。 在导入码表时，只有创建或更新操作，不会删除已有的码表。 *上传模板
图8 新建字段 配置完成后，单击“确定”，完成事实表新建字段。 事实表字段关联数据标准 在数据架构控制台，选择“模型设计 > 维度建模”，进入维度建模页面。 单击“事实表”页签，进入事实表页面。 在事实表列表中，单击需要关联数据标准的事实表名称。 在事实表的详情页的表字段列表中，查找
标准设计 新建码表 新建数据标准 父主题： 数据架构
创建MySQL连接器 MySQL连接适用于第三方云MySQL服务，以及用户在本地数据中心或ECS上自建的MySQL。本教程为您介绍如何创建MySQL连接器。 前提条件 已获取连接MySQL数据库的IP地址、端口、数据库名称、用户名、密码，且该用户拥有MySQL数据库的读写权限。
高级属性里的可选参数一般情况下保持默认即可。 单击“下一步”进入字段映射界面，CDM会自动匹配源和目的字段，如图7所示。 如果字段映射顺序不匹配，可通过拖拽字段调整。 CDM的表达式已经预置常用字符串、日期、数值等类型的字段内容转换，详细请参见字段转换。 图7 表到文件的字段映射 单击“下一步”配置任务参数，一般情况下全部保持默认即可。
图3 维度表关联质量规则 单个字段关联质量规则 在数据架构控制台，选择“模型设计 > 维度建模”，进入维度建模页面。 单击“维度表”页签，进入维度表页面。 在维度表列表中，单击需要关联质量规则的维度表名称。 在维度表的详情页的表字段列表中，查找字段并单击，配置单个表字段关联质量规则。
PostgreSQL与DWS字段类型映射 Migration会根据源端的字段类型按默认规则转换成目的端字段类型，并以此完成自动建表和实时同步。 字段类型映射规则 当源端为PostgreSQL，目的端为DWS时，支持的字段类型请参见下表，以确保数据完整同步到目的端。 表1 PostgreSQL
Studio数据架构中已经存在，是否更新已有的流程。支持以下选项： 不更新：当流程已存在时，将直接跳过，不处理。 更新：当流程已存在时，更新已有的流程信息。 在导入流程时，只有创建或更新操作，不会删除已有的流程。 上传模板 选择所需导入的流程设计文件。 所需导入的流程设计文件，可以通过以下两种方式获得。
判断使用分区表还是非分区表。 根据表的使用场景一般将表分为事实表和维度表： 事实表通常整表数据规模较大，以新增数据为主，更新数据占比小，且更新数据大多落在近一段时间范围内（年或月或天），下游读取该表进行ETL计算时通常会使用时间范围进行裁剪（例如最近一天、一月、一年），这种表通常可以
审核通过后，系统会自动创建与维度相对应的维度表，维度表的名称和编码均与维度相同。在“维度建模”页面，选择“维度表”页签，可以查看建好的维度表。 在维度表列表中，在“同步状态”一列中可以查看维度表的同步状态。 图5 维度表的同步状态 如果同步状态均显示成功，则说明维度发布成功，维度表在数据库中创建成功。
单击“汇总表”页签，进入汇总表页面。 在汇总表列表中，单击需要关联质量规则的汇总表名称。 在汇总表的详情页的表字段列表中，单击，配置单个表字段关联质量规则。 图9 汇总表单个字段关联质量规则 配置完成后，单击“确定”，完成汇总表字段关联质量规则。 更新已有规则：若勾选此项，新添加的规则会覆盖旧规则。
指标设计 流程设计 指标定义 父主题： 数据指标
依次新建更多的流程或子流程。一般需要设计L1~L3三层流程。第一层标识为L1层，第二层标识为L2层，第三层标识为L3。流程设计最小三层，最大可支持七层。一般从L1顶层开始设计。 示例如下，L1表示运营，L2表示门店运营，L3表示进销存管理。 图4 流程设计示例 导出流程 您可以将数据指
Hive - 数据资产的数量规模有多大？ 本示例表在百级以内 最大可支持100w数据表的管理 元数据采集的调度频率是多少？ 本示例不涉及 支持按照小时、天、周为周期运行采集任务 元数据采集的重要指标包括什么？ 本示例不涉及 表名称、字段名称、责任人、描述信息、创建时间等 标签的使用场景是什么？
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
