-
MySQL数据迁移到MRS Hive分区表 - 云数据迁移 CDM
- 使用本地API 使用数据库本地API加速(系统会尝试启用MySQL数据库的local_infile系统变量)。 是 使用Agent Agent功能待下线,无需配置。 - local_infile字符集 MySQL通过local_infile导入数据时,可配置编码格式。
-
什么是云数据迁移 - 云数据迁移 CDM
文件加密 在迁移文件到文件系统时,CDM支持对写入云端的文件进行加密。 MD5校验一致性 支持使用MD5校验,检查端到端文件的一致性,并输出校验结果。
-
配置DWS源端参数 - 云数据迁移 CDM
说明: 如果配置了时间宏变量,通过DataArts Studio数据开发调度CDM迁移作业时,系统会将时间宏变量替换为“数据开发作业计划启动时间-偏移量”,而不是“CDM作业实际启动时间-偏移量”。
-
关系数据库增量迁移 - 云数据迁移 CDM
如果配置了时间宏变量,通过DataArts Studio数据开发调度CDM迁移作业时,系统会将时间宏变量替换为“数据开发作业计划启动时间-偏移量”,而不是“CDM作业实际启动时间-偏移量”。
-
关系数据库增量迁移 - 云数据迁移 CDM
如果配置了时间宏变量,通过DataArts Studio数据开发调度CDM迁移作业时,系统会将时间宏变量替换为“数据开发作业计划启动时间-偏移量”,而不是“CDM作业实际启动时间-偏移量”。
-
目的端为OBS - 云数据迁移 CDM
toJobConfig.quoteChar 否 Boolean “toJobConfig.outputFormat”(文件格式)为“CSV_FILE”,才有该参数,用于将数据库的表迁移到文件系统的场景。
-
权限及授权项说明 - 云数据迁移 CDM
支持的授权项 策略包含系统策略和自定义策略,如果系统策略不满足授权要求,管理员可以创建自定义策略,并通过给用户组授予自定义策略来进行精细的访问控制。策略支持的操作与API相对应,授权项列表说明如下: 权限:允许或拒绝某项操作。 对应API接口:自定义策略实际调用的API接口。
-
创建集群 - 云数据迁移 CDM
单击“提交”,系统开始自动创建CDM集群,在“集群管理”界面可查看创建进度。 父主题: 管理集群
-
配置MRS ClickHouse目的端参数 - 云数据迁移 CDM
说明: 如果配置了时间宏变量,通过DataArts Studio数据开发调度CDM迁移作业时,系统会将时间宏变量替换为“数据开发作业计划启动时间-偏移量”,而不是“CDM作业实际启动时间-偏移量”。
-
配置MRS Hudi连接 - 云数据迁移 CDM
如果是并行文件系统,则可以只填写到目录级别。例如:“obs://bucket/dir”。 obs://bucket/dir/test.txt 属性配置 需要集成的表名,多个表名使用英文逗号“,”分开,请务必配置,不要有空格,默认无需配置。 - 父主题: 管理连接
-
支持的数据源(2.9.2.200) - 云数据迁移 CDM
数据接入服务(DIS) 搜索:云搜索服务(CSS) 消息系统不支持作为目的端。
-
支持的数据源(2.9.2.200) - 云数据迁移 CDM
数据接入服务(DIS) 搜索:云搜索服务(CSS) 消息系统不支持作为目的端。
-
支持的数据源(2.9.3.300) - 云数据迁移 CDM
文件系统不支持作为目的端。
-
源端为对象存储 - 云数据迁移 CDM
对该JSON节点下的数据进行解析,如果该节点对应的数据为JSON数组,那么系统会以同一模式从该数组中提取数据。多层嵌套的JSON节点以字符“.”分割,例如:“data.list”。
-
创建MRS Hive连接器 - 云数据迁移 CDM
从HDFS导出目录时,如果需要创建快照,这里配置的用户需要HDFS系统的管理员权限。 如果要创建MRS安全集群的数据连接,不能使用admin用户。因为admin用户是默认的管理页面用户,这个用户无法作为安全集群的认证用户来使用。
-
创建MRS Hive连接器 - 云数据迁移 CDM
从HDFS导出目录时,如果需要创建快照,这里配置的用户需要HDFS系统的管理员权限。 如果要创建MRS安全集群的数据连接,不能使用admin用户。因为admin用户是默认的管理页面用户,这个用户无法作为安全集群的认证用户来使用。
-
约束与限制 - 云数据迁移 CDM
约束与限制 CDM系统级限制和约束 DataArts Studio实例赠送的CDM集群,推荐作为DataArts Studio管理中心数据连接的Agent代理使用,不建议同时作为Agent代理和运行数据迁移作业使用。
-
支持的数据源(2.9.3.300) - 云数据迁移 CDM
文件系统不支持作为目的端。
-
区域和可用区 - 云数据迁移 CDM
一个Region中的多个AZ间通过高速光纤相连,以满足用户跨AZ构建高可用性系统的需求。 图1阐明了区域和可用区之间的关系。 图1 区域和可用区 目前,华为云已在全球多个地域开放云服务,您可以根据需求选择适合自己的区域和可用区。更多信息请参见华为云全球站点。 如何选择区域?
-
配置Redis连接 - 云数据迁移 CDM
从HDFS导出目录时,如果需要创建快照,这里配置的用户需要HDFS系统的管理员权限。 如果要创建MRS安全集群的数据连接,不能使用admin用户。因为admin用户是默认的管理页面用户,这个用户无法作为安全集群的认证用户来使用。