检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
储数据的高效迁移。 约束与限制 关于文件存储迁移的约束与限制请查看存储迁移的约束与限制有哪些？ 风险提示 在创建工作流时，对于源端和目的端的同名对象，我们提供了三种覆盖策略：不覆盖、直接覆盖和条件覆盖。选择“不覆盖”策略进行数据迁移时，如果迁移任务因错误中断后重启或从暂停状态恢复
I调用费用和存储费用。 过滤配置 通过黑、白名单以及时间段过滤迁移文件。过滤策略详细介绍请参见过滤策略说明。 CDN迁移支持 当默认域名不能满足您的迁移需求，比如您需要一个自定义域名以便使用CDN降低源端出口下载流量的费用，可以勾选此选项。在域名输入框中输入自定义域名，并选择传输
Kafka个数 用于规格评估 bigdataNum 大数据集群个数 用于规格评估 pubDomainNum 公网域名数量 用于规格评估 vpcDomainNum VPC域名数量 用于规格评估 routeTableNum 路由表个数 用于规格评估 vpnNum VPN网关个数 用于规格评估
自定义参数说明 在目的端配置中，支持配置的自定义参数及说明请参见表1和conf参数说明。 表1 支持的自定义参数说明 参数名称 取值范围 说明 是否必填 spark.dli.metaAccess.enable - 填写true。 是 spark.dli.job.agency.name
Hive校验结果中的源端数据和目的端数据显示为“0”或“-1” 问题描述 对Hive进行大数据校验，校验任务执行成功，查看校验结果，发现部分字段的“源端数据”和“目的端数据”显示为“0”或“-1”。 问题分析 出现该问题可能是因为数值超出了Hive支持的数值范围。 在数据处理中，
自定义参数说明 在目的端配置中，支持配置的自定义参数及说明请参见表1和conf参数说明。 表1 支持的自定义参数说明 参数名称 取值范围 说明 是否必填 spark.dli.metaAccess.enable - 填写true。 是 spark.dli.job.agency.name
//hw-test/documents/example_table，除桶名外，根目录和表目录必须和源端一致。 填写示例： 源端：oss://oss-cn-hangzhou.aliyuncs.com/ali-test/documents/example_table 目的端：obs:
//hw-test/documents/example_table，除桶名外，根目录和表目录必须和源端一致。 填写示例： 源端：oss://oss-cn-hangzhou.aliyuncs.com/ali-test/documents/example_table 目的端：obs:
、最低存储时间、最低存储单元、数据可靠性、数据可用性等。根据以上依据，华为云OBS提供了以下四种存储类型： 标准存储 访问时延低和吞吐量高，因而适用于有大量热点文件（平均一个月多次）或小文件（小于1MB），且需要频繁访问数据的业务场景，例如：大数据、移动应用、热点视频、社交图片等场景。
工作流配额限制说明 为确保资源的合理分配和系统的稳定运行，在创建工作流时，设定了以下配额限制。请在创建工作流前了解这些限制，以避免因超出配额而导致创建失败。 日创建上限：在同一项目下，每天允许创建的迁移工作流数量上限为50个。 运行中工作流资源总量限制：同一用户同时进行迁移的主机
工作流配额限制说明 为确保资源的合理分配和系统的稳定运行，在创建工作流时，设定了以下配额限制。请在创建工作流前了解这些限制，以避免因超出配额而导致创建失败。 日创建上限：在同一项目下，每天允许创建的迁移工作流数量上限为50个。 运行中工作流资源总量限制：同一用户同时进行迁移的主机
为什么MgC迁移进度和SMS迁移进度显示不一致？ MgC主机工作流的迁移进度和SMS任务的迁移进度不一致是因为两者的步骤划分和计算进度的方式不同。SMS任务的迁移总进度是根据具体的任务阶段来划分的，而MgC主机工作流则是通过一个更简单的计算方法来估算进度。 SMS迁移任务总进度划分
信息同步至迁移中心。仅Delta Lake（有元数据）支持创建数据湖元数据同步任务。 Delta Lake（无元数据）只能通过手动添加、导入模板等方式添加元数据库表信息，方法请参见查看元数据。 前提条件 已创建Delta Lake（有元数据）元数据连接。 操作步骤 登录迁移中心管理控制台。
信息同步至迁移中心。仅Delta Lake（有元数据）支持创建数据湖元数据同步任务。 Delta Lake（无元数据）只能通过手动添加、导入模板等方式添加元数据库表信息，方法请参见查看元数据。 前提条件 已创建Delta Lake（有元数据）元数据连接。 操作步骤 登录迁移中心管
2024/06/06 14:50（现在）的增量数据。 如果勾选“指定日期”，将只迁移指定日期内的增量数据。 分区筛选方式 根据数据的分区属性来选择和检索数据。默认为更新时间。 更新时间：筛选出最近或在特定时间段内有更新的数据。 创建时间：筛选出在特定时间窗口内创建的数据。 MaxCompute参数（可选）
格式为“{MC项目名},{表名}”，其中MC项目名代表MaxCompute项目名称，表名代表具体的表名称。 须知： 每行的“MC项目名”和“表名”之间使用英文逗号隔开，不要使用空格或其他分隔符。 每添加完一个表的信息后，使用回车键换行。 完成所有表信息的添加后，保存CSV文件的更改。
格式为“{MC项目名},{表名}”，其中MC项目名代表MaxCompute项目名称，表名代表具体的表名称。 须知： 每行的“MC项目名”和“表名”之间使用英文逗号隔开，不要使用空格或其他分隔符。 每添加完一个表的信息后，使用回车键换行。 完成所有表信息的添加后，保存CSV文件的更改。
2024/06/06 14:50（现在）的增量数据。 如果勾选“指定日期”，将只迁移指定日期内的增量数据。 分区筛选方式 根据数据的分区属性来选择和检索数据。默认为更新时间。 更新时间：筛选出最近或在特定时间段内有更新的数据。 创建时间：筛选出在特定时间窗口内创建的数据。 MaxCompute参数（可选）
{端口}。 如果IP和端口均能连通，请执行步骤3.。 如果IP或端口不通，请检查源端主机安全组入方向规则中，协议端口号为TCP：22和ICMP：全部的源地址是否配置为安装MgC Agent主机的公网IP。确认安全组规则配置无误后，重新进行迁移准备度检查。 检查源端是否有防火墙、杀毒软件
支持创建元数据同步任务的连接类型如下： Hive Metastore连接 Doris连接 HBase连接 ClickHouse连接 Hudi（有元数据）连接 Hudi（无元数据）连接 MaxCompute连接 阿里云云数据库ClickHouse连接 您还可以通过手动添加、导入模板等方
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
