检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
负，则没有限制。 spark.sql.autoBroadcastJoinThreshold 209715200 配置执行连接时显示所有工作节点的表的最大字节大小。通过将此值设置为“-1”，可以禁用显示。 说明： 当前仅支持运行命令ANALYZE TABLE COMPUTE statistics
对象列表文件行长度不超过16KB，否则迁移失败。 对象列表文件行数不超过10000行。 并发子任务数 - 用户自定义。配置的数目不能超过可用迁移节点数x10。例如：可用的迁移节点数为2，则最大子任务数配置数目需要≤20。 同名覆盖方式 不覆盖 对于源端和目的端存在的同名文件，跳过源端文件，保留目的端文件。
Linux系统：通过SSH协议从Edge访问Linux主机，将Shell脚本传输至/root/rda目录并执行，以自动化采集系统信息。 网段扫描 权限要求：被扫描节点开放对应的远程访问端口（内网可访问或对Edge所在主机开放白名单）。默认情况下Windows开放3389端口，Linux开放22端口，也可以单独指定。
在创建Doris连接前，需要先获取Doris集群部署的服务器IP地址和端口。 在创建HBase连接前，需要先获取HBase集群中至少一个ZooKeeper节点的IP地址和连接端口。 前提条件 已在源端元数据来源的环境中部署迁移工具Edge。 操作步骤 登录迁移中心管理控制台。 在左侧导航栏选择“
解冻操作可能会产生一定的费用，由源端云厂商收取，计费规则请咨询源端云厂商。 并发子任务数 用户自定义。配置的数目不能超过可用迁移节点数x10。 例如：可用的迁移节点数为2，则最大子任务数配置数目需要≤20。 列表迁移文件 列表文件存放地址必须与目的端桶处于同一区域。 列表文件类型必须为
选择在Edge添加的源端HBase凭证。凭证的添加方式请参考添加资源凭证，类型选择“大数据-HBase”。 安全集群 选择是否部署在安全集群下。 Zookeeper节点IP 填写连接到源端Zookeeper的IP地址。通常是部署Zookeeper的服务器公网IP地址或内网IP地址。 Zookeepeer连接端口
凭证选择步骤4.在Edge侧所添加的源端Hive Metastore凭证。 Hive版本 选择源端Hive的实际版本。 MetaStore节点IP 填写连接MetaStore的IP地址。 MetaStore Thrift服务端口 填写连接MetaStore的端口，默认为9083。
自动查询账号在该区域下的项目。 区域 输入需要校验的数据（即目的端数据）所在区域的代码。例如：ap-southeast-1。可以参考终端节点获取不同区域的区域代码信息。 项目 输入需要校验的数据所在的项目ID。获取方法请参考获取项目的名称和ID。 队列名称 输入需要进行校验的D
大批量主机同时迁移时，可能出现的异常问题 大批量主机迁移时，会频繁调用API接口，API接口压力过大从而导致部分步骤报错，卡点后的步骤建议尽量分批次确定，或者重试即可。 大批量主机迁移时，可能会导致通信通道阻塞，无法正常显示工作流状态。 父主题： 主机迁移工作流
添加阶段/步骤 您可以在工作流标准模板的迁移阶段/步骤，添加卡点，对迁移阶段/步骤进行控制。 只有迁移阶段/步骤状态为等待中/暂停，才可以选择该阶段/步骤进行添加。迁移阶段/步骤处于运行中/完成状态时，无法添加。 如果上一阶段/步骤处于运行中/暂停/完成状态，该阶段/步骤只能选择添加后置阶段/步骤。
存储类型介绍 各云厂商的对象存储服务针对用户业务对存储性能、成本的不同诉求，将对象的存储级别进行了区分，区分的普遍依据是对象的访问频度、访问时延、最低存储时间、最低存储单元、数据可靠性、数据可用性等。根据以上依据，华为云OBS提供了以下四种存储类型： 标准存储 访问时延低和吞吐量
MgC主机工作流资源与SMS迁移服务器列表之间的映射关系 MgC主机资源列表与SMS迁移服务器列表之间的映射关系，如下图所示。 列表字段映射关系参见下表： MgC主机资源列表 SMS迁移服务器列表 字段类型 主机名 服务器名称 源端主机的hostname IP地址 源端IP 源端主机的IP
MongoDB采集器（app-discovery-mongodb） 采集MongoDB服务信息，获取客户端连接信息。参数配置说明参见表1。 表1 MongoDB采集器参数配置说明 参数 必选 配置说明 output_path 否 自定义采集结果（app-discovery-mongodb-xxx
查看并导出校验结果 当源端与目的端的统计任务都执行完成后，在校验结果页面可以查看并导出任务的执行结果。校验结果将按照任务开始执行的日期进行分批，如果单日多次执行校验任务，系统只会保留最后一次的校验结果，之前的执行结果会被后续的执行所覆盖。 前提条件 已创建统计任务并执行校验。 使用须知
大数据校验概述 迁移中心 MgC为多种大数据计算/存储引擎，如Hive、Hbase、Doris和MaxCompute等，提供了一致性校验方法。通过一致性校验，您可以更加放心地进行大数据迁移操作，确保数据的准确性和可靠性，从而避免了数据丢失或不一致的风险。 校验方式说明 全量校验：
准备工作 CSV文件准备 创建一个包含源端主机信息的CSV文件，确保文件能被访问，并且格式符合要求。格式如下： username,ip,port,password username：该字段表示登录源端主机时所使用的用户名。为了确保脚本具有足够的权限执行修改操作，通常应使用具有管理员权限的用户名，如root。
准备工作 配置PowerShell执行策略 检查执行策略，确保PowerShell允许运行脚本。打开PowerShell，输入以下命令检查当前执行策略： Get-ExecutionPolicy 以下是不同的返回结果说明： Restricted：不允许执行任何脚本。 AllSigned：只能运行由可信发布者签名的脚本。
创建主机迁移工作流 迁移中心 MgC内置了由最佳实践总结而来的主机迁移工作流标准模板，您可以根据实际迁移场景，在工作流中插入迁移阶段和步骤，支持一键式运行和实时监控迁移进展。 前提条件 已完成主机资源采集。 已将待迁移主机关联应用。 已完成待迁移主机的规格评估。 操作步骤 登录迁移中心管理控制台。
创建主机迁移工作流 本节介绍如何使用主机迁移标准模板创建主机迁移工作流。 建议单个工作流中包含的主机数量不超过100台。 同一用户同时进行迁移的主机数量上限为1000台，超出此数量的主机会在工作流第一步暂停并处于等待状态，直至有资源释放或主机完成迁移，等待中的主机将按照创建时间顺序依次自动执行工作流后续步骤。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
