检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
spark.sql.files.maxRecordsPerFile 0 要写入单个文件的最大记录数。如果该值为零或为负，则没有限制。 spark.sql.autoBroadcastJoinThreshold 209715200 配置执行连接时显示所有工作节点的表的最大字节大小。通过将此值设置为“-1”，可以禁用显示。
spark.sql.files.maxRecordsPerFile 0 要写入单个文件的最大记录数。如果该值为零或为负，则没有限制。 spark.sql.autoBroadcastJoinThreshold 209715200 配置执行连接时显示所有工作节点的表的最大字节大小。通过将此值设置为“-1”，可以禁用显示。
int对照表。 单击“确定”，创建增强型跨源连接。创建完成后，增强型跨源连接的连接状态显示“已激活”，代表该连接创建成功。 添加并配置路由 添加路由 为创建的DLI增强型跨源连接添加两条路由，方法请参考添加路由。路由IP与创建跨源连接时，配置的主机信息IP保持一致。 配置路由 登录虚拟私有云管理控制台。
证，凭证名称为用户自定义，单击“确认”。 如果未连接迁移中心，添加的主机凭证可以用于本地主机深度采集。 如果连接了迁移中心，系统会自动将添加的凭证同步至迁移中心。 导入凭证 从迁移中心控制台的应用管理页面，导出主机资源列表或数据库资源列表，格式为CSV文件。 图2 导出资源列表
需要开启WinRM远程访问，并与安装MgC Agent的主机建立连接，方法请参考Windows服务器WinRM服务配置与故障排查。 允许执行shell脚本。在源端主机打开PowerShell（以管理员身份），然后运行以下命令来查看当前的执行策略。 Get-ExecutionPolicy
列表中，选择与迁移中心连接成功的MgC Agent。 在进行大数据校验时，请确保MgC Agent一直处于在线并启用状态。 在功能入口区域，单击“迁移准备”，进入迁移准备页面。 选择“连接管理”，单击“创建连接”，右侧弹出新增连接窗口。 图3 创建连接 连接类型选择“Delta
用。 是 口令认证 SSL 命令矩阵 命令矩阵列出了MgC Agent包含的命令，以及命令所在绝对路径、功能、用法等信息。 表2 MgC Agent命令矩阵 命令所在节点 命令名 命令所在绝对路径 是否可独立调用 命令功能 命令用法 命令风险提示 命令类型 Edge accountPermission
实例”，查看任一FE实例的IP地址。 数据库端口 填写连接到源端Doris数据库的连接端口。 数据库连接端口为Doris FE的查询连接端口，可以通过登录Manager，单击“集群 > 服务 > Doris > 配置”，查询Doris服务的“query_port”参数获取。 数据库名 填写源端Doris数据库名称。
步骤二：采集阿里云ECS主机资源 前提条件 已完成准备工作。 已在源端环境中安装MgC Agent，并与迁移中心连接。 操作步骤 登录迁移中心管理控制台。在左侧导航栏的项目下拉列表中选择完成准备工作时创建的应用迁移项目。 单击左侧导航栏的“源端发现 > 资源采集”，进入资源采集页面。
在功能入口区域，单击“迁移准备”，进入迁移准备页面。 选择“连接管理”，单击“创建连接”，右侧弹出新增连接窗口。 图7 创建连接 连接类型选择“MRS执行机”，单击“下一步”，进入详细配置页面。 根据表4，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表4 MRS执行机参数配置说明 参数
期结束时间之前终止，则忽略该表。不配置则默认迁移所有表。 按库筛选 即按数据库进行筛选，在数据库参数框中输入待迁移的数据库名称。单击“添加数据库”，可以新增数据库，最多支持同时添加10个数据库。 如果数据库中有不需要迁移的表，可以下载CSV格式的“排除表”模板，参考b.~e.在模
oss:DescribeMetricData List 数据库 RDS rds:DescribeDBInstances Read rds:DescribeDBInstanceAttribute Read MongoDB rds:DescribeDBInstances Read rds:DescribeDBInstanceAttribute
手动添加 适用于采集本地主机和暂不支持公网、内网采集的云平台主机。 前提条件 已在源端内网环境安装MgC Agent，并与迁移中心连接。 已在MgC Agent上添加源端主机凭证。为确保采集过程具备充分的系统访问权限，主机凭证要求如下： Linux主机，请添加Root账号和密码作为采集凭证。
列表中，选择与迁移中心连接成功的MgC Agent。 在进行大数据校验时，请确保MgC Agent一直处于在线并启用状态。 在功能入口区域，单击“迁移准备”，进入迁移准备页面。 选择“连接管理”，单击“创建连接”，右侧弹出新增连接窗口。 图3 创建连接 连接类型选择“Delta
在功能入口区域，单击“迁移准备”，进入迁移准备页面。 选择“连接管理”，单击“创建连接”，右侧弹出新增连接窗口。 图7 创建连接 连接类型选择“数据湖探索 （DLI）”，单击“下一步”，进入详细配置页面。 根据DLI服务参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表4 DLI服务参数配置说明
Excel编辑并保存的模板文件无法被MgC识别。 DLI队列连接选择 元数据迁移和数据迁移需要使用不同的DLI队列连接，元数据迁移需要使用DLI SQL队列连接，数据迁移需要使用DLI 通用队列连接。配置错误的队列连接类型会导致迁移任务失败，因此在配置任务时，必须仔细检查并确保任务类型与队列类型相匹配。
确保执行脚本的Linux主机上安装了以下必要的工具和命令： SSH工具：用于建立与远程主机的安全连接。 sed工具：用于编辑和修改/etc/hosts文件内容。 setsid命令：用于在SSH连接中避免交互需求（通常用于避免密码输入时的交互）。 mktemp命令：用于创建临时文件或目录。 执行权限和用户权限配置
在功能入口区域，单击“迁移准备”，进入迁移准备页面。 选择“连接管理”，单击“创建连接”，右侧弹出新增连接窗口。 图7 创建连接 连接类型选择“HBase”，单击“下一步”，进入详细配置页面。 根据表4，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表4 HBase服务参数配置说明 参数
的数据。 创建时间：筛选出在特定时间窗口内创建的数据。 按库筛选 即按数据库进行筛选，在数据库参数框中输入需要增量迁移的数据库名称。单击“添加数据库”，可以新增数据库，最多支持同时添加10个数据库。 如果数据库中有不需要迁移的表，可以下载CSV格式的“排除表”模板，参考b.~e.
移准备页面。 选择“连接管理”，单击“创建连接”，右侧弹出新增连接窗口。 图7 创建连接 连接类型选择“ClickHouse”，单击“下一步”，进入详细配置页面。 根据ClickHouse组件参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表4 ClickHouse组件参数配置说明
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
