检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数。该配置项会替换“sc_type”中对应的默认参数。 numExecutors 1-100 Spark应用Executor的个数。该配置项会替换“sc_type”中对应的默认参数。 executorMemory 1-16 G Spark应用的Executor内存，参数配置例如：2G
数。该配置项会替换“sc_type”中对应的默认参数。 numExecutors 1-100 Spark应用Executor的个数。该配置项会替换“sc_type”中对应的默认参数。 executorMemory 1-16 G Spark应用的Executor内存，参数配置例如：2G
建议：升级带宽或选择低峰时段进行迁移。 迁移集群规格：如果迁移集群的规格小于推荐规格（8U16G）可能会因处理能力不足，成为迁移速度的制约因素。 建议：提升集群规格配置或增加计算资源（如ECS实例）。 系统性能管理：在迁移期间，系统的性能资源（如CPU、内存）可能会被被其他任务占用，从而影响迁移速度。 建议：在迁移期
迁移大文件时，该指标比较重要，建议速率能达到2 Gbit/s至3 Gbit/s。 以上指标的查看方法如下： 在ECS管理控制台，单击集群对应ECS实例的名称，进入ECS详情页面。 选择“监控 > 基础监控”页签，查看CPU使用情况和网络流量的实时数据。 网络指标 网络包含的关键指标和说明参见下表。
”的服务，鼠标右键，单击“开始”，即可手动启动MgC Agent进程。 Linux版本 执行如下命令，进入MgC Agent安装目录中的scripts目录。 cd /opt/cloud/Edge/scripts/ 执行如下命令，启动MgC Agent。 ./start.sh 当出现如下图所示提示时，表示MgC
根据实际情况选择大数据云服务，单击“下一步”，进入详细配置页面。 根据对应的参数配置说明，配置云服务参数。 MaxCompute连接参数配置说明 阿里云云数据库ClickHouse连接参数配置说明 表1 MaxCompute连接参数配置说明 参数 配置说明 所属源 选择源端。 连接名称 默认创
根据实际情况选择大数据云服务，单击“下一步”，进入详细配置页面。 根据对应的参数配置说明，配置云服务参数。 DLI服务参数配置说明 CloudTable(ClickHouse)服务参数配置说明 CloudTable(HBase)服务参数配置说明 表1 DLI服务参数配置说明 参数 配置说明 所属源 选择目的端。
根据实际情况选择大数据云服务，单击“下一步”，进入详细配置页面。 根据对应的参数配置说明，配置云服务参数。 DLI服务参数配置说明 CloudTable(ClickHouse)服务参数配置说明 CloudTable(HBase)服务参数配置说明 表1 DLI服务参数配置说明 参数 配置说明 所属源 选择目的端。
SMS迁移任务总进度划分 SMS任务迁移总进度分为以下几个阶段： 配置完迁移任务：完成此阶段后，进度为21%。 数据迁移阶段：根据实际数据迁移的百分比增加，当数据迁移完成时，进度达到80%。 配置修改+卸载代理镜像完成：完成所有配置修改和卸载代理镜像后，进度达到100%。 MgC主机工作流进度计算
选择执行机的登录凭证。凭证的添加方法请参考添加资源凭证中的大数据-执行机。 执行机IP 填写连接执行机的IP地址。 执行机连接端口 填写连接执行机的端口，默认为22端口。 安装目录 填写MRS/CDH客户端的安装目录路径。即安装客户端时，“./install.sh” 所填写的地址。 SQL文件地址
选择在源端环境中安装的MgC Agent（原Edge）。 执行机凭证 选择执行机的登录凭证。凭证的添加方法请参考添加资源凭证中的大数据-执行机。 执行机IP 填写连接执行机的IP地址。 执行机连接端口 填写连接执行机的端口，默认为22端口。 安装目录 填写MRS/CDH客户端的安装目录路径。即安装客户端时，“
里云的ClickHouse版本为21.8.15.7，目的端华为云的ClickHouse版本为23.3.2.37，由于这两个版本在处理IPv4和IPv6字段类型以及相关函数计算结果上存在差异，因此无法进行字段校验。 在执行Hive数据的日级别增量、小时级增量以及指定日期的校验时，如
表1 MgC Agent通信矩阵 源设备 源IP 源端口 目的设备 目的IP 目的端口 （侦听） 协议 端口说明 侦听端口是否可更改 认证方式 加密方式 NA NA NA MgC Agent所在主机 MgC Agent所在主机IP 27080 HTTPS MgC Agent服务监听端口，该端口用于人机交互
在迁移方案设计页面的应用列表，单击操作列的“查看资源配置”，进入目的端配置表页面。 在资源配置明细区域，可以查看应用内各类型资源的评估推荐结果，其中目的端规格配置是根据源端规格配置和评估策略推荐的华为云对应规格配置，成本预估是华为云推荐规格所需费用。 查看主机性能数据 在资源配置明细的主机列表中，可以查看
选择存储迁移标准模板，单击“开始配置”按钮，进行工作流配置。 根据表1，配置基础信息参数。 表1 基础信息参数说明 参数 说明 名称 用户自定义。 区域 下拉菜单中选择目的端所在区域。 描述 用户自定义。 集群 选择创建的集群作为迁移集群。 根据表2、表3，配置源端、目的端信息。 表2 源端信息参数说明
根据实际情况选择大数据云服务，单击“下一步”，进入详细配置页面。 根据对应的参数配置说明，配置云服务参数。 MaxCompute连接参数配置说明 阿里云云数据库ClickHouse连接参数配置说明 表1 MaxCompute连接参数配置说明 参数 配置说明 所属源 选择源端。 连接名称 默认创
Agent安装路径}/logs/audit/downlink_command.txt文件中。 上报数据存储在{MgC Agent安装路径}/logs/audit/uplink_data.txt文件中。 周期性日志归档：系统会自动在每月初将audit.log文件压缩为zip包并存储到
迁移。 需要配置多个匹配规则时，用英文分号隔开。 白名单 白名单为空时，迁移所有文件。 白名单不为空时，仅对绝对路径命中白名单规则的文件进行迁移/一致性对比。 时间段 配置时间段，根据配置，迁移最后修改时间在配置时间段内的文件或者文件夹。 开始时间和结束时间可以配置为空，为空时表示不限制，时间可以精确到分钟。
Agent安装完成后，无法启动。 问题分析 出现该问题通常是因为安装MgC Agent的主机后台进程过多或可用CPU太小，导致MgC Agent在安装时，进程无法自动启动。 解决方法 请按照以下步骤，手动启动MgC Agent进程： 执行如下命令，进入MgC Agent安装目录中的scripts目录。
选择步骤6.在MgC Agent侧添加的目的端MRS执行机凭证。 执行机IP 填写连接执行机的IP地址。 执行机连接端口 填写连接执行机的端口，默认为22端口。 安装目录 填写MRS客户端的安装目录路径。即安装客户端时，“./install.sh” 所填写的地址。 SQL文件地址
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
