检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
访问时延低和吞吐量高,因而适用于有大量热点文件(平均一个月多次)或小文件(小于1MB),且需要频繁访问数据的业务场景,例如:大数据、移动应用、热点视频、社交图片等场景。 低频访问存储 适用于不频繁访问(平均一年少于12次)但在需要时也要求快速访问数据的业务场景,例如:文件同步/共享、企业备份等场景。 归档存储
选择绑定的目的端必须关机,如果需要绑定的目的端处于开机状态,请关机后再绑定。 迁移工作流将使用所绑定的目的端作为迁移的目的端,迁移过程中该目的端主机会被格式化,然后将源端数据迁移到该主机。 如果后续主机迁移工作流是公网迁移,所绑定目的端主机需要能访问公网。 选择绑定的目的端主机所在区域需要与源端主机关联的应用处于同一区域。
选择“否”,工作流在执行增量备份时,依旧保持开机状态。 创建系统盘镜像 选择“是”,将基于源端系统盘创建系统盘镜像,便于后续目的端重装系统。 选择“否”,不创建系统盘镜像。 高级设置 自动删除镜像 选择开启,业务割接后自动删除迁移过程中产生的备份、快照及镜像文件。 保持主网卡IP不变 选择开启时,将目的
选择至少包含:Blob。 允许的资源类型 选择至少包含:容器和对象。 允许的权限 选择至少包含:读取和列表,如果要迁移归档类对象权限则需要再勾选:写入。 开始和到期日期/时间 需要确保在迁移任务过程中,连接字符串不会失效。 单击“生成SAS和连接字符串”,即可显示连接字符串和SAS令牌、Blob服务SAS
绑定专属主机 绑定专属主机的作用: 在购买资源时,系统会自动将主机购买在您绑定的专属主机上。 完成规格评估后,直接创建主机迁移工作流时,系统会在创建目的端主机的那一步自动将主机购买在您绑定的专属主机上。 在资源配置明细区域,选择主机页签,勾选需要绑定同一专属主机的主机。 单击列表上方的“专属主机配置
内存资源。在迁移任务量大时,这可能会对源端的业务运行造成影响。 端口占用:MgC Agent会占用源端主机上的一些端口,也可能会对源端业务产生影响。 安装完成并注册用户后,将MgC Agent与迁移中心进行连接,方法请参考连接迁移中心。 连接成功后,需要在MgC Agent上添加
绑定专属主机 绑定专属主机的作用: 在购买资源时,系统会自动将主机购买在您绑定的专属主机上。 完成规格评估后,直接创建主机迁移工作流时,系统会在创建目的端主机的那一步自动将主机购买在您绑定的专属主机上。 在资源配置明细区域,选择主机页签,勾选需要绑定同一专属主机的主机。 单击列表上方的“专属主机配置
条件等。 如果需要同步的是阿里云 EMR环境中的元数据,请添加如下参数: 参数名:conf 参数值:spark.sql.catalogImplementation=hive 如果源端是阿里云 EMR Delta 2.2版本并且是通过Delta 2.3版本依赖访问时,请添加如下参数:
当主机工作流进行到“全量复制”和“增量同步”步骤时,如图3所示,单击资源的任务详情,可以直接跳转到SMS控制台的对应迁移任务详情页面,查看源端服务器详情、目的端配置信息、迁移状态以及错误信息提示等,如图4所示。 图3 主机迁移阶段 图4 SMS迁移任务详情 保留SMS迁移任务 如果需要在主机工作流迁移完成后
根据表1,选择步骤类型,为步骤自定义名称和说明,单击“确认”按钮,添加步骤完成。 表1 步骤类型说明 步骤类型 说明 卡点 迁移到该步骤时,需要手动确认。 返回迁移阶段,查看添加的步骤。 只有自行添加的步骤,可以进行修改、删除操作,模板中的步骤无法进行修改和删除。 父主题: 迁移工作流
根据表1,选择步骤类型,为步骤自定义名称和说明,单击“确认”按钮,添加步骤完成。 表1 步骤类型说明 步骤类型 说明 卡点 迁移到该步骤时,需要手动确认。 返回迁移阶段,查看添加的步骤。 只有自行添加的步骤,可以进行修改、删除操作,模板中的步骤无法进行修改和删除。 父主题: 迁移工作流
执行如下命令,启动MgC Agent。 ./start.sh 当出现如下图所示提示时,表示MgC Agent已经启动。 执行如下命令,查看MgC Agent进程。 ps -ef |grep edge 当出现如下图所示提示时,表示MgC Agent进程已经启动。 父主题: MgC Agent(原Edge)安装完成后,无法启动
条件等。 如果需要同步的是阿里云 EMR环境中的元数据,请添加如下参数: 参数名:conf 参数值:spark.sql.catalogImplementation=hive 如果源端是阿里云 EMR Delta 2.2版本并且是通过Delta 2.3版本依赖访问时,请添加如下参数:
Agent(原Edge)添加凭证的用户,单击操作列“更多>下载认证凭据”,可以下载凭证文件中的krb5.conf和user.keytab文件。 在MgC Agent添加凭证时,填写的用户名要与此处下载的凭证对应。 在页面上方菜单栏选择“集群>Hive”,进入Hive概览页,单击右上角“更多>下载客户端”,弹出下载客户端窗口。
文件类型 采集须知 DataArts作业 需要提前导出DataArts作业到华为云OBS桶,并将桶的读写权限委托给迁移中心。 SQL作业 需要提前导出SQL作业,并上传到华为云OBS桶,再将桶的读写权限委托给迁移中心。 血缘模板 需要下载血缘模板,并填写相应数据。 父主题: 血缘采集
前提条件 已创建统计任务并执行校验。 使用须知 当执行求和操作(如sum或allsum)时,如果结果值的位数超过了Double类型的有效位数,会导致精度丢失。并且在处理非常大的数值时,由于浮点数的精度限制,可能会导致实际存在的差异因为超出了Double类型能表示的有效位数而无
前提条件 已创建统计任务并执行校验。 使用须知 当执行求和操作(如sum或allsum)时,如果结果值的位数超过了Double类型的有效位数,会导致精度丢失。并且在处理非常大的数值时,由于浮点数的精度限制,可能会导致实际存在的差异因为超出了Double类型能表示的有效位数而无
文件类型 采集须知 DataArts作业 需要提前导出DataArts作业到华为云OBS桶,并将桶的读写权限委托给迁移中心。 SQL作业 需要提前导出SQL作业,并上传到华为云OBS桶,再将桶的读写权限委托给迁移中心。 血缘模板 需要下载血缘模板,并填写相应数据。 父主题: 血缘采集
执行如下命令,启动MgC Agent。 ./start.sh 当出现如下图所示提示时,表示MgC Agent已经启动。 执行如下命令,查看MgC Agent进程。 ps -ef |grep edge 当出现如下图所示提示时,表示MgC Agent进程已经启动。 父主题: 常见问题
迁移集群包含的关键指标和说明参见下表。 指标 作用 说明 CPU使用率 监控CPU使用状态 迁移小文件时,该指标比较重要,建议CPU使用率接近但不超过90%。 外网络流入、流出速率 观察网络流量流入、流出速率变化情况 迁移大文件时,该指标比较重要,建议速率能达到2 Gbit/s至3 Gbit/s。 以上指标的查看方法如下: