检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在进行大数据数据迁移时,请确保MgC Agent一直处于在线并启用状态。 启用MgC Agent后,单击“创建连接”,右侧弹出新增连接窗口。 图1 创建连接 连接类型选择“MaxCompute”,单击“下一步”。 图2 选择MaxCompute 根据MaxCompute连接参数配置说明,配置连接参数后,
nECSReadOnlyAccess)”。 是 区域 选择源端主机所在区域,支持多选。 是 资源发现 云平台采集 开启云平台采集,并在资源类型下拉列表,勾选“主机”资源。 是 关联到应用(可选) 应用是资源分组的概念,将资源关联到应用,后续的评估推荐和迁移工作流都将以应用作为整体
选择在源端环境中安装的MgC Agent(原Edge)。 Doris凭证 选择在MgC Agent添加的目的端Doris凭证。凭证的添加方式请参考添加资源凭证,类型选择“大数据-Doris”。 数据库地址 填写目的端Doris集群部署的服务器IP地址。 可登录FusionInsight Manager,选择“集群
默认创建名称为“MaxCompute-4位随机数(字母和数字)”,也可以自定义名称。 阿里云凭证 选择源端阿里云账号的凭证。凭证的添加方式请参考添加资源凭证,类型选择“大数据-MaxCompute”。 项目名称 输入需要采集的MaxCompute项目名称。项目名称可在MaxCompute侧控制台获取。
默认创建名称为“Doris-4位随机数(字母和数字)”,也可以自定义名称。 Doris凭证 选择在Edge添加的源端Doris凭证。凭证的添加方式请参考添加资源凭证,类型选择“大数据-Doris”。 数据库地址 填写连接到源端Doris集群部署的服务器IP地址。 数据库端口 填写连接到源端Doris集群部署的服务器的端口。默认为3306。
建的迁移项目。 单击页面右上角的“连接管理”按钮,进入连接管理页面。 单击页面右上角的“创建目的端连接”按钮,右侧弹出新增连接窗口。 连接类型选择“数据湖探索 (DLI)”,单击“下一步”,进入详细配置页面。 根据DLI服务参数配置说明,配置连接参数后,单击“测试连接”按钮,测试通过代表连接成功。
大数据数据迁移页面。 单击页面右上角的“连接管理”按钮,进入迁移准备页面。 单击“创建连接”,右侧弹出新增连接窗口。 图1 创建连接 连接类型选择“数据湖探索 (DLI)”,单击“下一步”,进入详细配置页面。 图2 选择DLI 根据DLI服务参数配置说明,配置连接参数后,单击“测试连接”按钮,测试通过代表连接成功。
xxx.xxx.xxx ecs.xxx.com xxx.xxx.xxx.xxx evs.xxx.com xxx.xxx.xxx.xxx ims.xxx.com xxx.xxx.xxx.xxx obs.xxx.com xxx.xxx.xxx.xxx eps.xxx.com xxx
xxx.xxx.xxx ecs.xxx.com xxx.xxx.xxx.xxx evs.xxx.com xxx.xxx.xxx.xxx ims.xxx.com xxx.xxx.xxx.xxx obs.xxx.com xxx.xxx.xxx.xxx eps.xxx.com xxx
为23.3.2.37,由于这两个版本在处理IPv4和IPv6字段类型以及相关函数计算结果上存在差异,因此无法进行字段校验。 在执行Hive数据的日级别增量、小时级增量以及指定日期的校验时,如果分区字段为date类型,且分区值的格式不是标准的YYYY-MM-DD时,系统目前不支持对这种场景进行数据校验。
单击“添加路由”,弹出添加路由窗口。 按照提示配置参数。需要添加两条路由,单击,可以依次增加多条路由。 目的地址类型:选择“IP地址”。 目的地址:与创建跨源连接时,配置的主机信息IP保持一致。 下一跳类型:选择“服务器实例”。 下一跳:选择购买的ECS。 配置SNAT转换规则 配置完SNAT转换规则后,如果ECS重启,则需要重新配置。
单击“添加路由”,弹出添加路由窗口。 按照提示配置参数。需要添加两条路由,单击,可以依次增加多条路由。 目的地址类型:选择“IP地址”。 目的地址:与创建跨源连接时,配置的主机信息IP保持一致。 下一跳类型:选择“服务器实例”。 下一跳:选择购买的ECS。 配置SNAT转换规则 配置完SNAT转换规则后,如果ECS重启,则需要重新配置。
在操作流程区域,单击“查看我的模板”,右侧弹出“我的模板”窗口,单击“创建模板”按钮,进入创建配置模板窗口。 在基础信息区域,选择模板类型(当前仅支持主机),自定义模板名称;在配置信息区域,根据表1,配置模板参数。 表1 模板参数配置说明 参数 配置说明 区域 选择目的端区域。
在操作流程区域,单击“查看我的模板”,右侧弹出“我的模板”窗口,单击“创建模板”按钮,进入创建配置模板窗口。 在基础信息区域,选择模板类型(当前仅支持主机),自定义模板名称;在配置信息区域,根据表1,配置模板参数。 表1 模板参数配置说明 参数 配置说明 区域 选择目的端区域。
迁移中心Agent 选择在源端环境中安装的MgC Agent(原Edge)。 阿里云凭证 选择源端阿里云账号的凭证。凭证的添加方式请参考添加资源凭证,类型选择“大数据-MaxCompute”。 项目名称 输入需要采集的MaxCompute项目名称。项目名称可在MaxCompute侧控制台获取。
为23.3.2.37,由于这两个版本在处理IPv4和IPv6字段类型以及相关函数计算结果上存在差异,因此无法进行字段校验。 在执行Hive数据的日级别增量、小时级增量以及指定日期的校验时,如果分区字段为date类型,且分区值的格式不是标准的YYYY-MM-DD时,系统目前不支持对这种场景进行数据校验。
选的区域,自动查询账号在该区域下的项目。 区域/项目 选择需要校验的数据所在区域/项目。 队列名称 输入需要进行校验的DLI队列名称。队列类型必须是SQL队列。 表2 CloudTable(ClickHouse)服务参数配置说明 参数 配置说明 所属源 选择目的端。 连接名称 默
查看资源统计信息 当RVTools导入任务状态为“成功”时,在资源统计页面,可以查看VMware资源的统计信息,包括: 宿主机:CPU类型统计、宿主机个数统计、内存总量统计、已分配虚拟机内存、已分配占比、虚拟机总数统计、虚拟机运行总数统计、存储使用详情统计以及主机列表详情。
选择主机迁移标准模板,单击“查看步骤详情”,可以查看主机迁移模板所包含的迁移阶段和步骤,以及每个阶段和步骤的详细描述。其中,步骤类型为“自动”,表示该步由系统自动完成;步骤类型为“手动”,表示该步需要用户手动操作。单击右下角的“开始配置”按钮,进行工作流配置。 根据表1,配置工作流参数。 表1
低频桶:设置低频桶占对象存储容量的比例。 归档桶:设置归档桶占对象存储容量的比例。 深度归档桶:设置深度归档桶占对象存储容量的比例。 说明: 存储桶类型的详细说明请参考:存储类别简介。 设置“网络”区域参数,月度网络带宽量通过拉取动态条或手工直接填写,系统会根据默认价格进行月单价计算,也可以根据您的实际情况进行调整。