检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Linux主机，可以直接使用vim创建和编辑脚本文件，步骤如下： 在Vim编辑器中按 i 进入插入模式。 复制并粘贴脚本代码，完成后按 Esc。 输入 :wq 保存并退出。 #!/bin/bash # Configuration # Log directory path: Used
适的规格，系统将按照性能顺序，向下一个性能等级的虚拟机规格类型进行搜索。如果性能略低的规格类型中仍然没有找到合适的规格，系统将继续搜索更低性能的计算增强型虚拟机，直到按照性能顺序检索完全部计算增强型虚拟机。如果在所有计算增强型虚拟机规格中均未找到符合要求的规格，则会报错提示。 匹配业务场景
DeltaLake（无元数据）迁移至MRS DeltaLake数据校验 本文主要介绍将自建DeltaLake环境上的数据迁移至华为云MRS DeltaLake之后，使用迁移中心 MgC进行数据一致性校验的步骤和方法。 DeltaLake不存在元数据，无法通过数据湖元数据同步方式进
迁移方案配置 配置主机迁移方案 配置存储批量迁移方案 配置文件存储批量迁移方案
源端主机的IP或端口异常。 源端主机有防火墙、杀毒软件等安全拦截。 您可以通过查看Edge的Error日志文件确认具体的报错原因，Error日志文件的存储路径为：C:\Edge\logs\edge-server\error.log。 解决方法 查看源端主机是否处于关机状态。 如果是，请将源端主机开机后重试。
重置密码或联系源端主机管理员。 如果您确定用户名正确，但忘记了密码，可以选择重置源端主机的密码。源端主机为华为云ECS时，请参考在控制台重置ECS密码。源端非华为云ECS主机，需要您自行获取重置密码的方法。 如果您不确定用户名是否正确，请联系源端主机的管理员以获取正确的用户名和密码。
创建迁移项目 在MgC控制台为本次迁移创建独立的项目，方法请参见项目管理。 创建弹性文件系统 在目的端创建相应的弹性文件系统，用于迁移后的数据存储和管理，方法请参见创建弹性文件系统。 父主题： SFS1.0迁移至SFS 3.0
可以通过自定义参数设置同步的特定表或分区、过滤条件等。 如果需要同步的是阿里云 EMR环境中的元数据，请添加如下参数： 参数名：conf 参数值：spark.sql.catalogImplementation=hive 如果源端是阿里云 EMR Delta 2.2版本并且是通过Delta 2.3版本依赖访问时，请添加如下参数：
调用SDK：通过调用Amazon EKS服务提供的API，获取容器、虚拟机等资源信息。 接口返回：MgC接收API调用的返回值，这些返回值通常包含丰富的资源数据。 解析数据：MgC将返回的数据进行解析，提取关键信息，如节点数、虚拟机核数等。然后将这些关键信息保存到数据库中，为后续分析和迁移提供支持。
N等方式完成大数据迁移和对数的操作方法。本文以阿里云作为源端，Edge安装在阿里云ECS进行举例。 步骤一：配置华为云VPN 参考站点入云VPN企业版的华为云控制台操作步骤，分别配置VPN网关、对端网关以及VPN连接。 登录华为云管理控制台，选择“网络 > 虚拟专用网络 VPN”。
Edge安装端口被占用，导致无法安装，如何处理？ 问题描述 在安装Edge时，提示“安装端口被占用，请先关闭占用进程再重试”。 问题分析 出现该问题，是因为安装Edge的默认端口27080被占用。 解决方法 将占用27080端口的应用进程停用。 在将应用进程停用前，请自行评估风险并承担相应后果。
大数据校验概述 迁移中心 MgC为多种大数据计算/存储引擎，如Hive、Hbase、Doris和MaxCompute等，提供了一致性校验方法。通过一致性校验，您可以更加放心地进行大数据迁移操作，确保数据的准确性和可靠性，从而避免了数据丢失或不一致的风险。 校验方式说明 全量校验：
迁移节点和一个列举节点在线 不可用 所有迁移节点或列举节点不在线 离线 master节点离线，可能是网络中断、ECS删除等原因，请排查Vpcep Service、ECS等资源情况 升级中 升级集群版本中 升级失败 升级集群版本失败 废弃中 30天内无任务运行，废弃集群中 废弃失败
如何重启Edge？ Windows版本 打开Edge所在主机的“任务管理器”。 选择“服务”页签，找到名为“Edge_Tomcat ”的服务，鼠标右键，单击“开始”，即可手动启动Edge进程。 Linux版本 执行如下命令，进入Edge安装目录中的scripts目录。 cd /o
安装Edge的主机时间设置与当地标准时间不一致。 处理方法 AK，SK输入错误 请您检查输入的华为云账号AK/SK是否正确，特别是复制的时候有没有复制空格或者遗漏字符等。重新输入华为云账号AK/SK进行校验。 AK，SK被删除或停用 请前往“我的凭证 > 访问密钥”中查看使用的AK/SK是否在列表中。
加一条允许通过TCP协议访问27080端口的规则。源地址填写用于登录Edge控制台的Windows主机IP地址。 已注册华为账号并开通华为云，并获取账号的AK/SK。 已在MgC控制台创建迁移项目。 安装步骤 使用在源端内网环境准备好的Linux主机，登录迁移中心管理控制台。 在
MaxCompute迁移至DLI数据校验 本文主要介绍将阿里云 MaxCompute数据迁移至华为云数据湖探索 DLI后，使用迁移中心 MgC进行数据一致性校验的步骤和方法。 准备工作 需要先在源端内网环境中安装用于配合数据校验的工具Edge并注册用户，方法请参见安装Linux版本的Edge工具。
创建目的端连接 创建目的端连接是为了将源端数据写入到华为云DLI。 使用须知 元数据迁移：只需要配置一条连接到DLI SQL队列的连接。 数据迁移：需要配置两条连接，分别为连接到DLI SQL队列的连接和连接到DLI通用队列的连接。 前提条件 已完成准备工作。 操作步骤 登录迁移中心控制台。
MB。在这种情况下，脚本可能因为内存不足而中断。解决方法如下： 登录华为云SMS管理控制台，在“迁移Agent”页面下载Windows Agent(Python2)版本的安装包到源端主机。 安装并运行Agent，输入华为云账户的AK、SK，以及SMS域名启动Agent。方法请参考安装Windows版的SMS-Agent。
建议执行时间选择业务的低峰期。 高级选项 并发连接数：进行数据统计时，单个执行机的任务并发数。默认为3，取值范围：1~10。 注意： 在创建阿里云Hive校验任务时，请根据源端数据量和EMR Master节点的规格，合理设置并发连接数。建议按照以下两个条件进行设置： 条件一：同时运行的
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
