检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
执行如下命令，启动Edge卸载脚本。 ./uninstall.sh 当出现如下图所示提示时，表示Linux版的Edge需要更新环境变量。 执行如下命令，更新环境变量。 source /etc/profile 执行如下命令，启动Edge卸载脚本。 ./uninstall.sh 当出现如下图
填写连接执行机的IP地址。 执行机连接端口 填写连接执行机的端口。 Spark客户端目录 填写Spark客户端的安装目录路径。 环境变量地址 填写环境变量文件（配置文件）的绝对路径，例如：/opt/bigdata/client/bigdata_env。 SQL文件地址 填写用于存放执
grep 27080 例如，查询到的应用ID为11083。 输入如下命令，根据获得的应用ID查询应用进程。此处的应用ID仅为举例，请根据实际查询结果进行替换。 ps -ef | grep 11083 确认占用端口的应用可以停用后，执行如下命令，将该应用进程停止。然后重新安装Edge。
Spark客户端目录 填写Spark客户端的bin目录的绝对路径 环境变量地址 请添加环境变量文件的绝对路径，示例：/opt/bigdata/client/bigdata_env， 如果该参数不为空，则环境变量文件在命令执行前将被自动“source” SQL文件地址 填写用于存放
Spark客户端目录 填写Spark客户端的bin目录的绝对路径 环境变量地址 请添加环境变量文件的绝对路径，示例：/opt/bigdata/client/bigdata_env， 如果该参数不为空，则环境变量文件在命令执行前将被自动“source” SQL文件地址 填写用于存放
填写连接执行机的IP地址。 执行机连接端口 填写连接执行机的端口。 Spark客户端目录 填写Spark客户端的安装目录路径。 环境变量地址 填写环境变量文件（配置文件）的绝对路径，例如：/opt/bigdata/client/bigdata_env。 SQL文件地址 填写用于存放执
C:\Users\Public\Hosts_Script_Logs 作为日志存储目录。目录不存在的话，脚本会自动创建，如果需要更改日志存储路径，请修改脚本中的 $logDir 变量的值。 检查日志目录权限：确保当前用户对日志目录有写入权限。如果权限不足，需要调整目录权限或选择其他路径。 检查网络连通性 网络连接检查：
迁移工作流除了“开始迁移”、“开始同步”两个阶段运行时间比较久以外，其它步骤一般运行不会超过3分钟。如果长时间卡在某一步，可能是因为Edge上报结果给MgC的过程中丢失。 解决办法： 方法一：单击工作流名称，在工作流详情页面的主机页签，可以查看每个资源工作流状态。 方法二：请联系技术支持人员帮忙追踪任务是否正常收发。
当出现如下图所示提示时，表示Linux版的Edge已安装完成。其中提示的端口号请以实际情况为准（通常为27080）。 执行如下命令，更新环境变量。 source /etc/profile 安装完成后，在安全组入方向规则中添加的Windows主机上打开浏览器，输入地址“https://步骤7
ge日志以获取失败原因。 关键行为和资源显示： 对于修改密码或凭证等关键行为，资源字段会显示账号名称或凭证ID等内容。 对于MgC下发指令给Edge或Edge上报数据到MgC等关键行为，资源字段会显示存储这些内容的文件所在路径，您可以根据以下路径自行查找。 下发指令存储在{Edg
迁移对源端和目的端有什么要求？ 迁移会占用源端和目的端大量的QPS（每秒查询率）和带宽。因此，建议在迁移前先进行测试，以评估实际迁移过程中源端和目的端的QPS和带宽占用情况。如果占用率过高，请调整源端和目的端QPS和带宽限制，以确保对现有业务的影响最小化。 父主题： 存储迁移
自定义参数说明 在创建数据湖探索 DLI校验任务时，支持的自定义参数及说明参见表1。 表1 DLI校验任务支持的自定义参数说明 参数名称 默认值 描述 mgc.mc2dli.table.partition.enable true DLI表分区为空或者分区不存在时需要通过查询DLI的元数据去判断分区存不存在。
公网发现与采集 通过公网在线发现并采集源端云平台资源，获取源端资源详细信息。目前支持的源端云平台为：阿里云、华为云、AWS、腾讯云、Azure、七牛云、金山云。 阿里云和华为云支持采集的资源类型包括：主机、容器、中间件、数据库、网络和存储。 腾讯云支持采集的资源类型包括：主机、数据库、存储。
影响小对象迁移速度的关键因素有哪些？ 在迁移小对象的过程中，以下是一些可能影响小对象迁移速度的因素以及相应的建议： 迁移集群的CPU负载：集群的CPU负载过高，可能会减慢处理小对象迁移的速度。 建议：优化集群的CPU资源分配，或者增加更多的迁移节点来分散负载。 源端和目的端的QP
委托权限说明 概述 当您启用特定功能时，需要您确认并同意授予必要的权限给MgC，以便我们能够为您提供完整的服务。本节为您介绍需要进行权限委托的场景以及自定义策略详情。 委托授权策略说明： 创建自定义策略：如果您尚未设定任何自定义的权限委托策略，系统会自动为您创建一个标准的自定义策略。
公网发现与采集 通过公网在线发现并采集源端云平台资源，获取源端资源详细信息，并整理源端资源与应用间的关联关系。目前支持发现的源端云平台为：阿里云、华为云、AWS、腾讯云、Azure、七牛云、金山云。 阿里云和华为云支持采集的资源类型包括：主机、容器、中间件、数据库、网络和存储。
安全特性 采集安全性 采集时长受控：采集任务在有限的时间内完成，采集避免长时间占用系统资源。 加密保存凭证：所有用于数据采集的凭证都经过加密处理，以保护凭证的安全。线上采集的凭证仅在线上环境中保存。 操作权限与最小权限原则：无论哪种采集方式，都需要具备相应的操作权限，并且遵循最小
元数据增量感知 识别出上一次迁移后，在源端数据库中发生变化的元数据，并同步至目的端华为云数据湖探索（DLI）。 前提条件 已创建源端连接。 已创建目的端连接。 最少完成一次元数据全量迁移。 准备工作 开通spark 3.3.1白名单 使用该功能前，请联系技术支持人员，将您添加到spark
创建统计任务并执行校验 利用创建的源端连接和目的端连接，分别创建源端和目的端统计任务，获取源端和目的端的数据信息，以便于进行数据校验。 支持的大数据组件和统计方式说明请参见大数据校验概述。 注意事项 创建的源端统计任务和目的端统计任务的统计方式必须保持一致。 HBase安全集群任
OBS多前缀批量迁移 本文将详细介绍如何使用前缀列表文件（包含多个前缀的列表文件）来筛选并批量迁移OBS桶内的对象。 准备工作 使用MgC之前，您需要拥有一个华为账号或一个可用于访问MgC的IAM用户，获取方法请参见准备工作。 在MgC控制台创建项目。 将源端云平台账号对应的AK
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
