检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
创建统计任务并执行校验 利用创建的源端连接和目的端连接，分别创建源端和目的端统计任务，获取源端和目的端的数据信息，以便于进行数据校验。 支持的大数据组件和统计方式说明请参见大数据校验概述。 注意事项 创建的源端统计任务和目的端统计任务的统计方式必须保持一致。 HBase安全集群任
Agent然后同步到MgC，方法请参考添加资源凭证。 MySQL节点IP：输入MySQL数据库服务器的IP地址。 MySQL服务端口：输入MySQL数据库服务的端口号。 数据库名：输入存储Hive表元数据的数据库名称。 说明： 请确保填写的MySQL凭证、节点IP、服务端口和数据库名与Hive实际使用
存储类型介绍 各云厂商的对象存储服务针对用户业务对存储性能、成本的不同诉求，将对象的存储级别进行了区分，区分的普遍依据是对象的访问频度、访问时延、最低存储时间、最低存储单元、数据可靠性、数据可用性等。根据以上依据，华为云OBS提供了以下四种存储类型： 标准存储 访问时延低和吞吐量
Agent然后同步到MgC，方法请参考添加资源凭证。 MySQL节点IP：输入MySQL数据库服务器的IP地址。 MySQL服务端口：输入MySQL数据库服务的端口号。 数据库名：输入存储Hive表元数据的数据库名称。 说明： 请确保填写的MySQL凭证、节点IP、服务端口和数据库名与Hive实际使用
表3 存储迁移通用约束与限制 类别 约束与限制 多版本对象迁移 默认只迁移源端多版本对象中的最新版本，不支持迁移历史版本的对象存储数据。 目的端桶存储类别 目的端桶的存储类别只能为标准存储或者低频访问存储。迁移完成后，可以自行修改桶的存储类别。 迁移对象 对象名称不能包含特殊字符。
运维架构调研：识别客户在运维流程管理中的痛点与待改进空间，助力客户规划上云后的运维架构设计。 技术架构调研：通过技术架构调研问卷，全面了解客户的计算、存储、网络资源状况，为后续资源部署及云上网络规划奠定基础。 安全架构调研：识别出客户系统的安全风险，包括潜在的攻击面、漏洞及威胁，协助企业优化
运维架构调研：识别客户在运维流程管理中的痛点与待改进空间，助力客户规划上云后的运维架构设计。 技术架构调研：通过技术架构调研问卷，全面了解客户的计算、存储、网络资源状况，为后续资源部署及云上网络规划奠定基础。 安全架构调研：识别出客户系统的安全风险，包括潜在的攻击面、漏洞及威胁，协助企业优化
Metastore连接前，需要先获取连接Hive Metastore的IP地址和端口号。 在创建MaxCompute连接前，需要先获取MaxCompute服务所在地域的Endpoint信息。 在创建Doris连接前，需要先获取Doris集群部署的服务器IP地址和端口。 在创建HBase连接前，需要先获取HBa
创建目的端云服务连接 对大数据云服务数据进行一致性校验时，需要分别与源端和目的端云服务建立连接，用于数据查询和计算。 目前支持创建目的端连接的大数据云服务包括： 数据湖探索（DLI） CloudTable(ClickHouse) CloudTable(HBase) 操作步骤 登录
接口返回：MgC接收API调用的返回值，这些返回值通常包含丰富的资源数据。 解析数据：MgC将返回的数据进行解析，提取关键信息，如节点数、虚拟机核数等。然后将这些关键信息保存到数据库中，为后续分析和迁移提供支持。 准备工作 华为账号准备 使用MgC之前，您需要拥有一个华为账号或一个可用于访问MgC的IA
Linux系统：通过SSH协议从MgC Agent访问Linux主机，将Shell脚本传输至/root/rda目录并执行，以自动化采集系统信息。 网段扫描 权限要求：被扫描节点开放对应的远程访问端口（内网可访问或对MgC Agent所在主机开放白名单）。默认情况下Windows开放3389端口，Linux开放22端口，也可以单独指定。
页面左上角的当前项目下拉列表中选择迁移项目。 单击存储迁移成本调研框，进入存储迁移成本调研参数配置页面。 在源端详情区域，根据实际情况，选择源端平台和源端类型，并输入源端文件个数、总文件大小。 在目的端详情区域，选择目的端区域和目的端类型。 在高级特性选择网络模式、偏好设置，并输入期望迁移时间。
单击左侧导航栏“调研评估>上云调研”，进入“上云调研”页面。 单击存储迁移成本调研框，进入存储迁移成本调研参数配置页面。 在源端详情区域，根据实际情况，选择源端平台和源端类型，并输入源端文件个数、总文件大小。 在目的端详情区域，选择目的端区域和目的端类型。 在高级特性选择网络模式、偏好设置，并输入期望迁移时间。
如何获取Azure对象存储深度采集所需凭证？ 在对Azure云平台对象存储资源进行深度采集时，需要使用“存储账户”和“密钥”作为采集凭证，本节介绍获取Azure“存储账户”和“密钥”的方法。 登录 Azure 门户中转到存储账户。 在左侧导航栏选择“安全性和网络 > 访问密钥” ，即可看到“存储账户名称”和“密钥”。
大数据校验概述 迁移中心 MgC为多种大数据计算/存储引擎，如Hive、Hbase、Doris和MaxCompute等，提供了一致性校验方法。通过一致性校验，您可以更加放心地进行大数据迁移操作，确保数据的准确性和可靠性，从而避免了数据丢失或不一致的风险。 校验方式说明 全量校验：
OMS-Workflow.0023 节点状态异常 请检查集群节点的安全组规则放通的端口是否满足要求。集群安全组配置要求请查看 资源类型和安全组配置说明。 OMS-Workflow.0024 集群不存在 请在集群列表检查该集群是否存在。 OMS-Workflow.0025 节点不存在 请在对应集群检查该节点是否存在。
如何获取微软云的访问凭证 获取存储账户/密钥 在 Azure 门户中单击“存储账户”，选择待迁移的存储账户。 在“安全性和网络”下，选择“访问密钥” 。 此时会显示账户访问密钥，以及每个密钥的完整连接字符串。 选择“显示”，即可显示访问密钥和连接字符串，单击复制图标即可复制密钥和字符串。 可以使
跨云成本分析支持哪些云厂商？ 目前支持的源端云厂商和资源范围如下表。 源端云厂商 源端资源类型 华为云资源类型 AWS EC2 ECS EBS EVS 阿里云 ECS ECS EBS EVS 部分EBS产品规格，由于计算方式差别较大，源端和华为云都忽略了IOPS以及突发性吞吐相关计费项，只比较容量以及使用时长相关计费项。
Hive校验的sum统计结果显示未达标 问题描述 对Hive进行大数据校验，Hive中的double字段保存的值为 1.7976931348623157E308 和 -1.7976931348623157E308 时 sum 统计结果显示未达标。 问题分析 使用spark-sql 客户端，进行sql操作
输入需要校验的数据（即目的端数据）所在区域的代码。例如：ap-southeast-1。可以参考终端节点获取不同区域的区域代码信息。 项目ID 输入需要校验的数据所在的项目ID。获取方法请参考获取项目的名称和ID。 队列名称 输入需要进行校验的DLI队列名称。队列类型必须是SQL队列。 采集资源使用信息
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
