检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
价格计算说明 本节介绍使用TCO对比功能进行成本分析后，产品映射列表中所展示的价格计算说明。 资源总用量 显示该资源在账单区间内（即所选对比时间段内）的使用时长/使用容量，与账单中的用量保持一致。 不会体现该资源在账单区间内使用的具体时间节点。 根据产品类型单位分为小时或者GB。
使用spark-sql 客户端，进行sql操作，出现用同一个命令存在返回值不同的情况。 这是因为在进行大数据对数的求和计算时，由于分布式计算顺序的不确定性，可能会导致计算结果的不一致性。特别是处理接近或等于double类型最大值（1.7976931348623157E+308）的数据时，加上一个较小的数值（如2
心 MgC利用部署在源端网络中的Edge设备完成数据采集。 数据采集架构图，如图1所示。 图1 Edge远程在线采集架构图 通过调用API在线采集云平台资源 适用于公有云部署场景，针对不同云服务提供商（友商）的云资源进行数据采集。使用API接口与其它云服务提供商的系统进行交互，实
进行存储迁移时，如何选择集群规格？ 使用MgC进行存储迁移时，我们推荐使用C6和C7系列中8U16G的规格，即c6.2xlarge.2或c7.2xlarge.2。具体的规格详情和用途如下。 规格名称 带宽 用途 通用计算增强型c6 | c6.2xlarge.2 | 8vCPUs |
建议：升级带宽或选择低峰时段进行迁移。 迁移集群规格：如果迁移集群的规格小于推荐规格（8U16G）可能会因处理能力不足，成为迁移速度的制约因素。 建议：提升集群规格配置或增加计算资源（如ECS实例）。 系统性能管理：在迁移期间，系统的性能资源（如CPU、内存）可能会被被其他任务占用，从而影响迁移速度。 建议：在迁移
详情请参见ECS按需计费说明或ECS价格计算器。 如果您使用公网迁移时，会产生NAT网关服务费用。计费详情请参见NAT网关计费说明或NAT价格计算器。 启用LTS服务时，会产生LTS服务费用。具体计费详情请参见LTS计费说明或LTS价格计算器。 父主题： 迁移集群
归档存储（冷存储）数据迁移 背景概述 冷存储是一种针对不频繁访问数据的长期备份解决方案，例如，平均一年访问一次的归档存储或平均几年访问一次的深度归档存储。这种存储方式具有高安全性、持久性和成本低等优势。 在迁移冷存储数据时，一个主要的考虑因素是数据访问的延迟。由于数据通常处于"冻
存储迁移 存储迁移的约束与限制有哪些？ 迁移对源端和目的端有什么要求？ 进行存储迁移时，如何选择集群规格？ 影响大对象迁移速度的关键因素有哪些？ 影响小对象迁移速度的关键因素有哪些？ 如何监控和查看影响迁移速度的关键指标? 为什么存储迁移工作流进度长时间没有变化？ 将HTTP/H
NAS_NFS_V3_PROTOCOL HTTP/HTTPS数据源 约束与限制 关于存储迁移的约束与限制请查看存储迁移的约束与限制有哪些？ 逻辑架构图 通过迁移中心进行存储数据迁移的逻辑架构图如图1所示。 图1 存储迁移逻辑架构图 准备工作 使用MgC之前，您需要拥有一个华为账号或一个可用于访问
存储迁移的约束与限制有哪些？ 使用迁移中心进行存储迁移的约束与限制参见表1和表2。 表1 存储迁移通用约束与限制 类别 约束与限制 多版本对象迁移 默认只迁移源端多版本对象中的最新版本，不支持迁移历史版本的对象存储数据。 目的端桶存储类别 目的端桶的存储类别只能为标准存储或者低频
配置存储迁移方案 迁移中心为多种资源的不同迁移方案配置模板，可以面向迁移工作流进行一站式配置，并按应用显示配置进度。本节介绍为对象存储批量迁移配置迁移方案的方法。 对象存储批量迁移：适用于源端有多个对象存储桶资源需要迁移的场景。如果只有单个对象存储桶资源需要迁移，请直接创建单个对象存储迁移工作流。
大数据校验概述 迁移中心 MgC为多种大数据计算/存储引擎，如Hive、Hbase、Doris和MaxCompute等，提供了一致性校验方法。通过一致性校验，您可以更加放心地进行大数据迁移操作，确保数据的准确性和可靠性，从而避免了数据丢失或不一致的风险。 校验方式说明 全量校验：
存储迁移相关最佳实践 迁移其他云平台存储数据至华为云 OBS多前缀批量迁移 归档存储（冷存储）数据迁移 SFS1.0迁移至SFS 3.0 通过HTTP迁移MinIO存储数据到华为云OBS 通过HTTP迁移Ceph存储数据到华为云OBS
创建存储迁移工作流 本节介绍如何使用存储迁移标准模板创建存储迁移工作流。 前提条件 已完成准备工作。 已创建集群。 （可选）已打通SFS 1.0、3.0和集群之间的网络 操作步骤 登录迁移中心管理控制台。 在左侧导航栏选择“实施>迁移工作流”，进入迁移工作流页面。在页面左上角的当
为什么存储迁移工作流进度长时间没有变化？ 问题分析 出现迁移进度长时间未更新的情况通常是因为以下几个原因： 子任务处理：迁移工作流会自动将大型任务拆分为多个子任务来执行。只有当这些子任务完成后，系统才会更新显示的进度。 大对象迁移：如果子任务中包含了大型文件或对象，可能需要较长时间来迁移。
（可选）根据表5，配置高级选项。 表5 高级选项参数说明 参数 说明 目的端存储类型 选择迁移到华为云OBS后，对象的存储类型。存储策略说明请参见存储类型介绍。 KMS加密 不勾选，迁移后对象状态与源端保持一致。 勾选，所有对象在迁移到OBS桶后都将被加密存储。 说明： 使用KMS服务端加密可能会降低迁移速率10%左右。
源端云厂商 源端资源类型 华为云资源类型 AWS EC2 ECS EBS EVS 阿里云 ECS ECS EBS EVS 部分EBS产品规格，由于计算方式差别较大，源端和华为云都忽略了IOPS以及突发性吞吐相关计费项，只比较容量以及使用时长相关计费项。 父主题： TCO任务
（可选）根据表5，配置高级选项。 表5 高级选项参数说明 参数 说明 目的端存储类型 选择迁移到华为云OBS后，对象的存储类型。存储策略说明请参见存储类型介绍。 KMS加密 不勾选，迁移后对象状态与源端保持一致。 勾选，所有对象在迁移到OBS桶后都将被加密存储。 说明： 使用KMS服务端加密可能会降低迁移速率10%左右。
Enable-PSRemoting 验证配置。在PowerShell中输入如下命令： New-PSSession 如果配置成功，则该命令会在本地计算机上创建会话，并返回一个会话对象。返回示例： Id Name ComputerName State ConfigurationName
关于OBS、NAS和SMB存储系统之间进行异构迁移的对象长度限制说明 在OBS、NAS和SMB存储系统之间进行异构迁移时，不同系统对文件夹和路径长度的限制存在不同。了解并遵守每个系统的对象长度限制是成功执行异构迁移的关键。根据具体的迁移方向，确保对象的路径长度符合目的端系统的要求，以避免迁移失败或数据不一致的问题。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
