检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
问题分析 使用spark-sql 客户端，进行sql操作，出现用同一个命令存在返回值不同的情况。 这是因为在进行大数据对数的求和计算时，由于分布式计算顺序的不确定性，可能会导致计算结果的不一致性。特别是处理接近或等于double类型最大值（1.7976931348623157E+308）的数据时，加上一个较小的数值（如2
迁移其他云平台存储数据至华为云 适用场景 通过独立专享迁移集群以及配置迁移专线，简单、快捷实现对象存储、文件存储一站式上云，提升上云效率。本文介绍如何使用迁移中心MgC将其他云平台的对象存储或文件存储数据迁移到华为云。 当前支持以下区域（Region）： 华北-北京四 华北-乌兰察布一
配置存储迁移方案 迁移中心为多种资源的不同迁移方案配置模板，可以面向迁移工作流进行一站式配置，并按应用显示配置进度。本节介绍为对象存储批量迁移配置迁移方案的方法。 对象存储批量迁移：适用于源端有多个对象存储桶资源需要迁移的场景。如果只有单个对象存储桶资源需要迁移，请直接创建单个对象存储迁移工作流。
read 七牛云资源采集 采集七牛云存储资源所需的权限参见下表。 资源类型 云服务 Action 最小权限策略 存储 对象存储(Kodo) kodo:buckets QiniuKodoReadOnlyAccess 金山云资源采集 采集金山云存储资源所需的权限参见下表。 资源类型 云服务
创建存储迁移工作流 本节介绍如何使用存储迁移标准模板创建存储迁移工作流。 当前支持以下区域（Region）： 华北-北京四 华北-乌兰察布一 华南-广州 华东-上海一 华东-上海二 华东-青岛 西南-贵阳一 中国-香港 亚太-新加坡 约束与限制 关于存储迁移的约束与限制请查看存储迁移的约束与限制有哪些？
创建对象存储批量迁移工作流 本节介绍如何使用对象存储批量迁移模板，批量创建对象存储数据迁移任务，实现对象存储数据的高效迁移。 约束与限制 关于存储迁移的约束与限制请查看存储迁移的约束与限制有哪些？ 风险提示 在创建工作流时，对于源端和目的端的同名对象，我们提供了三种覆盖策略：不覆
（可选）根据表5，配置高级选项。 表5 高级选项参数说明 参数 说明 目的端存储类型 选择迁移到华为云OBS后，对象的存储类型。存储策略说明请参见存储类型介绍。 KMS加密 不勾选，迁移后对象状态与源端保持一致。 勾选，所有对象在迁移到OBS桶后都将被加密存储。 说明： 使用KMS服务端加密可能会降低迁移速率10%左右。
（可选）根据表5，配置高级选项。 表5 高级选项参数说明 参数 说明 目的端存储类型 选择迁移到华为云OBS后，对象的存储类型。存储策略说明请参见存储类型介绍。 KMS加密 不勾选，迁移后对象状态与源端保持一致。 勾选，所有对象在迁移到OBS桶后都将被加密存储。 说明： 使用KMS服务端加密可能会降低迁移速率10%左右。
归档存储（冷存储）数据迁移 背景概述 冷存储是一种针对不频繁访问数据的长期备份解决方案，例如，平均一年访问一次的归档存储或平均几年访问一次的深度归档存储。这种存储方式具有高安全性、持久性和成本低等优势。 在迁移冷存储数据时，一个主要的考虑因素是数据访问的延迟。由于数据通常处于"冻
存储迁移的约束与限制有哪些？ 使用迁移中心进行存储迁移的约束与限制参见表1和表2。 表1 存储迁移通用约束与限制 类别 约束与限制 多版本对象迁移 默认只迁移源端多版本对象中的最新版本，不支持迁移历史版本的对象存储数据。 目的端桶存储类别 目的端桶的存储类别只能为标准存储或者低频
进行存储迁移时，如何选择集群规格？ 使用MgC进行存储迁移时，我们推荐使用C6和C7系列中8U16G的规格，即c6.2xlarge.2或c7.2xlarge.2。具体的规格详情和用途如下。 规格名称 带宽 用途 通用计算增强型c6 | c6.2xlarge.2 | 8vCPUs |
（可选）根据表5，配置高级选项。 表5 高级选项参数说明 参数 说明 目的端存储类型 选择迁移到华为云OBS后，对象的存储类型。存储策略说明请参见存储类型介绍。 KMS加密 不勾选，迁移后对象状态与源端保持一致。 勾选，所有对象在迁移到OBS桶后都将被加密存储。 说明： 使用KMS服务端加密可能会降低迁移速率10%左右。
及前期需要做的准备工作，让您对迁移中心的功能和操作有个初步认识。 迁移中心目前还支持跨可用区迁移和存储迁移，创建迁移工作流的操作步骤请参考华为云主机跨可用区迁移、迁移其他云平台存储数据至华为云。 操作流程图 使用迁移中心创建主机迁移工作流的操作流程，如图1所示。 图1 创建主机迁移工作流操作流程图
为什么存储迁移工作流进度长时间没有变化？ 问题分析 出现迁移进度长时间未更新的情况通常是因为以下几个原因： 子任务处理：迁移工作流会自动将大型任务拆分为多个子任务来执行。只有当这些子任务完成后，系统才会更新显示的进度。 大对象迁移：如果子任务中包含了大型文件或对象，可能需要较长时间来迁移。
存储迁移 存储迁移的约束与限制有哪些？ 迁移对源端和目的端有什么要求？ 进行存储迁移时，如何选择集群规格？ 影响大对象迁移速度的关键因素有哪些？ 影响小对象迁移速度的关键因素有哪些？ 如何监控和查看影响迁移速度的关键指标? 为什么存储迁移工作流进度长时间没有变化？ 将HTTP/H
创建存储迁移工作流 本节介绍如何使用存储迁移标准模板创建存储迁移工作流。 前提条件 已完成准备工作。 已创建集群。 （可选）已打通SFS 1.0、3.0和集群之间的网络 操作步骤 登录迁移中心管理控制台。 在左侧导航栏选择“实施>迁移工作流”，进入迁移工作流页面。在页面左上角的当
关于OBS、NAS和SMB存储系统之间进行异构迁移的对象长度限制说明 在OBS、NAS和SMB存储系统之间进行异构迁移时，不同系统对文件夹和路径长度的限制存在不同。了解并遵守每个系统的对象长度限制是成功执行异构迁移的关键。根据具体的迁移方向，确保对象的路径长度符合目的端系统的要求，以避免迁移失败或数据不一致的问题。
存储迁移相关最佳实践 迁移其他云平台存储数据至华为云 OBS多前缀批量迁移 归档存储（冷存储）数据迁移 SFS1.0迁移至SFS 3.0 通过HTTP迁移MinIO存储数据到华为云OBS 通过HTTP迁移Ceph存储数据到华为云OBS
迁移中心为了确保数据传输安全，采用加密通道（HTTPS、SSH）进行数据传输。 凭证加密 在线采集时，采集凭证会加密存储在MgC服务端。用户也可以通过在源端部署Edge实施采集，采集凭证加密存储在本地Edge。
如何获取微软云的访问凭证 获取存储账户/密钥 在 Azure 门户中单击“存储账户”，选择待迁移的存储账户。 在“安全性和网络”下，选择“访问密钥” 。 此时会显示账户访问密钥，以及每个密钥的完整连接字符串。 选择“显示”，即可显示访问密钥和连接字符串，单击复制图标即可复制密钥和字符串。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
