检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
与目的端对象元数据中不存在CRC64值,则系统会默认使用大小/最后修改时间校验方式来校验。no_check:目前仅支持HTTP/HTTPS数据源。当源端对象无法通过标准http协议中content-length字段获取数据大小时,默认数据下载成功即迁移成功,不对数据做额外校验,且
致瞬时速度为0的情况。 迁移归档数据时,选择“自动解冻归档数据” 由于每个迁移任务的最大并发数是固定的,且在迁移时,才会去解冻归档数据,解冻归档耗时也较长,所以迁移速度会很慢。 解决方式:先在源端批量解冻,再进行迁移,具体方案请参见迁移归档存储数据。 存在大量的忽略对象 在迁移过
迁移任务 适用于单个桶数据量不超过3 TB或对象个数不超过500万的对象存储迁移场景,通过创建对象存储迁移任务,可将对象数据进行快速迁移。 对客户开放迁移任务API,客户可根据自身业务诉求进行定制化开发,例如周期性定时创建同步任务。 创建迁移任务 查看迁移任务 管理迁移任务
从CDN域名获取源端对象。若包含此字段则为支持,否则为不支持。 auto_restore Boolean 是否自动解冻归档数据。开启后,如果遇到归档类型数据,会自动解冻再进行迁移。 enable_failed_object_recording Boolean 是否记录失败对象。开
TRF.0201 解冻归档数据失败。 请前往源端手动解冻归档数据后再迁移。 TRF.0202 存在未解冻的归档数据。 请先解冻后再进行迁移。 TRF.0301 选定的对象列表文件属于归档数据无法获取。 请手动解冻后再进行迁移。 父主题: 附录
迁移限制 OMS将对象数据迁移到并行文件系统有哪些限制? 迁移并行文件系统内的对象数据有哪些限制? 创建迁移任务时提示“您选择的目的端桶所在区域与控制台Region不一致,请选择所在区域为xxx的桶或切换控制台Region为xxx”该如何处理? 源端云服务商不在OMS支持范围,该如何迁移?
相关服务 交互功能 位置 对象存储服务(Object Storage Service,OBS) 将源端对象数据迁移至华为云创建的OBS桶中。 创建单个迁移任务 创建迁移任务组 数据加密服务(Data Encryption Workshop,DEW) 将迁移到华为云OBS桶中的文件进行KMS加密。
移支持后,迁移时将从CDN域名获取源端对象,参见表8。 auto_restore 否 boolean 是否自动解冻归档数据,默认否。 开启后,如果遇到归档类型数据,会自动解冻再进行迁移。 bandwidth_policy 否 JSONArray 配置流量控制策略。数组中一个元素对
安全 身份认证与访问控制 数据保护技术 风险提示 审计与日志
创建任务 删除任务 启动任务 停止任务 修改流量控制策略 查询某个租户的所有任务 查询某个租户的任务总数 查询指定ID的任务 查询租户配额数据
第二十二次正式发布。 更新计费说明中的API请求次数。 2023-06-20 第二十一次正式发布。 约束与限制新增“迁移范围”、“迁移速度”、“归档数据”限制说明。 2023-06-05 第二十次正式发布。 约束与限制新增目的端桶类别限制。 2023-04-25 第十九次正式发布。 更新约束与限制。
特殊场景迁移实践 迁移归档存储数据 设置“保存到指定前缀”参数
自动划分并创建迁移任务,最大化利用服务的并发性能。 支持以组的方式对迁移任务进行管理。 高效传输 并行迁移 支持多对象并行迁移。 解冻归档数据 对于归档类型的对象存储,支持自动解冻该对象后进行迁移。 自定义域名迁移 支持使用源端桶自定义域名迁移。 记录失败对象 支持记录迁移失败对象,以及重传这些失败对象。
0062 部分对象上传失败,请确认没有其他迁移同名对象的任务后重试。 TRF.0063 解冻归档数据失败,请前往源端手动解冻归档数据后再迁移。 TRF.0064 存在未解冻的归档数据,请先解冻后再进行迁移。 TRF.0151 源端AK/SK无效。请输入有效的AK/SK后重试。 TRF
同步任务 创建同步事件 查询同步任务列表 创建同步任务 查询指定ID的同步任务详情 查询指定ID的同步任务统计数据 删除同步任务 暂停同步任务 启动同步任务 父主题: API v2(推荐)
迁移任务组 适用于单个桶数据量大于3 TB或对象个数大于500万的对象迁移场景,迁移任务组将源端待迁移对象智能分解到多个迁移任务中并行迁移。以组的方式进行管理,包括进度查询,暂停恢复,失败重启等。 迁移任务组相较于迁移任务,提供更快的迁移速度和可靠性,便于灵活识别异常对象并快速恢复。
程 谷歌云storage迁移至华为云OBS教程 亚马逊云S3迁移至华为云教程 微软云Blob迁移至华为云OBS教程 HTTP/HTTPS 数据源迁移至华为云OBS教程
US3、亚马逊 S3、微软 Blob、NAS_SMB、NAS_NFS_V3_MOUNT、NAS_NFS_V3_PROTOCOL、HTTP/HTTPS数据源迁移。 逻辑架构图 图1 存储迁移逻辑架构图 迁移流程实施 准备工作 创建目的端对象桶或者弹性文件系统。 评估集群 根据源端文件数量,自
同步任务 创建同步任务可参见创建同步任务。 源端配置同步请求可参见源端配置同步请求。 监控同步任务状态可参见监控同步任务状态。 OMS将对象数据迁移到并行文件系统有以下限制: 若对象名以/结尾,则对象大小必须为0,否则不支持迁移。 对象名中不能出现连续/,例如:test//test。
配置流量控制策略。数组中一个元素对应一个时段的最大带宽,最多允许5个时段,且时段不能重叠。具体参见表3。 表3 bandwidth_policy数据结构 参数 是否必选 参数类型 描述 start 是 String 流量控制开始时间(包含),格式为“hh:mm”。例如“10:03”表示10时03分。