检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
请求示例 查询2c0689c860ad4728a497c91ec0844383项目下的0d146099-8cf4-437d-b6ef-88e043771c8b任务的统计 GET https://{endpoint}/v2/2c0689c860ad4728a497c91ec0844
使用“回源配置方案”迁移增量对象数据 本节指导用户使用回源配置方案迁移增量对象数据。 优势 此方案优势在于: 业务零中断,增量迁移间未同步的数据通过回源配置保证用户无感知。 可靠性高,割接前可提前验证,迁移后可校验。 操作流程 “回源配置方案”迁移增量对象数据流程图,如图1所示。
询功能,可用于支撑安全分析、合规审计、资源跟踪和问题定位等常见应用场景。 CTS的详细介绍和开通配置方法,请参见CTS快速入门。 图1 云审计服务 日志 用户开通云审计服务并创建和配置追踪器后,CTS可记录与对象存储迁移服务相关的操作事件。 详细的操作列表以及查看方法,请参见查看审计日志。
CDN鉴权秘钥,如果CDN需要进行鉴权,则此选项为必选。 无需授权:无需配置此项。 Qiniu:无需配置此项。 Aliyun:根据authentication_type指定的鉴权方式配置此项。 KingsoftCloud:无需配置此项。 最小长度:0 最大长度:255 authentication_type
BandwidthPolicyDto objects 配置流量控制策略。数组中一个元素对应一个时段的最大带宽,最多允许5个时段,且时段不能重叠。 数组长度:0 - 5 smn_config SmnInfo object SMN消息发送配置。 source_cdn SourceCdnResp
在迁移开始前,华为云OMS服务会先对源端存储系统中的数据进行识别,包括对象大小、最后修改时间以及位置等关键信息。基于这些信息,服务会为用户生成一个对应的迁移任务配置,确保迁移过程的高效性和准确性。 父主题: 迁移工作原理
设置任务参数页面 在“源端配置选项”区域,选择迁移方式为“选择文件/文件夹”,如图6所示。 图6 选择迁移方式 单击“选择”按钮,弹出“选择文件/文件夹”窗口,如图7所示。勾选待迁移的文件(单个或多个文件),单击“确定”按钮。 图7 选择文件 如图8所示,在“目的端配置选项”区域,保存到
腾讯云 谷歌云 七牛云 青云 百度云 金山云 优刻得 支持的功能 功能 说明 创建同步任务 填写源端和目的端AK/SK并配置同步任务参数。 源端配置同步请求 源端配置同步请求,以确保源端云服务提供商的对象存储服务可以针对源端新增、修改对象实时调用OMS同步接口(例如通过消息通知或函数
启失败的迁移任务。 确认目的端桶的基础配置中是开启了默认加密,如果需要此功能,请重新创建相同源端和目的端的任务,并在第二步设置任务参数时,在目的端配置选项的服务端加密参数勾选KMS。 如果目的端桶开启了默认加密,但不需要此功能,请在基础配置中关闭默认加密,并重启失败任务。 如果目
根据源端文件数量,自行评估集群大小及规格,将用于工作流中新建集群。 开始配置工作流 基于存储迁移工作流模板配置更加详细的参数,帮助您完成迁移工作。 确认并创建工作流,开始执行迁移任务。 在工作流详情页面,可以查看该存储迁移工作流的配置信息和资源迁移进度。 具体操作步骤前参见创建存储工作流。 父主题:
修订记录 发布日期 修订记录 2024-05-07 第十五次正式发布。 新增阿里云OSS配置同步请求 新增腾讯云COS配置同步请求 2024-03-22 第十四次正式发布。 新增自动检查并重启失败的迁移任务 新增青云QingStor迁移至华为云OBS教程 新增谷歌云storage迁移至华为云OBS教程
单击“空间管理”,进入空间管理页面。 单击待迁移的空间名称,进入空间概览。 选择“域名管理”页签,单击“绑定域名”,进入“添加域名”页面。 在“域名配置”、“源站配置”、“缓存配置”区域,根据需求,设置参数。 单击“创建”,完成CDN域名绑定。 创建目的端桶 创建用于存放迁移数据的桶,具体操作参见创建桶。
源端云厂商新增谷歌云。 2023-12-08 第二十一次正式发布。 目的端配置选项区域中新增“配置存储策略”功能。 2023-07-10 第二十次正式发布。 更新查看审计日志。 2023-01-18 第十九次正式发布。 更新源端配置同步请求章节。 2022-11-08 第十八次正式发布。 更新查看迁移任务。
数据迁移 根据迁移配置,华为云OMS服务会开始从源端存储系统拉取数据。同时,服务会确保数据的完整性和一致性,避免在迁移过程中出现数据丢失或损坏的情况。服务还支持断点续传功能,当迁移过程中出现网络中断或其他异常情况时,服务可以从断点处恢复传输,确保数据的完整性和迁移的连续性。 父主题:
的数据)并确认选择。 配置需要的高级参数并创建任务,即可迁移已选择的根目录数据。 对象前缀方式 在创建任务时,迁移方式选择“输入对象前缀”。 在输入框键入需要迁移的对象前缀(包括根目录下的数据)并单击“添加”。 如需迁移多个不同前缀对象,可继续添加。 配置需要的高级参数并创建任务,即可迁移已添加的根目录数据。
表1 OMS最佳实践一览表 最佳实践 使用场景 优势 使用“回源配置方案”迁移增量对象数据 大批量数据迁移场景使用,优先选择此方案。此方案受OBS限制,具体的约束请见数据回源。 业务零中断,增量迁移间未同步的数据通过回源配置保证用户无感知。 可靠性高:割接前用户业务校验充分,增量迁移时全量扫描校验确保数据无遗漏。
创建同步任务后,该任务状态显示为同步中,仅代表可以接受源端发送的同步请求并进行同步,需要您前往源端完成同步请求的配置,详情请参见源端配置同步请求。通过源端配置,使得源端新增/修改对象能够发送同步请求。配置完成后,您的数据将开始进行同步迁移。 已停止 表明停止对源端对象存储服务数据的同步。 说明:
迁移成功,但是迁移进度显示为0%;总容量有数据,但是已传输容量显示为0。 问题分析 该现象一般出现在增量迁移场景。创建增量迁移任务时,在“源端配置选项”区域,元数据迁移方式选择了“保留元数据”。增量迁移时,如果源端对象仅元数据信息发生变化,对象的内容、大小并没有改变,则仅迁移改变的元
AK/SK。为防止大量任务阻塞在等待中,请控制创建任务的频率。 如果单个对象大小超过500G,建议您通过提交工单的方式,开通并发分片白名单配置,提升迁移速率。 在迁移过程中,系统将自动在目的端桶创建一个名为“OMS”的临时文件夹。严禁手动操作此文件夹,包括但不限于修改、删除或添加
同步任务 创建同步任务 源端配置同步请求 监控同步任务状态