检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用“回源配置方案”迁移增量对象数据 本节指导用户使用回源配置方案迁移增量对象数据。 优势 此方案优势在于: 业务零中断,增量迁移间未同步的数据通过回源配置保证用户无感知。 可靠性高,割接前可提前验证,迁移后可校验。 操作流程 “回源配置方案”迁移增量对象数据流程图,如图1所示。
阿里云OSS配置同步请求 背景信息 创建同步任务后,您需要在源端配置同步请求,以确保源端云服务商的对象存储服务可以针对源端新增、修改对象实时调用OMS同步接口(例如,通过消息通知或函数计算服务方式),以完成对源端新增、修改对象数据的同步迁移。 配置条件 实时获取源端新增、修改对象名称。
源端同步请求函数工作流创建与配置完成后,需要配置测试事件来进行检验。 单击“代码”页签,在代码源区域的下拉菜单中选择“配置测试事件”,弹出配置测试事件页面,如图6所示。配置相关参数,参见表4。 图6 配置测试事件 表4 参数配置说明 参数 配置说明 配置测试事件 选择创建新的测试事件
各云服务商配置同步请求教程 阿里云OSS配置同步请求 腾讯云COS配置同步请求
r.uri = r.uri + "?" + queryString (可选)展开“高级配置”,您可以根据实际需求修改环境配置、权限配置、层配置、网络配置等,详情参见函数相关配置。 配置触发器,在“创建触发器”中选择自定义创建。 触发方式:选择“COS触发”。 COS Bucket:选择同步任务的源端桶。
创建迁移任务组可参见创建迁移任务组。 查看迁移任务组可参见查看迁移任务组。 管理迁移任务组可参见管理迁移任务组。 同步任务 创建同步任务可参见创建同步任务。 源端配置同步请求可参见源端配置同步请求。 监控同步任务状态可参见监控同步任务状态。 OMS将对象数据迁移到并行文件系统有以下限制: 若对象名以/结尾,则对象大小必须为0,否则不支持迁移。
公开读取的CDN常见原因:在CDN配置了防盗链接。 非公开读取的CDN原因为:在OMS控制台配置迁移任务/任务组时,未启用CDN权鉴校验。 解决方法: 针对公开读取的CDN配置了防盗链,建议关闭防盗链。如果基于安全考虑,无法关闭防盗链,可联系华为云技术支持。 针对非公开读取的CDN,在配置迁移任务/任
迁移前请在阿里云CDN控制台关闭CDN的Gzip压缩等优化功能,否则可能导致迁移失败。 不支持URL重定向。 检查 单击“检查”按钮,检查参数设置是否正确。 检查未通过,页面右上角展示对应错误信息。 检查通过,继续进行其他迁移配置。 设置“目的端配置选项”区域参数。 保存到指定前缀。 选择“
AK/SK。为防止大量任务阻塞在等待中,请控制创建任务的频率。 如果单个对象大小超过500G,建议您通过提交工单的方式,开通并发分片白名单配置,提升迁移速率。 在迁移过程中,系统将自动在目的端桶创建一个名为“OMS”的临时文件夹。严禁手动操作此文件夹,包括但不限于修改、删除或添加
填写“桶自定义域名”。 检查 单击“检查”按钮,检查参数设置是否正确。 检查未通过,右上角提示对应的错误信息。 检查通过,继续进行其他迁移配置。 设置“目的端配置选项”区域参数。 保存到指定前缀。 选择“关闭”,源端对象迁移到目的端后,对象名保持不变。 选择“开启”,如图8所示,输入对象前
填写“桶自定义域名”。 检查 单击“检查”按钮,检查参数设置是否正确。 检查未通过,页面右上角展示错误信息。 检查通过,继续进行其他迁移配置。 设置“目的端配置选项”区域参数。 保存到指定前缀。 选择“关闭”,源端对象迁移到目的端后,对象名保持不变。 选择“开启”,如图8所示,输入对象前
填写“桶自定义域名”。 检查 单击“检查”按钮,检查参数设置是否正确。 检查未通过,右上角提示对应的错误原因。 检查通过,继续进行其他迁移配置。 设置“目的端配置选项”区域参数。 保存到指定前缀。 选择“关闭”,源端对象迁移到目的端后,对象名保持不变。 选择“开启”,如图8所示,输入对象前
存放迁移数据的华为云OBS桶。 单击“下一步”,进入“设置任务参数”页签。 设置“源端配置选项”区域参数。 选择迁移方式为“选择文件/文件夹”,如图2所示。 图2 选择迁移方式 设置“目的端配置选项”区域参数。 保存到指定前缀。 选择“关闭”,源端对象迁移到目的端后,对象名保持不变。
迁移前请在阿里云CDN控制台关闭CDN的Gzip压缩等优化功能,否则可能导致迁移失败。 不支持URL重定向。 检查 单击“检查”按钮,检查参数设置是否正确。 检查未通过,页面右上角展示对应错误信息。 检查通过,继续进行其他迁移配置。 设置“目的端配置选项”区域参数。 保存到指定前缀。 选择“
填写“桶自定义域名”。 检查 单击“检查”按钮,检查参数设置是否正确。 检查未通过,右上角提示对应的错误信息。 检查通过,继续进行其他迁移配置。 设置“目的端配置选项”区域参数。 保存到指定前缀。 选择“关闭”,源端对象迁移到目的端后,对象名保持不变。 选择“开启”,如图9所示,输入对象前
填写“桶自定义域名”。 检查 单击“检查”按钮,检查参数设置是否正确。 检查未通过,右上角提示对应的错误信息。 检查通过,继续进行其他迁移配置。 设置“目的端配置选项”区域参数。 保存到指定前缀。 选择“关闭”,源端对象迁移到目的端后,对象名保持不变。 选择“开启”,如图9所示,输入对象前
输入SAS令牌 检查 单击“检查”按钮,检查参数设置是否正确。 检查未通过,页面右上角提示错误信息。 检查通过,继续进行其他迁移配置。 设置“目的端配置选项”区域参数。 保存到指定前缀。 选择“关闭”,源端对象迁移到目的端后,对象名保持不变。 选择“开启”,如图9所示,输入对象前
AK/SK。为防止大量任务阻塞在等待中,请控制创建任务的频率。 如果单个对象大小超过500G,建议您通过提交工单的方式,开通并发分片白名单配置,提升迁移速率。 在迁移过程中,系统将自动在目的端桶创建一个名为“OMS”的临时文件夹。严禁手动操作此文件夹,包括但不限于修改、删除或添加
更新创建用户并使用OMS。 2021-06-21 第十四次正式发布。 优化同步任务章节。 2021-03-24 第十三次正式发布。 优化源端配置同步请求章节。 2021-03-18 第十二次正式发布。 新增创建迁移任务章节。 优化创建迁移任务组章节。 2021-03-10 第十一次正式发布。
第十四次正式发布。 在创建单个迁移任务的目的端配置选项区域中新增“配置存储策略”功能。 2022-11-04 第十三次正式发布。 更新创建单个迁移任务操作步骤。 新增迁移前准备工作章节。 2021-03-31 第十二次正式发布。 优化创建单个迁移任务章节。 2021-03-10 第十一次正式发布。