检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用“回源配置方案”迁移增量对象数据 本节指导用户使用回源配置方案迁移增量对象数据。 优势 此方案优势在于: 业务零中断,增量迁移间未同步的数据通过回源配置保证用户无感知。 可靠性高,割接前可提前验证,迁移后可校验。 操作流程 “回源配置方案”迁移增量对象数据流程图,如图1所示。
源端同步请求函数工作流创建与配置完成后,需要配置测试事件来进行检验。 单击“代码”页签,在代码源区域的下拉菜单中选择“配置测试事件”,弹出配置测试事件页面,如图6所示。配置相关参数,参见表4。 图6 配置测试事件 表4 参数配置说明 参数 配置说明 配置测试事件 选择创建新的测试事件
ime(可以设置最后修改时间),如果存在元数据mtime则目的端最后修改时间被固定,因此导致校验失败,该问题并不影响对象的正常迁移,您可以忽略该问题。 父主题: 异常恢复
各云服务商配置同步请求教程 阿里云OSS配置同步请求 腾讯云COS配置同步请求
bject_lists/时间戳.success_list.txt。 忽略对象数大于0 在任务详情中找到“忽略对象列表路径”,单击路径链接跳转到OBS控制台,下载相应的txt文件,查看忽略对象列表。 说明: 忽略对象列表路径说明:oms/task/任务名称/skip_object_lists/时间戳
阿里云OSS配置同步请求 背景信息 创建同步任务后,您需要在源端配置同步请求,以确保源端云服务商的对象存储服务可以针对源端新增、修改对象实时调用OMS同步接口(例如,通过消息通知或函数计算服务方式),以完成对源端新增、修改对象数据的同步迁移。 配置条件 实时获取源端新增、修改对象名称。
以迁移速度会很慢。 解决方式:先在源端批量解冻,再进行迁移,具体方案请参见迁移归档存储数据。 存在大量的忽略对象 在迁移过程中会先通过对比判断对象是否需要迁移,当存在大量忽略对象时,由于对比对象的操作有时间消耗,且不计入流量,所以迁移速度会显示很慢。 这种情况请耐心等待,无法提升迁移的速度。
r.uri = r.uri + "?" + queryString (可选)展开“高级配置”,您可以根据实际需求修改环境配置、权限配置、层配置、网络配置等,详情参见函数相关配置。 配置触发器,在“创建触发器”中选择自定义创建。 触发方式:选择“COS触发”。 COS Bucket:选择同步任务的源端桶。
_lists/同步子任务名称/时间戳.success_list.txt。 如有忽略对象列表,可在对象列表中找到“skip_object_lists”文件夹,下载相应的txt文件,查看忽略对象列表。 忽略对象列表路径说明:oms/sync_task/同步任务ID/skip_obje
_lists/任务名称/时间戳.success_list.txt。 忽略对象数大于0 在任务详情中找到“忽略对象列表路径”,单击路径链接跳转到OBS控制台,下载相应的txt文件,查看忽略对象列表。 说明: 忽略对象列表路径说明:oms/task_group/任务组ID/skip_
_lists/任务名称/时间戳.success_list.txt。 忽略对象数大于0 在任务详情中找到“忽略对象列表路径”,单击路径链接跳转到OBS控制台,下载相应的txt文件,查看忽略对象列表。 说明: 忽略对象列表路径说明:oms/task_group/任务组ID/skip_
选择是否迁移元数据。 选择“忽略元数据”,OMS只迁移源端Content-Type、Content-Encoding元数据。 选择“保留元数据”,OMS会迁移支持范围内的元数据。 须知: 仅支持中文字符、英文字符、数字和中划线【-】迁移。除上述字符外,其他所有字符均不支持。 如果选择“忽略元数据迁移
源端云厂商新增谷歌云。 2023-12-08 第二十一次正式发布。 目的端配置选项区域中新增“配置存储策略”功能。 2023-07-10 第二十次正式发布。 更新查看审计日志。 2023-01-18 第十九次正式发布。 更新源端配置同步请求章节。 2022-11-08 第十八次正式发布。 更新查看迁移任务。
在“自定义域名传输协议”中选择传输协议。 说明: HTTP协议安全级别低于HTTPS协议,推荐使用HTTPS协议。 填写“桶自定义域名”。 检查 单击“检查”按钮,检查参数设置是否正确。 检查未通过,右上角提示对应的错误原因。 检查通过,继续进行其他迁移配置。 设置“目的端配置选项”区域参数。 保存到指定前缀。 选
在“自定义域名传输协议”中选择传输协议。 说明: HTTP协议安全级别低于HTTPS协议,推荐使用HTTPS协议。 填写“桶自定义域名”。 检查 单击“检查”按钮,检查参数设置是否正确。 检查未通过,右上角提示对应的错误信息。 检查通过,继续进行其他迁移配置。 设置“目的端配置选项”区域参数。 保存到指定前缀。 选
统计本月截止目前同步失败的对象,可通过对象列表在目的桶中查看同步失败对象列表。 忽略 统计本月截止目前同步忽略的对象,可通过对象列表在目的桶中查看忽略对象列表。 说明: 当目的端已存在的对象(对象名、大小相同,且创建时间在源端之后),OMS不会进行迁移,计为忽略对象。 同步对象容量(本月) 统计本月截止目前已成功同步对象的总量大小。
bject_lists/时间戳.success_list.txt。 忽略对象数大于0 在任务详情中找到“忽略对象列表路径”,单击路径链接跳转到OBS控制台,下载相应的txt文件,查看忽略对象列表。 说明: 忽略对象列表路径说明:oms/task/任务名称/skip_object_lists/时间戳
HTTP协议安全级别低于HTTPS协议,推荐使用HTTPS协议。 如果使用了防盗链,建议关闭防盗链或联系华为云技术支持。 填写“桶自定义域名”。 检查 单击“检查”按钮,检查参数设置是否正确。 检查未通过,右上角提示对应的错误信息。 检查通过,继续进行其他迁移配置。 设置“目的端配置选项”区域参数。
华为云只负责收取调用目的端API的费用;调用源端API的费用和源端出口流量费用均由源端云服务商收取。 迁移时忽略的对象由于需要判断对象是否存在+对比数据,因此在源端和目的端均会产生API请求费用,但由于忽略对象并没有迁移,因此不会产生流量费用。
最大值:1 real_size Long 实际迁移对象总大小(Byte),忽略对象的大小不会统计在内。 最小值:0 最大值:9223372036854775807 skipped_num Long 迁移忽略对象数(存在以下两种情况会自动跳过:1.源端对象最后修改时间在迁移指定时间前;2