检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
问”。 授权后需等待15-30分钟才可生效。 目的端桶权限获取 目的端桶需要的权限包括:列举桶内对象,获取桶区域位置,获取桶列表,获取对象元数据,修改对象元数据,获取对象内容,上传对象,列举多段上传任务,取回归档存储对象。 目的端权限获取方式分为两种,可任选一种方式获取。 基于系统策略获取OBS
大小/最后修改时间对比覆盖 对于源端和目的端存在的同名对象,如果对象大小相同,则保留最后修改时间较新的对象;如果对象大小不同,则源端覆盖目的端。 不覆盖 对于源端和目的端存在的同名对象,跳过源端对象,保留目的端对象。 全覆盖 对于源端和目的端存在的同名对象,源端对象直接覆盖目的端对象。 父主题: 产品咨询
目的端桶存储类型为归档存储,迁移到目的端桶的数据存储类型是什么类型? OMS迁移后的数据存储类型与目的端桶默认的数据存储类型保持一致。例如:当目的端桶存储类型为归档存储时,迁移到目的端桶后数据存储类型为归档存储。 如果需要修改相关数据存储类型,可以通过对象生命周期来调整。 归档存储数据迁移可参考迁移归档存储数据。
一般情况,对象存储服务的迁移速度的参考值是10-20TB每天。由于迁移速度受源端对象个数、大小以及公网传输距离影响,建议用户创建一个实际数据的迁移任务来测试实际迁移速度,实际最大迁移速度为单个任务平均速度的5倍(单个Region内并发任务数最大为5)。 单个迁移任务速度可以在“迁移任务”界面中查看实时任务迁移速度。
源端同步请求函数工作流创建与配置完成后,需要配置测试事件来进行检验。 单击“代码”页签,在代码源区域的下拉菜单中选择“配置测试事件”,弹出配置测试事件页面,如图6所示。配置相关参数,参见表4。 图6 配置测试事件 表4 参数配置说明 参数 配置说明 配置测试事件 选择创建新的测试事件 事件模板 下拉选择
示。 请通过以下步骤重试失败的迁移任务。 单击任务列表左上方的“重试失败任务”,进入重试失败任务界面。 选择要重试的任务,并输入源端和目的端的AK/SK,单击“确认”。 父主题: 异常恢复
使用“源端/目的端双写方案”方案迁移增量对象数据 操作场景 本章节指导用户使用“源端/目的端双写方案”方案迁移增量对象数据。此方案优势在于可以确保业务零中断。 主要迁移步骤如下所示: 用户在全量迁移前,需配置业务同时向源端和目的端写数据,保证增量数据在两端都存在。 使用OMS完成
单击“连接源端桶”。 设置“选择目的端”区域的参数,参见表2。 表2 设置目的端参数 参数 设置 目的端访问密钥(Access Key 填写目的端华为云的访问密钥(AK)。 目的端私有访问密钥(Secret Access Key) 填写目的端华为云的私有访问密钥(SK)。 桶名 选择存放迁移数据的华为云OBS桶。
是否支持同步源端删除操作? OMS不支持同步源端删除操作。 您可以通过脚本列举目的端对象,基于列举结果排查源端删除对象是否存在。若源端删除对象存在于列举结果中,请自行删除。 父主题: 产品咨询
源端对象个数/大小<目的端对象个数/大小 源端对象个数<目的端对象个数 可能原因: OBS和友商控制台,统计可能存在部分时延,迁移后需要等待少许时间。 目的端桶存在客户业务系统切换到华为云后,自主写入的新增对象/OMS上传的对象列表文件。 源端对象大小<目的端对象大小 可能原因: 目的端桶存在OMS上传的相关配置文件。
MAC算法的使用,存在因源端发生hash碰撞,导致要迁移的数据和实际迁移的数据不一致的风险,为确保数据一致性,可以在迁移后再次对源端、目的端数据进行完整的内容校验。 父主题: 安全
创建迁移任务时提示“您选择的目的端桶所在区域与控制台Region不一致,请选择所在区域为xxx的桶或切换控制台Region为xxx”该如何处理? 为了最大限度提升迁移速度,创建迁移任务的区域要与目的端桶所在区域保持一致。 解决方案:重新选择下图①的区域,使图中①、②区域一致。 父主题:
迁移并行文件系统对象时,源端对象最后修改时间晚于目的端对象,导致一致性校验失败,重试迁移依然校验失败,并且目的端对象最后修改时间一直保持不变。 问题分析 出现该问题可能是因为并行系统存在元数据mtime(可以设置最后修改时间),如果存在元数据mtime则目的端最后修改时间被固定,因此导致校验失败
特定分片,且满足如下条件: 1. 修改后文件大小一致 ; 2. 源端对象最后修改时间早于目的端对象最后修改时间。 最终会导致数据不一致。 删除数据: 源端的删除操作OMS不会同步到目的端,需要对删除的对象单独处理。 父主题: 产品咨询
您可直接登录管理控制台进行对象存储迁移操作,迁移流程如图1所示。 图1 对象存储迁移流程 具体说明: 创建源端和目的端的访问密钥(AK/SK)。 源端:参见源端云服务提供商的相关资料。 目的端:参见创建访问密钥(AK/SK)。 在对象存储服务中创建用于存放迁移数据的桶。 参见创建桶。 在对象存储迁移服务中创建迁移任务,开始迁移。
由于在迁移过程中删除了目的端oms创建的文件,导致任务异常。 源端桶/目的端桶权限不足,无法读取/下载文件,导致任务迁移失败。 解决方案 如果因为迁移执行过程中删除了OMS在目的端创建的文件,导致迁移任务失败。请重新创建迁移任务/迁移任务组进行迁移。 请参考如何获取源端桶权限和目的端桶权限?配置源端桶/目的端桶权限后重试任务。
创建华为云的访问密钥(AK/SK)并授权 目的端华为云:参见创建访问密钥(AK/SK)和目的端桶权限获取创建AK/SK并添加权限。 创建目的端桶 创建用于存放迁移数据的桶,具体操作参见创建桶。 创建URL列表文件并上传至OBS桶 创建迁移任务:将待迁移的文件URL和目的端对象名称写入URL列表文件,
"***secret_key***" region = 'ap-beijing' 选择测试事件(COS 对象存储的 PUT 事件模板、COS 对象存储的 POST 事件模板),单击“测试”。 在返回结果为true表示测试成功。若测试失败,请检查参数配置和云函数权限配置。 父主题: 各云服务商配置同步请求教程
导致迁移失败。 URL列表文件中每行使用制表符\t分隔URL和目的端对象名称,格式为:[URL][制表符][目的端对象名称],其中源端对象名称如果包含中文、特殊字符必须使用URL Encode对URL编码;目的端对象名称如果包含中文、特殊字符也需要使用URL Encode编码。例如:
选择源端桶,该桶要与同步任务所选源端桶保持一致。 触发事件 保持默认即可。 角色名称 保持默认即可。 OSS触发器创建完成后,选择测试页签,事件模板选择“对象存储 OSS”,自定义事件名称,单击“测试函数”执行测试,执行结果为true表示成功。若调用失败,请检查参数配置和函数计算权限配置。 父主题: 各云服务商配置同步请求教程