检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
主要迁移步骤如下所示: 使用OMS完成源端数据的全量迁移。 多次增量迁移数据,减少源端和目的端数据差异。 多次增量迁移后,确认一个能够接受的增量迁移时间窗,停止源端业务,启动最后一次增量迁移,迁移完成后启动目的端写业务。 迁移过程中,对象存储迁移服务会调用源端云服务提供商的对象存储服务接口
支持后,迁移时将从CDN域名获取源端对象。 migrate_since Long 迁移指定时间(时间戳,毫秒),表示仅迁移在指定时间之后修改的源端待迁移对象。默认为0,表示不设置迁移指定时间。 最小值:0 最大值:9223372036854775807 缺省值:0 migrate_speed
当需要发送SMN消息时使用该字段,参见表7。 migrate_since 否 long 以时间戳方式表示的迁移指定时间(单位:s),表示仅迁移在指定时间之后修改的源端待迁移对象。默认不设置迁移指定时间。 source_cdn 否 JSONObject 指定是否启用CDN迁移支持,若包含
创建目的端桶 创建用于存放迁移数据的桶,具体操作参见创建桶。 解冻源端归档数据 当源端对象存储有数据处于归档状态,直接使用OMS迁移,解冻时间长导致迁移时间较长,推荐您提前进行解冻操作,待解冻完成后再创建迁移任务。阿里云OSS提供了ossutil工具来解冻归档文件,支持解冻指定前缀的归档
后,迁移时将从CDN域名获取源端对象。 migrate_since 否 Long 以时间戳方式表示的迁移指定时间(单位:秒),表示仅迁移在指定时间之后修改的源端待迁移对象。默认不设置迁移指定时间。 最小值:0 最大值:9223372036854775807 缺省值:0 object_overwrite_mode
创建目的端桶 创建用于存放迁移数据的桶,具体操作参见创建桶。 解冻源端归档数据 当源端对象存储有数据处于归档状态,直接使用OMS迁移,解冻时间长导致迁移时间较长,推荐您提前进行解冻操作,待解冻完成后再创建迁移任务。优刻得 US3提供了us3cli工具来解冻归档文件,支持批量解冻。具体操作请参见优刻得US3归档数据迁移方案。
创建目的端桶 创建用于存放迁移数据的桶,具体操作参见创建桶。 解冻源端归档数据 当源端对象存储有数据处于归档状态,直接使用OMS迁移,解冻时间长导致迁移时间较长,推荐您提前进行解冻操作,待解冻完成后再创建迁移任务。金山云对象存储KS3,可通过控制台解冻归档对象,也可通过调用Restore
_modified:默认配置。迁移前后,通过对比源端和目的端对象大小+最后修改时间,判断对象是否已存在或迁移后数据是否完整。源端与目的端同名对象大小相同,且目的端对象最后修改时间晚于源端对象最后修改时间,则代表该对象已存在/迁移成功。crc64:目前仅支持华为/阿里/腾讯。迁移前
字符。 最小长度:0 最大长度:255 migrate_since 否 Long 以时间戳方式表示的迁移指定时间(单位:秒),表示仅迁移在指定时间之后修改的源端待迁移对象。默认不设置迁移指定时间。 最小值:0 最大值:9223372036854775807 缺省值:0 bandwidth_policy
CURRENT DEPRECATED SUPPORTED updated String 版本更新时间。 格式为“yyyy-mm-ddThh:mm:ssZ”。 其中,T指某个时间的开始;Z指UTC时间。 最小长度:0 最大长度:32 表4 Link 参数 参数类型 描述 href String
源端对象个数/大小<目的端对象个数/大小 源端对象个数<目的端对象个数 可能原因: OBS和友商控制台,统计可能存在部分时延,迁移后需要等待少许时间。 目的端桶存在客户业务系统切换到华为云后,自主写入的新增对象/OMS上传的对象列表文件。 源端对象大小<目的端对象大小 可能原因: 目的端桶存在OMS上传的相关配置文件。
如果桶内数据容量超过3TB,数量超过500万个,推荐您创建迁移任务组进行迁移。系统会根据桶内对象的存量和数量分布,自动划分为多个迁移任务,提高迁移效率、减少迁移时间。 父主题: 产品咨询
象的通知。 单击“创建函数”按钮,进入函数详情界面。 单击“设置”页签,选择“常规设置”,“执行超时时间”建议设置为60s,单击“保存”按钮,如图5所示。 图5 设置执行超时时间 单击“确定”,完成触发器的创建。 源端同步请求函数工作流创建与配置完成后,需要配置测试事件来进行检验。
数据识别与准备 在迁移开始前,华为云OMS服务会先对源端存储系统中的数据进行识别,包括对象大小、最后修改时间以及位置等关键信息。基于这些信息,服务会为用户生成一个对应的迁移任务配置,确保迁移过程的高效性和准确性。 父主题: 迁移工作原理
编译后的jar包,完成后单击“部署”。 在“设置 > 常规设置”页签,设置如下信息,完成后单击“保存”。 内存:选择“512”。 执行超时时间:输入“60”。 函数执行入口:输入“com.huawei.demo.RetryTask.checkAndRetryTask”。 函数执行入口格式为:[包名]
方式来执行覆盖规则。规则说明参见表1。 表1 同名对象覆盖规则说明 覆盖规则 说明 大小/最后修改时间对比覆盖 对于源端和目的端存在的同名对象,如果对象大小相同,则保留最后修改时间较新的对象;如果对象大小不同,则源端覆盖目的端。 不覆盖 对于源端和目的端存在的同名对象,跳过源端对象,保留目的端对象。
如何查看迁移任务中迁移了哪些对象? 如何查看迁移任务组中迁移了哪些对象? 如何查看同步任务中迁移了哪些对象? OMS同步任务可以指定时间段吗? OMS如何迁移指定时间的文件? OMS如何迁移指定文件后缀的文件? OMS是否支持批量桶迁移? 目的端桶存储类型为归档存储,迁移到目的端桶的数据存储类型是什么类型?
对象存储迁移服务-成长地图 | 华为云 对象存储迁移服务 对象存储迁移服务(Object Storage Migration Service,OMS)是一种线上数据迁移服务,帮助您将其他云服务商对象存储服务中的数据在线迁移至华为云的对象存储服务(Object Storage Service,OBS)中。
出现该提示的主要原因是源端对象存储有数据处于归档状态,需要解冻数据后再进行迁移。您可以使用以下方式进行处理: 使用工具或在控制台恢复源端归档存储,建议恢复时间设置较长。 源端为其他云服务厂商时,具体解冻方式以源端云服务商为准。 源端为华为云时,使用obsutil恢复归档存储对象后重新迁移。 使用
bandwidth_policy数据结构 参数 是否必选 参数类型 描述 start 是 String 流量控制开始时间(包含),格式为“hh:mm”。例如“10:03”表示10时03分。 end 是 String 流量控制结束时间(包含),格式和start参数相同。 max_bandwidth 是 int 时段