检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
特殊场景迁移实践 迁移归档存储数据 设置“保存到指定前缀”参数
名称,进入函数详情页,在“代码”页签,代码选择“上传自JAR文件”,上传样例代码编译后的jar包,完成后单击“部署”。 在“设置 > 常规设置”页签,设置如下信息,完成后单击“保存”。 内存:选择“512”。 执行超时时间:输入“60”。 函数执行入口:输入“com.huawei
对象。 migrate_since Long 迁移指定时间(时间戳,毫秒),表示仅迁移在指定时间之后修改的源端待迁移对象。默认为0,表示不设置迁移指定时间。 最小值:0 最大值:9223372036854775807 缺省值:0 migrate_speed Long 任务组迁移速度(Byte/s)
CRC64_COMPARISON_OVERWRITE FULL_OVERWRITE dst_storage_policy String 目的端存储类型设置,当且仅当目的端为华为云OBS时需要,默认为标准存储 STANDARD:华为云OBS标准存储 IA:华为云OBS低频存储 ARCHIVE:华为云OBS归档存储
Kodo,进入对象存储服务的概览页面。 单击“空间管理”,进入空间管理页面。 单击待迁移的空间名称,进入空间概览。 在空间概览的基础配置区域,单击“空间授权”,进入空间设置页签。 单击“新增授权”,右侧弹出窗口,填写用户邮箱,授予权限选择“只读”,单击“确定”。 目的端华为云:参见创建访问密钥(AK/SK)和
CRC64_COMPARISON_OVERWRITE FULL_OVERWRITE dst_storage_policy String 目的端存储类型设置,当且仅当目的端为华为云OBS时需要,默认为标准存储 STANDARD:华为云OBS标准存储 IA:华为云OBS低频存储 ARCHIVE:华为云OBS归档存储
我如何能知道迁移任务的速度? 问题处理 创建迁移任务时提示“您选择的目的端桶所在区域与控制台Region不一致,请选择所在区域为xxx的桶或切换控制台Region为xxx”该如何处理? 迁移任务执行失败怎么办? 迁移任务组执行失败怎么处理? 迁移失败后提示“无法读取归档类型数据,请解冻数据后进行迁移”该如何处理?
migrate_since long 迁移指定时间,表示仅迁移在指定时间之后修改的源端待迁移对象。默认为0,表示不设置迁移指定时间。 task_type String 任务类型,为空则默认设置为object。 list:对象列表迁移 object:文件/文件夹迁移 prefix:对象前缀迁移 source_cdn
对象。 migrate_since Long 迁移指定时间(时间戳,毫秒),表示仅迁移在指定时间之后修改的源端待迁移对象。默认为0,表示不设置迁移指定时间。 最小值:0 最大值:9223372036854775807 缺省值:0 migrate_speed Long 任务组迁移速度(Byte/s)
出现该提示的主要原因是源端对象存储有数据处于归档状态,需要解冻数据后再进行迁移。您可以使用以下方式进行处理: 使用工具或在控制台恢复源端归档存储,建议恢复时间设置较长。 源端为其他云服务厂商时,具体解冻方式以源端云服务商为准。 源端为华为云时,使用obsutil恢复归档存储对象后重新迁移。 使用OM
移。 自定义域名迁移 支持使用源端桶自定义域名迁移。 记录失败对象 支持记录迁移失败对象,以及重传这些失败对象。 流量控制 支持对不同时段设置最大流量带宽。 断点续传 如果出现短暂的网络中断,支持手动重启迁移任务,从中断的位置继续开始迁移任务,已迁移完成的数据无需重新迁移。 结果通知
开启后,如果遇到归档类型数据,会自动解冻再进行迁移。 缺省值:false dst_storage_policy 否 String 目的端存储类型设置,当且仅当目的端为华为云OBS时需要,默认为标准存储 STANDARD:华为云OBS标准存储 IA:华为云OBS低频存储 ARCHIVE:华为云OBS归档存储
迁移完成后校验数据需要一次请求:head 对目的端的操作 迁移前对比数据需要一次请求(判断对象是否存在):head 迁移数据需要一次请求:put 迁移完成后设置数据存储类型需要一次请求:put 迁移完成后校验数据需要一次请求:head 目的端存在源端同名对象(大小一致,且目的端最后修改时间晚于源端最后修改时间),重复对象,无需迁移。
当迁移任务失败时,您可以手动重启迁移失败的任务,重新执行迁移。 单击任务操作列的“更多 >重启 ”。 在弹出窗口中输入源端和目的端的AK、SK后,单击“确定”。 说明: 如果设置了记录失败对象,还需要选择迁移范围,包括所有对象和失败对象。 如果启用了CDN鉴权,还需要输入校验秘钥。 任务状态显示为“迁移中”。 删除迁移任务
源端对象个数/大小<目的端对象个数/大小 源端对象个数<目的端对象个数 可能原因: OBS和友商控制台,统计可能存在部分时延,迁移后需要等待少许时间。 目的端桶存在客户业务系统切换到华为云后,自主写入的新增对象/OMS上传的对象列表文件。 源端对象大小<目的端对象大小 可能原因: 目的端桶存在OMS上传的相关配置文件。
API 密钥管理页面。 在 API 密钥管理页面,单击“创建”按钮,弹出“新建API密钥”窗口。 在创建窗口中,输入您想要为 API 密钥设置的名称,例如“我的API密钥”。 创建窗口中,不填写IP白名单,否则将造成迁移节点无法访问源端对象存储服务API。 单击“提交”按钮后,系统会生成一个新的
403 Forbidden 请求被拒绝访问。 返回该状态码,表明请求能够到达服务端,且服务端能够理解用户请求,但是拒绝做更多的事情,因为该请求被设置为拒绝访问,建议直接修改该请求,不要重试该请求。 404 Not Found 所请求的资源不存在。 建议直接修改该请求,不要重试该请求。 405
在左侧导航窗格中,选择用户,界面右上角选择创建用户。 在指定用户详细信息页面中的用户详细信息下的用户名中,输入新用户的名称。 单击下一步。在设置权限页面,选择直接附加策略,选中AmazonS3ReadOnlyAccess策略。 单击下一步。查看和创建页面,确认创建用户信息。 单击创
段,取回归档存储对象。获取方式参见目的端桶权限获取。 已在OBS服务中创建桶。 操作步骤 使用工具或在控制台恢复源端归档存储,建议恢复时间设置较长。 源端为其他云服务厂商时,具体解冻方式以源端云服务商为准。 源端为华为云时,使用obsutil恢复归档存储对象后重新迁移。 登录管理控制台。
于500万,建议参考创建迁移任务组。 少量数据建议参考创建迁移任务。 迁移完成+业务验证OK后。登录OBS控制台,创建数据回源规则并将业务切换到华为云。 具体操作步骤,请参考创建数据回源规则。 再次使用OMS迁移源端全量数据,执行增量迁移,并全量比较源端目的端对象差异,将源端所有