检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Management,简称IAM)进行精细的权限管理。该服务提供用户身份认证、权限分配、访问控制等功能,可以帮助您安全的控制华为云资源的访问。 通过IAM,您可以在华为云账号中给员工创建IAM用户,并使用策略来控制他们对华为云资源的访问范围。例如您的员工中有负责软件开发的人员,您希望他们拥有对象存储迁移服务(OM
参数类型 描述 obs_bucket 是 String 存放对象列表文件的OBS桶名。 说明: 请确保与目的端桶处于同一区域,否则将导致任务创建失败。 list_file_key 是 String 对象列表文件或URL文件列表对象名。 表5 object_key数据结构 参数 是否必选
迁移示意图 操作步骤说明如下: T1时间:启动全量迁移、华为侧业务验证。 ①全量迁移:将T1时间点之前的源端存量数据全量迁移到华为云(此时客户业务系统还会继续往源端桶新增业务数据)。 ②业务验证:验证迁移数据 + 验证华为侧数据业务(数据读取和写入)。 T2时间:启动首次增量数据迁移、评估数据增量速度。
txt文件,查看忽略对象列表。 说明: 忽略对象列表路径说明:oms/task/任务名称/skip_object_lists/时间戳.skip_list.txt。 失败对象数大于0 在任务详情中找到“失败对象列表路径”,单击路径链接跳转到OBS控制台,下载相应的txt文件,查看失败对象列表。
查看迁移记录,并获取对象列表。 如果... 那么... 已迁移对象数大于0 在任务详情中找到“成功对象列表路径”,单击路径链接跳转到OBS控制台,下载相应的txt文件,查看成功对象列表。 说明: 成功对象列表路径说明:oms/task_group/任务组ID/success_object_lists/任务名称/时间戳
可以在OBS中,将目的桶存储类型修改为标准存储后,再创建迁移任务组。 迁移任务组会将列表文件临时存放在目的桶的oms/路径下,如果目的桶为非标准存储,迁移节点将无法正常读取该路径下的列表文件,导致迁移失败。 父主题: 异常恢复
迁移过程中,会生成迁移记录如成功对象、失败对象、忽略对象等列表文件,存放在您的目的桶中。 获取对象列表的方法请参见下表。 如果... 那么... 已迁移对象数大于0 在任务详情中找到“成功对象列表路径”,单击路径链接跳转到OBS控制台,下载相应的txt文件,查看成功对象列表。 说明: 成功对象列表路
数据,获取对象内容,上传对象,列举多段上传任务,取回归档存储对象。 目的端权限获取方式分为两种,可任选一种方式获取。 基于系统策略获取OBS Administrator权限,获取方式参见创建用户组并授权。 基于IAM细粒度OBS权限,获取方式如下: 登录华为云,在右上角单击“控制台”。
设置迁移指定时间。 task_type String 任务类型,为空则默认设置为object。 list:对象列表迁移 object:文件/文件夹迁移 prefix:对象前缀迁移 source_cdn JSONObject 指定是否启用CDN迁移支持,参见表7。若包含此字段则为支
参数配置说明 参数 配置说明 函数名称 用户自定义。 运行环境 选择Python3。 代码上传方式 选择通过zip包上传代码。将以下两个代码文件index.py和signer.py打包为至一个zip包并上传。 index.py # -*- coding: utf-8 -*- import
华为云OBS之间迁移教程 背景信息 准备工作 创建迁移任务 创建迁移任务组 父主题: 各云服务商迁移教程
不设置迁移指定时间。 task_type String 任务类型,为空默认设置为object。 list:对象列表迁移 object:文件/文件夹迁移 prefix:对象前缀迁移 source_cdn JSONObject 指定是否启用CDN迁移支持,参见表7。启用CDN迁移支持
函数名称:默认填充,可根据需要自行修改。 运行环境:选择Python3.6。 函数代码提交方式选择“本地上传zip包”,将以下两个代码文件index.py和signer.py打包为至一个zip包并上传。 index.py # -*- coding: utf8 -*- from qcloud_cos_v5
否 String 目的端存储类型设置,当且仅当目的端为华为云OBS时需要,默认为标准存储 STANDARD:华为云OBS标准存储 IA:华为云OBS低频存储 ARCHIVE:华为云OBS归档存储 DEEP_ARCHIVE:华为云OBS深度归档存储 SRC_STORAGE_MAPP
登录阿里云OSS控制台。 在左侧导航树,单击“Bucket列表”,进入Bucket列表页面。 单击待迁移的Bucket桶名称,默认进入Bucket桶的“文件管理”页面。 在左侧导航树,单击基础设置>静态页面,进入静态页面区域。 在静态页面区域,单击“设置”按钮。 删除“默认首页”填写的参数,子目录首页选择不开通,单击“保存”。
dst_storage_policy String 目的端存储类型设置,当且仅当目的端为华为云OBS时需要,默认为标准存储 STANDARD:华为云OBS标准存储 IA:华为云OBS低频存储 ARCHIVE:华为云OBS归档存储 DEEP_ARCHIVE:华为云OBS深度归档存储 SRC_STORAGE_MAPP
一个线程迁移单个对象,对象数又较少,导致迁移的并发低,所以迁移速度会较慢。 这种情况请耐心等待,无法提升迁移的速度。 大对象会进行分片上传,上传完成一个分片才会对该分片的迁移量计入速度计算,速度计算结果是不太准确的,可能导致不同时间段速率忽高忽低的情况。 采样频率为5秒,可能出现
OMS迁移大对象时,会通过分片传输保证可靠性,并在迁移完成后对比大小和修改时间。如果存在迁移中修改某个特定分片,且满足如下条件: 1. 修改后文件大小一致 ; 2. 源端对象最后修改时间早于目的端对象最后修改时间。 最终会导致数据不一致。 删除数据: 源端的删除操作OMS不会同步到目的端,需要对删除的对象单独处理。
桶权限获取。 目的端桶需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容,上传对象,列举已上传段,取回归档存储对象。获取方式参见目的端桶权限获取。 已在华为云OBS服务中创建桶。 您过去24小时内已创建的迁移任务未满1000000个。 您名下处于“等待中”状态的迁移任务未满1000000个。
准备工作 使用对象存储迁移服务前,请参考本节介绍完成准备工作。 注册华为账号 使用华为云之前,需要注册华为账号并开通华为云,还需要完成实名认证。 创建源端和目的端的访问密钥(AK/SK)并授权 源端:源端为华为云OBS桶,检查对应账号是否有AK/SK以及列举桶,获取桶位置,列举对