检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据迁移 根据迁移配置,华为云OMS服务会开始从源端存储系统拉取数据。同时,服务会确保数据的完整性和一致性,避免在迁移过程中出现数据丢失或损坏的情况。服务还支持断点续传功能,当迁移过程中出现网络中断或其他异常情况时,服务可以从断点处恢复传输,确保数据的完整性和迁移的连续性。 父主题:
源端桶对应账户需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容。 源端权限获取方式分为两种,可任选一种方式获取。 基于系统策略获取OBS Administrator权限,将该权限赋予子用户,获取方式参见创建用户组并授权。 基于IAM细粒度OBS权限包括:列举桶
何保证数据一致性? OMS保证迁移数据一致性的校验策略是什么? 迁移是否会影响目的端桶的已有数据 迁移限制 OMS将对象数据迁移到并行文件系统有哪些限制? 源端云服务商不在OMS支持范围,该如何迁移? 迁移时长 我如何能知道迁移任务的速度? 问题处理 创建迁移任务时提示“您选择的
完整性校验:数据迁移完成后,默认通过对象大小/最后修改时间完成数据的完整性校验。详细介绍请参见一致性校验策略。 个人数据加密保护:为了确保您个人数据的安全性,OMS系统通过加密存储个人数据、控制个人数据访问权限以及记录操作日志等方法,防止个人数据泄露,保证您的个人数据安全。详细介绍请参见个人数据保护机制。
密钥设置的名称,例如“我的API密钥”。 创建窗口中,不填写IP白名单,否则将造成迁移节点无法访问源端对象存储服务API。 单击“提交”按钮后,系统会生成一个新的 API 密钥对,包括 API 密钥 ID 和 API 私钥。同时,会弹出一个下载链接,用于下载包含这些信息的 access_key
中,请控制创建任务的频率。 如果单个对象大小超过500G,建议您通过提交工单的方式,开通并发分片白名单配置,提升迁移速率。 在迁移过程中,系统将自动在目的端桶创建一个名为“OMS”的临时文件夹。严禁手动操作此文件夹,包括但不限于修改、删除或添加内容。对该文件夹进行的任何手动操作都可能导致迁移流程中断或失败。
时请注意。 Token认证 Token的有效期为24小时,需要使用一个Token鉴权时,可以先缓存起来,避免频繁调用。 Token在计算机系统中代表令牌(临时)的意思,拥有Token就代表拥有某种权限。Token认证就是在调用API的时候将Token加到请求消息头,从而通过身份认证,获得操作API的权限。
迁移限制 OMS将对象数据迁移到并行文件系统有哪些限制? 迁移并行文件系统内的对象数据有哪些限制? 创建迁移任务时提示“您选择的目的端桶所在区域与控制台Region不一致,请选择所在区域为xxx的桶或切换控制台Region为xxx”该如何处理? 源端云服务商不在OMS支持范围,该如何迁移?
择,OMS支持的系统权限,请参见:OMS系统权限。若您需要对除OMS之外的其它服务授权,IAM支持服务的所有权限请参见权限策略。 示例流程 图1 给用户授权OMS权限流程 创建用户组并授权 系统策略:如果IAM用户需要OMS的所有操作权限,则为IAM用户授予系统策略。在IAM控制台创建用户组,并授予“OMS
能生效。 对象存储迁移服务 (OMS)的所有系统角色,参见表1。 表1 OMS系统权限 角色名称 描述 类别 依赖关系 OMS Administrator 对象存储迁移服务所有权限。 系统角色 依赖OBS Administrator系统策略。 源端桶权限获取 以华为云OBS源端桶
OMS数据同步函数,从而完成源端对象同步迁移。 基于客户自建业务系统:通过客户自建业务系统触发新增、修改对象的同步请求。 当源端对象发生新增,修改时,客户自建业务系统通过接收源端对象存储服务的消息通知或解析业务系统数据库变化来主动捕获对象信息,然后调用OMS服务的同步接口,从而完成源端同步迁移。
send_oms_result def send_oms(object_key): """ apig鉴权后,将cos桶内变更对象信息发送给oms服务,apig鉴权具体方法参考:(https://support.huaweicloud.com/devg-apisign
各云服务商迁移教程 华为云OBS之间迁移教程 华为云并行文件系统迁移教程 阿里云OSS迁移至华为云OBS教程 腾讯云COS迁移至华为云OBS教程 七牛云迁移至华为云OBS教程 百度云BOS迁移至华为云OBS教程 优刻得US3迁移至华为云OBS教程 金山云KS3迁移至华为云OBS教程
and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"] credentials = BasicCredentials(ak
迁移阿里云数据时,对象名称中包含“/”的对象均迁移失败,其余对象迁移成功 输入对象前缀时,提示“无法访问对象,请检查并确保:对象存在且具有访问权限” 迁移并行文件系统对象时,一致性校验失败如何处理? 无法下载桶对象,OMS也无法迁移 迁移任务失败,传输中断问题该怎么解决?
and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"] credentials = BasicCredentials(ak
S3M.0004 无效HTTP请求。 S3M.0005 请求的HTTP方法不存在。 S3M.0014 输入的参数可能造成注入攻击风险,导致系统不稳定。 S3M.0051 参数range不合法。 S3M.0052 参数state不合法。请输入0-5的整数。 S3M.0053 任务查询失败或权限不足。
send_oms_result def send_oms(object_key): """ apig鉴权后,将oss桶内变更对象信息发送给oms服务,apig鉴权具体方法参考:(https://support.huaweicloud.com/devg-apisign
and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"] credentials = BasicCredentials(ak
新增跨区域迁移时,迁移速率慢且失败对象较多,如何处理? 2023-12-05 第二十六次正式发布。 新增迁移并行文件系统内的对象数据有哪些限制? 新增迁移并行文件系统对象时,一致性校验失败如何处理? 新增存储类型介绍。 2023-11-07 第二十五次正式发布。 更新如何获取源端桶权限和目的端桶权限?