检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
environment variables CLOUD_SDK_AK and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"]
根据源端文件数量,自行评估集群大小及规格,将用于工作流中新建集群。 开始配置工作流 基于存储迁移工作流模板配置更加详细的参数,帮助您完成迁移工作。 确认并创建工作流,开始执行迁移任务。 在工作流详情页面,可以查看该存储迁移工作流的配置信息和资源迁移进度。 具体操作步骤请参见创建存储工作流。 父主题:
表1 OMS最佳实践一览表 最佳实践 使用场景 优势 使用“回源配置方案”迁移增量对象数据 大批量数据迁移场景使用,优先选择此方案。此方案受OBS限制,具体的约束请见数据回源。 业务零中断,增量迁移间未同步的数据通过回源配置保证用户无感知。 可靠性高:割接前用户业务校验充分,增量迁移时全量扫描校验确保数据无遗漏。
environment variables CLOUD_SDK_AK and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"]
源端云厂商新增谷歌云。 2023-12-08 第二十一次正式发布。 目的端配置选项区域中新增“配置存储策略”功能。 2023-07-10 第二十次正式发布。 更新查看审计日志。 2023-01-18 第十九次正式发布。 更新源端配置同步请求章节。 2022-11-08 第十八次正式发布。 更新查看迁移任务。
CDN鉴权秘钥,如果CDN需要进行鉴权,则此选项为必选。 无需授权:无需配置此项。 Qiniu:无需配置此项。 Aliyun:根据authentication_type指定的鉴权方式配置此项。 KingsoftCloud:无需配置此项。 最小长度:0 最大长度:255 authentication_type
创建迁移任务组可参见创建迁移任务组。 查看迁移任务组可参见查看迁移任务组。 管理迁移任务组可参见管理迁移任务组。 同步任务 创建同步任务可参见创建同步任务。 源端配置同步请求可参见源端配置同步请求。 监控同步任务状态可参见监控同步任务状态。 OMS将对象数据迁移到并行文件系统有以下限制: 若对象名以/结尾,则对象大小必须为0,否则不支持迁移。
同步任务 创建同步任务 源端配置同步请求 监控同步任务状态
登录函数工作流控制台,在左侧导航栏选择“函数 > 函数列表”,进入函数列表界面。 单击“创建函数”,进入创建函数流程。 填写函数配置信息。输入基础配置信息,完成后单击“创建函数”。 函数名称:输入“check_retry_task”。 委托名称:选择default。 运行时语言:选择“Java
业务割接方案最佳实践 使用“回源配置方案”迁移增量对象数据 使用“源端/目的端双写方案”方案迁移增量对象数据 使用"多次同步方案"迁移增量对象数据
对象存储迁移服务(Object Storage Migration Service,OMS)是一种线上数据迁移服务,帮助您将其他云服务商对象存储服务中的数据在线迁移至华为云的对象存储服务(Object Storage Service,OBS)中。 产品介绍 图说OMS 仅两个按钮时选用 立即使用 成长地图
目的端桶存在客户业务系统切换到华为云后,自主写入的新增对象/OMS上传的对象列表文件。 源端对象大小<目的端对象大小 可能原因: 目的端桶存在OMS上传的相关配置文件。 您可以清除相关配置文件,清除后相关迁移报告将无法恢复。 目的端桶存在残留的碎片文件(任务暂停后未重新恢复,OMS默认会在目的端存在碎片文件)。 您可清除目的端桶的残留碎片文件。
如果因为迁移执行过程中删除了OMS在目的端创建的文件,导致迁移任务失败。请重新创建迁移任务/迁移任务组进行迁移。 请参考如何获取源端桶权限和目的端桶权限?配置源端桶/目的端桶权限后重试任务。 父主题: 异常恢复
AK/SK。为防止大量任务阻塞在等待中,请控制创建任务的频率。 如果单个对象大小超过500G,建议您通过提交工单的方式,开通并发分片白名单配置,提升迁移速率。 在迁移过程中,系统将自动在目的端桶创建一个名为“OMS”的临时文件夹。严禁手动操作此文件夹,包括但不限于修改、删除或添加
单击“下一步”,进入“设置任务组参数”页签。 设置“源端配置选项”区域参数。 选择迁移方式。 如果... 那么... 指定对象列表 指定对象列表目录方式,一般用于增量迁移场景,用户需要将待迁移的源端对象名称写入对象列表文件,并将生成的对象列表文件放在华为云OBS桶中,对象存储迁移服务将会迁移指定对象列表文件中的所有对象。
部导航栏单击用户名,选择安全认证 > Access Key,查看或新建访问密钥。 如果您需要使用子用户进行迁移,请参考如下步骤创建子用户,生成AK/SK,并为子用户添加只读访问BOS的权限(BOSLISTANDReadAccessPolicy)。 使用管理员账号登录百度云管理控制台。
建迁移任务”页面。 在源端访问秘钥、私有访问秘钥中填写A账号的AK/SK,目的端访问秘钥、私有访问秘钥中填写B账号的AK/SK。 其他参数配置请参考创建单个迁移任务。 一个区域迁移OBS桶数据到另一区域请参见如何从一个区域迁移OBS桶数据到另一区域?。 父主题: 产品咨询
权限进行代运维。 发布区域:全部 权限管理 创建用户并使用OMS 同步任务 同步任务用于源端变更对象主动同步的场景,通过在源端对象存储服务配置事件触发器,当出现对象新增或修改时,通过函数工作流服务,主动调用OMS服务的数据同步接口,及时将数据同步到华为云OBS侧。 发布区域:华北-北京四、华东-上海一
BandwidthPolicyDto objects 配置流量控制策略。数组中一个元素对应一个时段的最大带宽,最多允许5个时段,且时段不能重叠。 数组长度:0 - 5 task_priority 否 String 任务优先级配置,存在高中低三个优先级档次,限制仅在等待中、已暂停、已失败的任务进行修改
AK/SK。为防止大量任务阻塞在等待中,请控制创建任务的频率。 如果单个对象大小超过500G,建议您通过提交工单的方式,开通并发分片白名单配置,提升迁移速率。 在迁移过程中,系统将自动在目的端桶创建一个名为“OMS”的临时文件夹。严禁手动操作此文件夹,包括但不限于修改、删除或添加