检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
适用于单个桶数据量大于3 TB或对象个数大于500万的对象迁移场景,迁移任务组将源端待迁移对象智能分解到多个迁移任务中并行迁移。以组的方式进行管理,包括进度查询,暂停恢复,失败重启等。创建方式参见创建迁移任务组。 迁移任务组相较于迁移任务,提供更快的迁移速度和可靠性,便于灵活识别异常对象并快速恢复。
云服务 查询所有支持的云厂商 父主题: API v2(推荐)
区域 查询云厂商支持的reigon 父主题: API v2(推荐)
源端对象个数/大小>目的端对象个数/大小 源端对象个数>目的端对象个数 可能原因:源端有增量对象或源端扫描有问题。 判断方法:再次创建OMS迁移任务进行增量迁移,查看源端桶扫描对象数与上次迁移时OMS统计的源端桶对象数是否一致,并通过对象列表确认新增对象。如果扫描结果不一致,可通过对象列表确认新增对象;
权 源端优刻得: 如果您使用管理员账号(即主账号)进行迁移,请登录优刻得控制台,在界面顶部导航栏单击用户名,选择账号管理 > API密钥,查看或新建访问密钥。 如果您需要使用子用户进行迁移,请参考如下步骤创建子用户,生成AK/SK,并为子用户添加对象存储 (UFile) 只读权限
API v2(推荐) 查询API版本信息 迁移任务管理 同步任务 迁移任务组管理 桶操作 云服务 区域
源端百度云: 如果您使用管理员账号(即主账号)进行迁移,请登录百度云管理控制台,在界面顶部导航栏单击用户名,选择安全认证 > Access Key,查看或新建访问密钥。 如果您需要使用子用户进行迁移,请参考如下步骤创建子用户,生成AK/SK,并为子用户添加只读访问BOS的权限(BOSLIS
可将对象数据进行快速迁移。 对客户开放迁移任务API,客户可根据自身业务诉求进行定制化开发,例如周期性定时创建同步任务。 创建迁移任务 查看迁移任务 管理迁移任务
在迁移过程中,每迁移完一个对象,会对该对象进行一致性校验,如果不一致则会将该对象记录到失败对象列表中。OMS会累积记录迁移失败对象个数,可以通过任务详情查看具体的迁移数据统计。 校验策略为该对象是否同时满足以下条件,不满足则校验失败,并记录到失败对象列表中。 目的端对象的加密状态与任务是否开启
迁移任务组管理 查询迁移任务组列表 创建迁移任务组 获取指定id的taskgroup信息 删除指定id的迁移任务组 暂停指定id的迁移任务组 恢复指定id的迁移任务组 对已经失败的指定id迁移任务组进行重启 更新指定id的迁移任务组的流控策略 父主题: API v2(推荐)
迁移对象智能分解到多个迁移任务中并行迁移。以组的方式进行管理,包括进度查询,暂停恢复,失败重启等。 迁移任务组相较于迁移任务,提供更快的迁移速度和可靠性,便于灵活识别异常对象并快速恢复。 创建迁移任务组 查看迁移任务组 管理迁移任务组
单击下一步。在设置权限页面,选择直接附加策略,选中AmazonS3ReadOnlyAccess策略。 单击下一步。查看和创建页面,确认创建用户信息。 单击创建用户。创建完成后单击用户名,选择安全凭证,单击创建访问密钥。 查看访问密钥AK和秘密访问密钥SK。也可以下载.csv文件进行保存。 AWS S3在中国区时,只能迁移至中国大陆的Region。
及时获取迁移任务的结果。 云审计服务(Cloud Trace Service,CTS) 记录与对象存储迁移服务相关的操作事件,便于日后的查询、审计和回溯。 查看审计日志
OMS提供了REST(Representational State Transfer)风格API,支持您通过HTTPS请求调用,实现创建、查询、暂停、删除任务等操作。 发布区域:全部 API概览 SDK OMS提供多种开发语言的SDK,帮助您轻松实现二次开发。目前SDK的语言支持:Java、Python、Go。
S同步接口(例如通过消息通知或函数计算服务方式),以完成对源端新增、修改对象数据的同步迁移。 监控同步任务状态 同步任务开始后,您可以随时查看同步的进度以及详情,以确定同步迁移的执行状态是否正常。 父主题: 功能特性
开始配置工作流 基于存储迁移工作流模板配置更加详细的参数,帮助您完成迁移工作。 确认并创建工作流,开始执行迁移任务。 在工作流详情页面,可以查看该存储迁移工作流的配置信息和资源迁移进度。 具体操作步骤请参见创建存储工作流。 父主题: 其他迁移场景
secret_key = "***secret_key***" # 替换为用户的 region,已创建桶归属的region可以在控制台查看,https://console.cloud.tencent.com/cos5/bucket region = 'ap-beijing'
地址信息,并创建迁移任务或创建迁移任务组即可(迁移任务与迁移任务组的区别参见迁移任务与迁移任务组的适用场景是什么?)。启动迁移后,您可以通过控制台查看迁移任务、管理迁移任务。 支持迁移存储类型 支持迁移的存储类型包括: Blob Storage DataLake Storage(含有多级目录)