检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
迁移工作原理 概述 迁移流程 数据识别与准备 数据迁移 数据安全与完整性保障
更新使用“回源配置方案”迁移增量对象数据章节。 更新使用“源端/目的端双写方案”方案迁移增量对象数据章节。 更新使用"多次同步方案"迁移增量对象数据章节。 更新迁移归档存储数据章节。 2020-12-08 第二次正式发布。 新增使用“回源配置方案”迁移增量对象数据。 新增使用“源端/目的端双写方案”方案迁移增量对象数据。
(可选)新建密钥。 单击用户名,进入用户详情页面,在安全管理页签,单击创建密钥,生成新的AK/SK。 目的端华为云:参见创建访问密钥(AK/SK)和目的端桶权限获取创建AK/SK并添加权限。 创建目的端桶 创建用于存放迁移数据的桶,具体操作参见创建桶。 解冻源端归档数据 当源端对象
Version 参数 参数类型 描述 id String 版本号,例如v1。 links Array of Link objects 链接地址信息。 数组长度:0 - 100 status String 版本状态。 取值“CURRENT”,表示该版本为主推版本。 取值"SUPPORTED",表示支持该版本。
迁移任务 适用于单个桶数据量不超过3 TB或对象个数不超过500万的对象存储迁移场景,通过创建对象存储迁移任务,可将对象数据进行快速迁移。 对客户开放迁移任务API,客户可根据自身业务诉求进行定制化开发,例如周期性定时创建同步任务。 创建迁移任务 查看迁移任务 管理迁移任务
K/SK并添加权限。 目的端:请参见创建访问密钥(AK/SK)和目的端桶权限获取创建AK/SK并添加权限。 创建目的端桶 创建用于存放迁移数据的桶,具体操作参见创建桶。 解冻源端归档数据 当源端对象存储有数据处于归档状态,请参考归档数据迁移方案进行迁移。
安全 身份认证与访问控制 数据保护技术 风险提示 审计与日志
在什么条件下使用基于评估创建迁移任务? 如果桶内数据容量超过3TB,数量超过500万个,推荐您创建迁移任务组进行迁移。系统会根据桶内对象的存量和数量分布,自动划分为多个迁移任务,提高迁移效率、减少迁移时间。 父主题: 产品咨询
特殊场景迁移实践 迁移归档存储数据 设置“保存到指定前缀”参数
创建任务 删除任务 启动任务 停止任务 修改流量控制策略 查询某个租户的所有任务 查询某个租户的任务总数 查询指定ID的任务 查询租户配额数据
单击任务操作列的“启动”按钮 。 在弹出窗口中输入源端和目的端的AK、SK后,单击“确定”。 说明: 如果启用了CDN鉴权,还需要输入校验密钥。 任务状态显示为“迁移中”。 重启迁移任务 当迁移任务失败时,您可以手动重启迁移失败的任务,重新执行迁移。 单击任务操作列的“更多 >重启
迁移任务组 适用于单个桶数据量大于3 TB或对象个数大于500万的对象迁移场景,迁移任务组将源端待迁移对象智能分解到多个迁移任务中并行迁移。以组的方式进行管理,包括进度查询,暂停恢复,失败重启等。 迁移任务组相较于迁移任务,提供更快的迁移速度和可靠性,便于灵活识别异常对象并快速恢复。
致瞬时速度为0的情况。 迁移归档数据时,选择“自动解冻归档数据” 由于每个迁移任务的最大并发数是固定的,且在迁移时,才会去解冻归档数据,解冻归档耗时也较长,所以迁移速度会很慢。 解决方式:先在源端批量解冻,再进行迁移,具体方案请参见迁移归档存储数据。 存在大量的忽略对象 在迁移过
审计与日志 审计 云审计服务(Cloud Trace Service,CTS),是华为云安全解决方案中专业的日志审计服务,提供对各种云资源操作记录的收集、存储和查询功能,可用于支撑安全分析、合规审计、资源跟踪和问题定位等常见应用场景。 CTS的详细介绍和开通配置方法,请参见CTS快速入门。
谷歌云 URLSource:URL HEC:HEC 最小长度:0 最大长度:100 file_path 是 String 目标桶中需要查询的对象文件路径,/结尾 最小长度:0 最大长度:1023 ak 否 String 源端桶的AK(最大长度100个字符) 最小长度:0 最大长度:100
单击任务组操作列的“启动”按钮。 在弹出窗口中输入源端和目的端的AK、SK后,单击“确定”。 说明: 如果启用了CDN鉴权,还需要输入校验密钥。 任务状态显示为“迁移中”。 重启迁移任务组 当迁移任务失败时,您可以手动重启迁移失败的任务组,重新执行迁移。 单击任务组操作列的“更多
在创建任务中,参数region、topicUrn增加说明。 在创建任务中,源端cloud_type参数增加取值“HuaweiCloud”。 在创建任务中,dst_node数据结构的参数object_key修正为必选。 在创建任务中,参数authentication_type、authentication_key更新描述。
我如何能知道迁移任务的速度? 一般情况,对象存储服务的迁移速度的参考值是10-20TB每天。由于迁移速度受源端对象个数、大小以及公网传输距离影响,建议用户创建一个实际数据的迁移任务来测试实际迁移速度,实际最大迁移速度为单个任务平均速度的5倍(单个Region内并发任务数最大为5)。 单个迁移任务速度可以在“迁移任务”界面中查看实时任务迁移速度。
删除迁移任务 Task DeleteTask 更新迁移任务流量控制策略 Task UpdateBandwidthPolicy 更新迁移任务密钥信息 Task UpdateTaskAccessKey 表3 迁移任务组资源支持的操作列表 操作名称 资源类型 事件名称 创建迁移任务组 TaskGroup
获取对象元数据,获取对象内容。 源端权限获取方式分为两种,可任选一种方式获取。 基于系统策略获取OBS Administrator权限,将该权限赋予子用户,获取方式参见创建用户组并授权。 基于IAM细粒度OBS权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容。