检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
与目的端对象元数据中不存在CRC64值,则系统会默认使用大小/最后修改时间校验方式来校验。no_check:目前仅支持HTTP/HTTPS数据源。当源端对象无法通过标准http协议中content-length字段获取数据大小时,默认数据下载成功即迁移成功,不对数据做额外校验,且
与目的端对象元数据中不存在CRC64值,则系统会默认使用大小/最后修改时间校验方式来校验。no_check:目前仅支持HTTP/HTTPS数据源。当源端对象无法通过标准http协议中content-length字段获取数据大小时,默认数据下载成功即迁移成功,不对数据做额外校验。当
移支持后,迁移时将从CDN域名获取源端对象,参见表8。 auto_restore 否 boolean 是否自动解冻归档数据,默认否。 开启后,如果遇到归档类型数据,会自动解冻再进行迁移。 bandwidth_policy 否 JSONArray 配置流量控制策略。数组中一个元素对
特殊场景迁移实践 迁移归档存储数据 设置“保存到指定前缀”参数
第二十二次正式发布。 更新计费说明中的API请求次数。 2023-06-20 第二十一次正式发布。 约束与限制新增“迁移范围”、“迁移速度”、“归档数据”限制说明。 2023-06-05 第二十次正式发布。 约束与限制新增目的端桶类别限制。 2023-04-25 第十九次正式发布。 更新约束与限制。
自动划分并创建迁移任务,最大化利用服务的并发性能。 支持以组的方式对迁移任务进行管理。 高效传输 并行迁移 支持多对象并行迁移。 解冻归档数据 对于归档类型的对象存储,支持自动解冻该对象后进行迁移。 自定义域名迁移 支持使用源端桶自定义域名迁移。 记录失败对象 支持记录迁移失败对象,以及重传这些失败对象。
安全 身份认证与访问控制 数据保护技术 风险提示 审计与日志
的端对象元数据中不存在CRC64值,则系统会默认使用大小/最后修改时间校验方式来校验。transmission:目前仅支持HTTP/HTTPS数据源。当源端对象无法通过标准http协议中content-length字段获取数据大小时,默认数据下载成功即迁移成功,不对数据做额外校验
与目的端对象元数据中不存在CRC64值,则系统会默认使用大小/最后修改时间校验方式来校验。no_check:目前仅支持HTTP/HTTPS数据源。当源端对象无法通过标准http协议中content-length字段获取数据大小时,默认数据下载成功即迁移成功,不对数据做额外校验,且
创建任务 删除任务 启动任务 停止任务 修改流量控制策略 查询某个租户的所有任务 查询某个租户的任务总数 查询指定ID的任务 查询租户配额数据
0062 部分对象上传失败,请确认没有其他迁移同名对象的任务后重试。 TRF.0063 解冻归档数据失败,请前往源端手动解冻归档数据后再迁移。 TRF.0064 存在未解冻的归档数据,请先解冻后再进行迁移。 TRF.0151 源端AK/SK无效。请输入有效的AK/SK后重试。 TRF
与目的端对象元数据中不存在CRC64值,则系统会默认使用大小/最后修改时间校验方式来校验。no_check:目前仅支持HTTP/HTTPS数据源。当源端对象无法通过标准http协议中content-length字段获取数据大小时,默认数据下载成功即迁移成功,不对数据做额外校验,且
同步任务 创建同步事件 查询同步任务列表 创建同步任务 查询指定ID的同步任务详情 查询指定ID的同步任务统计数据 删除同步任务 暂停同步任务 启动同步任务 父主题: API v2(推荐)
迁移任务组 适用于单个桶数据量大于3 TB或对象个数大于500万的对象迁移场景,迁移任务组将源端待迁移对象智能分解到多个迁移任务中并行迁移。以组的方式进行管理,包括进度查询,暂停恢复,失败重启等。 迁移任务组相较于迁移任务,提供更快的迁移速度和可靠性,便于灵活识别异常对象并快速恢复。
程 谷歌云storage迁移至华为云OBS教程 亚马逊云S3迁移至华为云教程 微软云Blob迁移至华为云OBS教程 HTTP/HTTPS 数据源迁移至华为云OBS教程
源端桶对应账户需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容。获取方式参见源端桶权限获取。 目的端桶权限获取 目的端桶需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容,上传对象,列举已上传段,取回归档存储对象。获取方式参见目的端桶权限获取。
US3、亚马逊 S3、微软 Blob、NAS_SMB、NAS_NFS_V3_MOUNT、NAS_NFS_V3_PROTOCOL、HTTP/HTTPS数据源迁移。 逻辑架构图 图1 存储迁移逻辑架构图 迁移流程实施 准备工作 创建目的端对象桶或者弹性文件系统。 评估集群 根据源端文件数量,自
歌云资源的凭据。 目的端华为云:参见创建访问密钥(AK/SK)和目的端桶权限获取创建AK/SK并添加权限。 创建目的端桶 创建用于存放迁移数据的桶,具体操作参见创建桶。 父主题: 谷歌云storage迁移至华为云OBS教程
配置流量控制策略。数组中一个元素对应一个时段的最大带宽,最多允许5个时段,且时段不能重叠。具体参见表3。 表3 bandwidth_policy数据结构 参数 是否必选 参数类型 描述 start 是 String 流量控制开始时间(包含),格式为“hh:mm”。例如“10:03”表示10时03分。
同步任务 创建同步任务可参见创建同步任务。 源端配置同步请求可参见源端配置同步请求。 监控同步任务状态可参见监控同步任务状态。 OMS将对象数据迁移到并行文件系统有以下限制: 若对象名以/结尾,则对象大小必须为0,否则不支持迁移。 对象名中不能出现连续/,例如:test//test。