检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
表1。 图1 监控同步任务 表1 监控同步任务 参数 说明 接收同步请求对象数(本月) 统计本月截止目前接收到的来自源端发送的同步请求对象数量。 同步对象数(本月) 成功 统计本月截止目前同步成功的对象,可通过对象列表在目的桶中查看同步成功对象列表。 失败 统计本月截止目前同步失
迁移并行文件系统内的对象数据有哪些限制? 当待迁移对象所属文件层级过深时,建议通过创建迁移任务组进行迁移。如果通过创建迁移任务进行迁移,可能出现列举对象超时,导致列举中断。 父主题: 迁移限制
OMS将对象数据迁移到并行文件系统有哪些限制? OMS将对象数据迁移到并行文件系统有以下限制(并行文件系统限制): 若对象名以/结尾,则对象大小必须为0,否则不支持迁移。 对象名中不能出现连续/,例如:test//test。 在同一层级中,文件和文件夹的名称不能相同。 父主题: 迁移限制
华为云并行文件系统迁移教程 并行文件系统(Parallel File System)是对象存储提供的一种经过优化的高性能文件语义系统,提供毫秒级别访问时延,TB/s级别带宽和百万级别的IOPS。 作为对象存储的子产品,并行文件系统的迁移方法与对象存储迁移方法一致。 创建迁移任务可参见创建迁移任务。
文件解冻将产生数据取回费用。 US3CLI工具解冻 US3CLI工具支持Windows、Linux和macOS等操作系统,您可以根据实际情况下载和安装合适的版本。 本文以Windows系统为例进行介绍。 下载US3CLI命令行工具。 us3cli-windows.exe 以管理员身份打开c
录管理控制台创建迁移任务后,即可等待系统完成迁移,中途无需额外操作。 安全认证 对象存储迁移服务的鉴权支持AK/SK方式,启动数据传输时会充分认证身份的合法性,避免数据被盗用。 创建迁移任务时您需要输入AK/SK进行安全认证,校验成功后,系统才可以访问源端和目的端的迁移数据,从而成功创建迁移任务。
对象,支持解冻指定前缀的归档类型对象。 ossutil工具支持Windows、Linux和macOS等操作系统,您可以根据实际情况下载和安装合适的版本。 本文以Windows系统为例进行介绍。 操作步骤 下载ossutil工具。 Windows x86 32bit Windows
数据识别与准备 在迁移开始前,华为云OMS服务会先对源端存储系统中的数据进行识别,包括对象大小、最后修改时间以及位置等关键信息。基于这些信息,服务会为用户生成一个对应的迁移任务配置,确保迁移过程的高效性和准确性。 父主题: 迁移工作原理
华为云OBS 华为云OBS提供了obsutil工具来解冻归档对象,支持批量解冻。 obsutil工具支持Windows、Linux和macOS等操作系统,您可以根据实际情况下载和安装合适的版本。 操作步骤 下载并安装obsutil。 解冻归档存储对象。 解冻完成后,参考华为云OBS之间迁移教程,将数据迁移到华为云OBS。
迁移并行文件系统对象时,一致性校验失败如何处理? 问题描述 迁移并行文件系统对象时,源端对象最后修改时间晚于目的端对象,导致一致性校验失败,重试迁移依然校验失败,并且目的端对象最后修改时间一直保持不变。 问题分析 出现该问题可能是因为并行系统存在元数据mtime(可以设置最后修改
and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"] credentials = BasicCredentials(ak
在什么条件下使用基于评估创建迁移任务? 如果桶内数据容量超过3TB,数量超过500万个,推荐您创建迁移任务组进行迁移。系统会根据桶内对象的存量和数量分布,自动划分为多个迁移任务,提高迁移效率、减少迁移时间。 父主题: 产品咨询
删除指定id的迁移任务组 功能介绍 删除指定的迁移任务组. 创建任务中、监控中、暂停中状态的任务不允许删除,如果删除会返回失败;若要删除,请先行暂停任务。 调用方法 请参见如何调用API。 URI DELETE /v2/{project_id}/taskgroups/{group_id}
创建同步事件 功能介绍 源端有对象需要进行同步时,调用该接口创建一个同步事件,系统将根据同步事件中包含的对象名称进行同步(目前只支持华北-北京四、华东-上海一地区)。 调用方法 请参见如何调用API。 URI POST /v2/{project_id}/sync-tasks/{sync_task_id}/events
创建迁移任务组 查看迁移任务组 管理迁移任务组 运维和监控 查看审计日志 02 入门 通过一个完整的流程,向您介绍如何快速上手使用对象存储迁移服务。 入门指导 对象存储迁移流程 创建单个迁移任务 04 实践 在不改造业务系统本身的条件下,快速识别待迁移的增量数据并迁移到华为云。 最佳实践
任务组状态说明参见表1。 表1 迁移任务组状态 状态 说明 等待 迁移任务组创建后正在进行后台初始化操作。 创建任务 正在创建任务组中的迁移任务。 监控任务执行 任务组中的迁移任务正在进行中。 暂停 任务组中的迁移任务已暂停,可手动恢复。 创建任务失败 任务组中的迁移任务创建失败。 迁移失败
数据迁移 根据迁移配置,华为云OMS服务会开始从源端存储系统拉取数据。同时,服务会确保数据的完整性和一致性,避免在迁移过程中出现数据丢失或损坏的情况。服务还支持断点续传功能,当迁移过程中出现网络中断或其他异常情况时,服务可以从断点处恢复传输,确保数据的完整性和迁移的连续性。 父主题:
同步任务 创建同步任务 源端配置同步请求 监控同步任务状态
源端桶对应账户需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容。 源端权限获取方式分为两种,可任选一种方式获取。 基于系统策略获取OBS Administrator权限,将该权限赋予子用户,获取方式参见创建用户组并授权。 基于IAM细粒度OBS权限包括:列举桶
储服务可以针对源端新增、修改对象实时调用OMS同步接口(例如通过消息通知或函数计算服务方式),以完成对源端新增、修改对象数据的同步迁移。 监控同步任务状态 同步任务开始后,您可以随时查看同步的进度以及详情,以确定同步迁移的执行状态是否正常。 父主题: 功能特性