检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
如果一直有数据写入OBS的情况下,使用OMS服务如何保证数据一致性? 该问题可分为以下两种情况来说明: 如何保证增量数据如何迁移过来? 参见增量迁移对象数据。 源端数据有更新,如何同步过来? 需要重新全量迁移,OMS会自动识别更新后对象进行覆盖,具体覆盖条件请参考迁移是否会影响目的端桶的已有数据。
阿里云OSS提供了ossutil工具来解冻归档对象,支持解冻指定前缀的归档类型对象。 ossutil工具支持Windows、Linux和macOS等操作系统,您可以根据实际情况下载和安装合适的版本。 本文以Windows系统为例进行介绍。 操作步骤 下载ossutil工具。 Windows x86 32bit Windows
文件解冻将产生数据取回费用。 US3CLI工具解冻 US3CLI工具支持Windows、Linux和macOS等操作系统,您可以根据实际情况下载和安装合适的版本。 本文以Windows系统为例进行介绍。 下载US3CLI命令行工具。 us3cli-windows.exe 以管理
根据迁移配置,华为云OMS服务会开始从源端存储系统拉取数据。同时,服务会确保数据的完整性和一致性,避免在迁移过程中出现数据丢失或损坏的情况。服务还支持断点续传功能,当迁移过程中出现网络中断或其他异常情况时,服务可以从断点处恢复传输,确保数据的完整性和迁移的连续性。 父主题: 迁移工作原理
我如何能知道迁移任务的速度? 一般情况,对象存储服务的迁移速度的参考值是10-20TB每天。由于迁移速度受源端对象个数、大小以及公网传输距离影响,建议用户创建一个实际数据的迁移任务来测试实际迁移速度,实际最大迁移速度为单个任务平均速度的5倍(单个Region内并发任务数最大为5)。
速度会较慢。 这种情况请耐心等待,无法提升迁移的速度。 大对象会进行分片上传,上传完成一个分片才会对该分片的迁移量计入速度计算,速度计算结果是不太准确的,可能导致不同时间段速率忽高忽低的情况。 采样频率为5秒,可能出现一个分片传输超过5秒,导致瞬时速度为0的情况。 迁移归档数据时,选择“自动解冻归档数据”
单击“任务组ID”,可查看已迁移对象数/对象总数、任务进度、迁移速率、源端/目的端信息以及您在创建迁移任务时设置的各项参数信息。 设置流量控制策略 迁移过程中,您可以根据实际情况,随时新增/修改/删除流量控制策略。 登录管理控制台,进入“对象存储迁移服务”页面。 在迁移任务组列表,找到需要新增/修改/删除流量控制策略的任务组。单击“任务组ID”。
华为云OBS提供了obsutil工具来解冻归档对象,支持批量解冻。 obsutil工具支持Windows、Linux和macOS等操作系统,您可以根据实际情况下载和安装合适的版本。 操作步骤 下载并安装obsutil。 解冻归档存储对象。 解冻完成后,参考华为云OBS之间迁移教程,将数据迁移到华为云OBS。
对象/URL列表迁移:按照已传输对象数量计算进度。 如果选择的是通过对象/URL列表方式迁移,可能会出现已传输量在增加,但是迁移进度没有增加的情况。 父主题: 迁移时长
了数据的传输效率、安全性和可靠性。OMS支持大文件分片、大量数据的快速迁移。同时,它还支持断点续传功能,即使在迁移过程中遇到网络中断等异常情况,也能从断点处继续传输,确保数据的完整性和迁移的连续性。 图1 网络模型图 场景一:跨Region/跨云迁移 OMS服务通过公网从源端对象
高频常见问题 产品咨询 迁移对源端数据是否有影响?源端数据改变对迁移结果有什么影响? 迁移完成后,如何修改已迁移对象路径? 如果一直有数据写入OBS的情况下,使用OMS服务如何保证数据一致性? OMS保证迁移数据一致性的校验策略是什么? 迁移是否会影响目的端桶的已有数据 迁移限制 OMS将对象数据迁移到并行文件系统有哪些限制?
如何迁移根目录下的数据? 迁移对源端数据是否有影响?源端数据改变对迁移结果有什么影响? 迁移完成后,如何修改已迁移对象路径? 如果一直有数据写入OBS的情况下,使用OMS服务如何保证数据一致性? 如何获取源端桶权限和目的端桶权限? 如何查看迁移任务中迁移了哪些对象? 如何查看迁移任务组中迁移了哪些对象?
单击“任务名称”,可查看已迁移对象数/对象总数、任务进度、迁移速率、源端/目的端信息以及您在创建迁移任务时设置的各项参数信息。 设置流量控制策略 迁移过程中,您可以根据实际情况,随时新增/修改/删除流量控制策略。 登录管理控制台,进入“对象存储迁移服务”页面。 在迁移任务列表,找到需要新增/修改流量控制策略的任务
正常。 操作步骤 登录管理控制台,进入“对象存储迁移服务”页面。 在左侧导航树,选择“同步任务”。 单击任务ID记录名称,查看同步任务执行情况。如图1所示。具体的参数说明参见表1。 图1 监控同步任务 表1 监控同步任务 参数 说明 接收同步请求对象数(本月) 统计本月截止目前接收到的来自源端发送的同步请求对象数量。
对象的内容、大小并没有改变,则仅迁移改变的元数据信息,不会迁移对象内容。因此,迁移完成后,出现迁移进度显示为0%,已传输容量为0,属于正常情况。 父主题: 产品咨询
2020-08-06 第四次正式发布。 新增如何从一个区域迁移OBS桶数据到另一区域? 2020-06-19 第三次正式发布。 新增如果一直有数据写入OBS的情况下,使用OMS服务如何保证数据一致性? 新增如何解决KMS状态错误导致的迁移任务失败? 2019-08-31 第二次正式发布。 更新迁移任务执行失败怎么办?
选择“显示”,即可显示访问密钥和连接字符串,单击复制图标即可复制密钥和字符串。 可以使用这key1和key2两个密钥中的任何一个来访问 Azure 存储,但通常情况下,最好使用第一个密钥,并保留第二个密钥在轮换密钥时使用。 获取共享访问签名 在 Azure 门户中单击“存储账户”,选择待迁移的存储账户。
IAM是华为云提供权限管理的基础服务,无需付费即可使用,您只需要为您账号中的资源进行付费。关于IAM的详细介绍,请参见IAM产品介绍。 OMS权限 默认情况下,管理员创建的IAM用户没有任何权限,需要将其加入用户组,并授予用户组策略或角色,使得用户组中的用户获得对应的权限,这一过程称为授权。用
场景是什么?)。启动迁移后,您可以通过控制台查看迁移任务、管理迁移任务。 割接方案 如涉及业务割接,请参考割接方案最佳实践。 需要根据实际情况选择割接方式,上述方案仅供参考。 约束与限制 OMS迁移任务限制参见下表。 表1 OMS迁移任务限制 类别 限制 多版本对象迁移 OMS默
Blob Storage DataLake Storage(含有多级目录) 割接方案 如涉及业务割接,请参考割接方案最佳实践。 需要根据实际情况选择割接方式,上述方案仅供参考。 约束与限制 OMS迁移任务限制参见下表。 表1 OMS迁移任务限制 类别 限制 迁移Region 中国R