检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
list_file为必选参数。 表11 ListFile 参数 参数类型 描述 list_file_key String 对象列表文件或URL列表文件对象名。 最小长度:1 最大长度:1024 obs_bucket String 存放对象列表文件的OBS桶名。 请确保与目的端桶处于同一区域,否则将导致任务创建失败。
environment variables CLOUD_SDK_AK and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"]
图1 迁移任务详情 查看迁移记录,并获取对象列表。 如果... 那么... 已迁移对象数大于0 在任务详情中找到“成功对象列表路径”,单击路径链接跳转到OBS控制台,下载相应的txt文件,查看成功对象列表。 说明: 成功对象列表路径说明:oms/task/任务名称/success_object_lists/时间戳
environment variables CLOUD_SDK_AK and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"]
environment variables CLOUD_SDK_AK and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"]
environment variables CLOUD_SDK_AK and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"]
图1 迁移任务组详情 查看迁移记录,并获取对象列表。 如果... 那么... 已迁移对象数大于0 在任务详情中找到“成功对象列表路径”,单击路径链接跳转到OBS控制台,下载相应的txt文件,查看成功对象列表。 说明: 成功对象列表路径说明:oms/task_group/任务组ID
environment variables CLOUD_SDK_AK and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"]
经过URL编码)、失败对象(未经过URL编码)、源端SDK返回的错误描述信息。迁移失败处理措施具体请参考表1。 图1 失败对象列表内容 表1 失败对象列表错误码 失败对象列表错误码 说明 处理措施 GET_SRC_OBJ_META_FAILURE 获取源端对象元数据失败 排查源端对象:是否存在?是否有读取权限?
个人数据访问权限以及记录操作日志等方法防止个人数据泄露,保证您的个人数据安全。 收集范围 对象存储迁移服务收集的个人数据如表1所示: 表1 个人数据范围列表 类型 收集方式及目的 是否可以修改 是否必须 生命周期 源端AK(Access Key) 用户在界面输入,用于鉴权认证 否
创建URL列表文件并上传至OBS桶 创建迁移任务:将待迁移的文件URL和目的端对象名称写入URL列表文件,并将生成的URL列表文件存放在与目的端桶处于同一区域的OBS桶中。 创建迁移任务组:将待迁移的文件URL和目的端对象名称写入URL列表文件,并将生成的URL列表文件存放在与目
源端数据源选择“HTTP/HTTPS数据源”,迁移方式默认为“指定URL列表”。 创建“HTTP/HTTPS数据源”迁移任务参见“创建指定URL列表迁移任务”。 创建“HTTP/HTTPS数据源”迁移任务组参见“创建指定URL列表迁移任务组”。 父主题: 迁移限制
场景三 迁移失败,失败对象列表中失败原因为:“403” 获取失败对象列表方法:单击迁移失败任务名称,右侧弹出任务详情,单击“失败对象列表路径”链接,如图4所示,进入OBS服务下载失败对象列表.txt文件。 图4 失败对象列表路径 问题原因: “403”表示OMS服务无权限访问CDN域名。
选择“指定URL列表”迁移方式。 在“列表目录所在桶(华为云)”下拉列表中,选择存放URL列表文件的OBS桶。 请确保URL列表文件所在桶与目的端桶处于同一区域,否则后续将无法选择对象列表文件。 在“选择URL列表文件”参数后面,单击“选择”按钮,弹出“选择URL列表文件”窗口,选择URL列表文件,单击“确定”。
ListFile object 列表文件配置,当task_type为LIST或URL_LIST时,list_file为必选参数。 表5 ListFile 参数 是否必选 参数类型 描述 list_file_key 是 String 对象列表文件或URL列表文件对象名。 最小长度:1 最大长度:1024
String 源端桶的名称。 cloud_type String 源端云服务商。 表4 list_file数据结构 参数 参数类型 描述 obs_bucket String 存放对象列表文件的OBS桶名。 list_file_key String 对象列表文件对象名。 表5 dst_node数据结构说明
并发执行同步中的任务数量最多为5个。 对象列表文件 对象列表文件大小不能超过1024MB。 对象列表文件必须是“.txt”类型的文件,并且该文件元数据中的“ContentType”只能为:“text/plain”。 对象列表文件必须是UTF-8无BOM格式编码格式。 对象列表文件中每行只能包含一个对象名称,并且对象名称使用URL
和其他服务的关系 对象存储迁移服务与其他服务的关系如表1所示。 表1 与其他服务的关系 相关服务 交互功能 位置 对象存储服务(Object Storage Service,OBS) 将源端对象数据迁移至华为云创建的OBS桶中。 创建单个迁移任务 创建迁移任务组 数据加密服务(Data
Service,OMS)常见应用场景的操作实践,每个实践我们提供详细的方案描述和操作指导,用于指导您快速实现对象存储数据迁移。 表1 OMS最佳实践一览表 最佳实践 使用场景 优势 使用“回源配置方案”迁移增量对象数据 大批量数据迁移场景使用,优先选择此方案。此方案受OBS限制,具体的约束请见数据回源。
创建迁移任务时您需要输入AK/SK进行安全认证,校验成功后,系统才可以访问源端和目的端的迁移数据,从而成功创建迁移任务。 迁移任务创建成功后,AK/SK会被加密存放在数据库中。加密AK/SK采用的是业界通用的高级加密标准AES(Advanced Encryption Standard)。 当迁移任务失败、成功或者暂停时,会删除AK/SK。