检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
修订记录 发布时间 修订记录 2023-11-15 第二十三次正式发布。 API V2新增桶操作、云服务、区域 2023-09-20 第二十二次正式发布。 更新终端节点。 2023-04-14 第二十一次正式发布。 更新创建迁移任务组。 2022-09-16 第二十次正式发布。 新增迁移任务组管理。
组成新的key,拼接后不能超过1024个字符)。 最小长度:0 最大长度:1024 region 是 String 目的端桶所处的区域。 请与Endpoint对应的区域保持一致。 最小长度:0 最大长度:100 表7 BandwidthPolicyDto 参数 是否必选 参数类型 描述 end
如需新增流量控制,单击“新增流量控制”,设置“开始时间”、“结束时间”和“限制最大流量”。 如需修改流量控制,根据您的实际要求,修改“开始时间”、“结束时间”和“限制最大流量”。 如需删除流量控制,单击对应记录操作列的按钮。 限制最大流量的数值范围:1~ 200MB/s 。 最多可以创建5条记录。
如需新增流量控制,单击“新增流量控制”,设置“开始时间”、“结束时间”和“限制最大流量”。 如需修改流量控制,根据您的实际要求,修改“开始时间”、“结束时间”和“限制最大流量”。 如需删除流量控制,单击对应记录操作列的按钮。 限制最大流量的数值范围:1~ 200MB/s 。 最多可以创建5条记录。
HuaweiCloud:华为云 URLSource:URL HEC:HEC 最小长度:0 最大长度:100 region 是 String 区域 最小长度:0 最大长度:100 app_id 否 String 当源端为腾讯云时,会返回此参数。 最小长度:0 最大长度:255 bucket
d、Baidu、Qiniu、Cloud。默认值为Aliyun。 缺省值:Aliyun src_region 是 String 源端桶所处的区域 最小长度:0 最大长度:100 src_bucket 是 String 源端桶名 最小长度:0 最大长度:1024 src_ak 是 String
入OBS服务下载该文件。 查看失败原因。 失败对象列表记录了迁移任务失败的摘要信息,如图1示,包括:失败对象列表错误码、发生时间(参照当前区域所属时区)、失败对象(经过URL编码)、失败对象(未经过URL编码)、源端SDK返回的错误描述信息。迁移失败处理措施具体请参考表1。 图1
HuaweiCloud QingCloud KingsoftCloud Baidu Qiniu UCloud src_region String 源端桶所处的区域 最小长度:0 最大长度:100 src_bucket String 源端桶 最小长度:0 最大长度:1024 create_time Long
HuaweiCloud QingCloud KingsoftCloud Baidu Qiniu UCloud src_region String 源端桶所处的区域 最小长度:0 最大长度:100 src_bucket String 源端桶 最小长度:0 最大长度:1024 create_time Long
创建同步任务可参见创建同步任务。 源端配置同步请求可参见源端配置同步请求。 监控同步任务状态可参见监控同步任务状态。 OMS将对象数据迁移到并行文件系统有以下限制: 若对象名以/结尾,则对象大小必须为0,否则不支持迁移。 对象名中不能出现连续/,例如:test//test。 在同一层级中,文件和文件夹的名称不能相同。
OMS最佳实践一览表 最佳实践 使用场景 优势 使用“回源配置方案”迁移增量对象数据 大批量数据迁移场景使用,优先选择此方案。此方案受OBS限制,具体的约束请见数据回源。 业务零中断,增量迁移间未同步的数据通过回源配置保证用户无感知。 可靠性高:割接前用户业务校验充分,增量迁移时全量扫描校验确保数据无遗漏。
对目标迁移任务进行操作。 表1 管理迁移任务 项目 场景 操作 暂停迁移任务 因故暂停正在迁移的任务,比如:当迁移任务并发数超过系统的限制时,暂停部分次要迁移任务,优先执行重要的迁移任务。 单击任务操作列的“停止”按钮 。 仔细阅读弹出窗口中的内容后单击“确定”,暂停该迁移任务。
目的端AK/SK 访问权限控制 用户个人数据通过加密后存储在对象存储迁移服务数据库中,数据库的访问需要通过白名单的认证与授权。 API接口限制 用户调用API接口时,需要使用IAM Token进行认证。
虑网络环境的情况下分析迁移速度慢的原因可能有下面几个方面: 大量的小对象 由于每个迁移任务的最大并发数是固定的,导致同时在迁移的对象数是有限制的。迁移前会列举对象,每个对象迁移完成后,都会对比源端和目的端是否一致。相比于迁移大对象,迁移同样大小的数据量,会有更多的列举对象和对比对象操作带来的时间消耗。
操作步骤 登录阿里云函数计算控制台,在左侧导航栏,单击函数。 在顶部菜单栏,选择地域,然后在函数页面,单击创建函数。 创建的函数需要与源端桶在同一区域。 在创建函数页面,选择事件函数,配置以下参数,然后单击创建。 表1 参数配置说明 参数 配置说明 函数名称 用户自定义。 运行环境 选择Python3。
登录腾讯云函数服务 Serverless 控制台,在左侧导航栏,单击函数服务。 在页面上方选择地域,单击新建,进入新建页面。 创建的函数需要与源端桶在同一区域。 在新建函数页面,选择“从头开始”。 函数类型:选择“事件函数” 函数名称:默认填充,可根据需要自行修改。 运行环境:选择Python3