检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
源端同步请求函数工作流创建与配置完成后,需要配置测试事件来进行检验。 单击“代码”页签,在代码源区域的下拉菜单中选择“配置测试事件”,弹出配置测试事件页面,如图6所示。配置相关参数,参见表4。 图6 配置测试事件 表4 参数配置说明 参数 配置说明 配置测试事件 选择创建新的测试事件
r.uri = r.uri + "?" + queryString (可选)展开“高级配置”,您可以根据实际需求修改环境配置、权限配置、层配置、网络配置等,详情参见函数相关配置。 配置触发器,在“创建触发器”中选择自定义创建。 触发方式:选择“COS触发”。 COS Bucket:选择同步任务的源端桶。
阿里云OSS配置同步请求 背景信息 创建同步任务后,您需要在源端配置同步请求,以确保源端云服务商的对象存储服务可以针对源端新增、修改对象实时调用OMS同步接口(例如,通过消息通知或函数计算服务方式),以完成对源端新增、修改对象数据的同步迁移。 配置条件 实时获取源端新增、修改对象名称。
使用“回源配置方案”迁移增量对象数据 本节指导用户使用回源配置方案迁移增量对象数据。 优势 此方案优势在于: 业务零中断,增量迁移间未同步的数据通过回源配置保证用户无感知。 可靠性高,割接前可提前验证,迁移后可校验。 操作流程 “回源配置方案”迁移增量对象数据流程图,如图1所示。
各云服务商配置同步请求教程 阿里云OSS配置同步请求 腾讯云COS配置同步请求
询功能,可用于支撑安全分析、合规审计、资源跟踪和问题定位等常见应用场景。 CTS的详细介绍和开通配置方法,请参见CTS快速入门。 图1 云审计服务 日志 用户开通云审计服务并创建和配置追踪器后,CTS可记录与对象存储迁移服务相关的操作事件。 详细的操作列表以及查看方法,请参见查看审计日志。
在迁移开始前,华为云OMS服务会先对源端存储系统中的数据进行识别,包括对象大小、最后修改时间以及位置等关键信息。基于这些信息,服务会为用户生成一个对应的迁移任务配置,确保迁移过程的高效性和准确性。 父主题: 迁移工作原理
创建同步任务后,该任务状态显示为同步中,仅代表可以接受源端发送的同步请求并进行同步,需要您前往源端完成同步请求的配置,详情请参见源端配置同步请求。通过源端配置,使得源端新增/修改对象能够发送同步请求。配置完成后,您的数据将开始进行同步迁移。 已停止 表明停止对源端对象存储服务数据的同步。 说明:
腾讯云 谷歌云 七牛云 青云 百度云 金山云 优刻得 支持的功能 功能 说明 创建同步任务 填写源端和目的端AK/SK并配置同步任务参数。 源端配置同步请求 源端配置同步请求,以确保源端云服务提供商的对象存储服务可以针对源端新增、修改对象实时调用OMS同步接口(例如通过消息通知或函数
config 使用交互式配置生成配置文件。 输入配置命令。 ./ossutil64 config 根据提示设置配置文件路径。 建议直接按回车使用默认配置文件的路径。 根据提示设置工具的语言。 请输入语言CH或EN。工具使用的语言默认与操作系统保持一致。该配置项将在此次config命令设置成功后生效。
业务割接方案最佳实践 使用“回源配置方案”迁移增量对象数据 使用“源端/目的端双写方案”方案迁移增量对象数据 使用"多次同步方案"迁移增量对象数据
数据迁移 根据迁移配置,华为云OMS服务会开始从源端存储系统拉取数据。同时,服务会确保数据的完整性和一致性,避免在迁移过程中出现数据丢失或损坏的情况。服务还支持断点续传功能,当迁移过程中出现网络中断或其他异常情况时,服务可以从断点处恢复传输,确保数据的完整性和迁移的连续性。 父主题:
公开读取的CDN常见原因:在CDN配置了防盗链接。 非公开读取的CDN原因为:在OMS控制台配置迁移任务/任务组时,未启用CDN权鉴校验。 解决方法: 针对公开读取的CDN配置了防盗链,建议关闭防盗链。如果基于安全考虑,无法关闭防盗链,可联系华为云技术支持。 针对非公开读取的CDN,在配置迁移任务/任
的数据)并确认选择。 配置需要的高级参数并创建任务,即可迁移已选择的根目录数据。 对象前缀方式 在创建任务时,迁移方式选择“输入对象前缀”。 在输入框键入需要迁移的对象前缀(包括根目录下的数据)并单击“添加”。 如需迁移多个不同前缀对象,可继续添加。 配置需要的高级参数并创建任务,即可迁移已添加的根目录数据。
OMS服务请求获取源端对象元数据。 源端响应对象元数据。 OMS服务请求获取目的端对象元数据。 目的端响应对象元数据。 根据对象元数据判断对象是否需要迁移。 若迁移任务配置“同名对象覆盖方式”选择“不覆盖”或者“全覆盖”,则步骤5~7跳过。 OMS服务请求获取源端对象数据。 源端响应对象数据。 OMS服务将对象数据写入目的端。
AK/SK。为防止大量任务阻塞在等待中,请控制创建任务的频率。 如果单个对象大小超过500G,建议您通过提交工单的方式,开通并发分片白名单配置,提升迁移速率。 在迁移过程中,系统将自动在目的端桶创建一个名为“OMS”的临时文件夹。严禁手动操作此文件夹,包括但不限于修改、删除或添加
迁移成功,但是迁移进度显示为0%;总容量有数据,但是已传输容量显示为0。 问题分析 该现象一般出现在增量迁移场景。创建增量迁移任务时,在“源端配置选项”区域,元数据迁移方式选择了“保留元数据”。增量迁移时,如果源端对象仅元数据信息发生变化,对象的内容、大小并没有改变,则仅迁移改变的元
启失败的迁移任务。 确认目的端桶的基础配置中是开启了默认加密,如果需要此功能,请重新创建相同源端和目的端的任务,并在第二步设置任务参数时,在目的端配置选项的服务端加密参数勾选KMS。 如果目的端桶开启了默认加密,但不需要此功能,请在基础配置中关闭默认加密,并重启失败任务。 如果目
填写“桶自定义域名”。 检查 单击“检查”按钮,检查参数设置是否正确。 检查未通过,请单击“详情”查看未通过的原因。 检查通过,继续进行其他迁移配置。 设置“目的端配置选项”区域参数。 服务端加密。目的端为并行文件系统(PFS)时,不支持KMS加密。 不勾选“KMS”,迁移后对象均不加密。 勾选
填写“桶自定义域名”。 检查 单击“检查”按钮,检查参数设置是否正确。 检查未通过,请单击“详情”查看未通过的原因。 检查通过,继续进行其他迁移配置。 设置“目的端配置选项”区域参数。 服务端加密。目的端为并行文件系统(PFS)时,不支持KMS加密。 不勾选“KMS”,迁移后对象均不加密。 勾选