检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
选择已配置的OBS数据源。 Path 填写异常数据要存储到OBS数据源的对象名。Path的值不能以斜杠(/)结尾。 配置完成后,若需要配置任务完成后执行,请前往配置任务完成后执行(可选);否则可直接单击“保存”,完成数据集成任务的配置。 父主题: 创建数据集成任务(普通任务)
延时 “延时”处理器用于创建指定时间的延迟。其典型使用场景是若某步骤为耗时任务,且后续步骤依赖于该步骤的执行结果时,可在两步骤之间添加“延时”处理器,以保证后续步骤可正常执行。 配置参数 参数 说明 延迟时间(ms) 延迟的时长,单位为ms。 父主题: 处理器
”、“周”或“月”。 调度周期 任务执行周期,根据“单位”选择的不同,可设置值的范围不同。 例如“单位”选择“日”,“调度周期”设置为“1”,则表示数据集成任务每天执行一次。需确保调度周期大于任务执行时间,否则将导致任务执行失败。 配置完成后单击“确定”。 编排任务连接及配置。
GMT。 任务模式 并行:总是按照设定周期执行。 串行:当前任务执行完成后才会触发下一次任务,实际执行周期=MAX(任务耗时,周期)。 立即执行一次 启动后是否立即执行一次。 表6 固定时间间隔触发 参数 说明 执行间隔 执行的时间间隔数值。 执行间隔单位 秒。 分钟。 小时。 天。 星期。
选择对应的适配器。 开始执行时间 选择采集任务开始执行的时间。 周期类型 选择任务执行的周期类型,与执行周期配合使用。 例如周期类型为“周”,执行周期为“2”,则表示每两周执行一次该采集任务。 执行周期 与周期类型配合使用,根据所选周期类型配置执行周期。 配置完成后单击“确定”,完成采集任务创建,应用模型采集任务创建完成。
分支名”获取该分支的执行结果。 失败时停止 并行处理出现错误时的是否停止。 True:表示任一并行处理的分支出现错误时,整个任务便停止,并返回错误信息。 False:表示并行处理的分支出现错误后,整个任务会继续执行后续节点。 超时时间(ms) 并行处理过程的最长执行时间,如果超过该时
Connect何时执行任务。 在创建数据集成任务后,如需修改任务计划,请先停止任务。 如果要集成同步的数据量较大,且任务的执行时间间隔较短,会出现上一次任务调度还没有执行完,下一次任务调度时间点已到的情况。此时ROMA Connect会暂停执行新的调度,等待上一次调度执行完成。 在创建任务页面中配置任务计划。ROMA
单击“保存”,开启工作流调试。 执行调试操作,对工作流进行调试。 图4 调试工作流 添加断点:单击工作流中的节点,即可添加断点,工作流在调试过程中可能会停在当前断点。再次单击该节点,可移除断点。 触发器节点、并行处理节点和分支判断节点等不可添加断点。 调试运行:单击“调试运行”,工作流开始执行调试。如果
同步数据库和缓存数据 概述 当模型采集中采集任务执行失败时,采集日志显示数据库和缓存不一致时,可以从数据源和任务的维度,执行同步任务,使数据库和缓存保持一致,解决采集任务异常。 前提条件 已完成采集技术模型和录入业务模型。 操作步骤 登录ROMA Connect,在“实例”页面单
您可以通过流控策略控制单位时间内API被访问的次数,保护后端服务,详情请参考流量控制。 默认的流控策略是单个API的访问不超过6000次/秒,如果您未创建流控策略,APIC会执行默认流控策略。您可以在ROMA Connect实例控制台“实例信息”页面中的“配置参数”页签下,通过修改“ratelimit_api_li
后端测试完成后,在页面右上角单击“部署”,然后在弹窗中单击“确定”,部署数据后端。 发布数据API。 后端部署完成后,在页面右上角单击“发布”。 在发布弹窗中填写发布相关参数,完成后单击“立即发布”,为该后端创建一个对应的前端API,并发布到环境上。 API发布完成后,自动跳转到对应前端API的API运行页面。
检查端口 健康检查的目标端口,默认使用负载通道配置的端口号。 正常阈值 执行健康检查时,判定服务器状态正常的连续检查成功次数。例如“正常阈值”设置为“2”,则在连续2次检查成功时,判定服务器的状态正常。 异常阈值 执行健康检查时,判定服务器状态异常的连续检查失败次数。例如“异常阈值”设
查看实例信息 概述 实例创建完成后,可在控制台查看和编辑实例的配置信息,主要包含基本信息、配置参数、数据字典以及导入导出资产。 操作步骤 在实例控制台的“实例信息”页面中,选择“基本信息”页签,可查看和编辑实例的基本信息。 表1 ROMA Connect基本信息 内容 内容说明 ROMA
的值,即数据内容没有变化。因为从OBS获取多个文件默认按照时间降序排序,先解析最晚上传的文件,所以最早上传的文件最后解析,这样就会导致任务执行结束后,数据库中的值还是最早上传的文件中的值。 父主题: 数据集成普通任务
检查端口 健康检查的目标端口,默认使用负载通道配置的端口号。 正常阈值 执行健康检查时,判定服务器状态正常的连续检查成功次数。例如“正常阈值”设置为“2”,则在连续2次检查成功时,判定服务器的状态正常。 异常阈值 执行健康检查时,判定服务器状态异常的连续检查失败次数。例如“异常阈值”设
Connect的设备集成LINK支持设备通过MQTT协议接入并上报数据。 设备需开发并集成MQTT客户端,并在集成过程中写入设备的接入信息。 开发完成后设备上电并联网,即可接入ROMA Connect。 父主题: 开发说明
接口做了规范定义,具体连接器对数据源的读写功能以及RESTful接口均需要您自行开发,您可以自行选择开发语言进行连接器开发。 连接器开发完成后,您需要自行部署连接器,并确保连接器所在网络与ROMA Connect所在网络互通。 父主题: 开发说明
务列表上方的“启动”,启动任务。任务启动成功后,“任务状态”变为“启动”。 任务启动后,任务状态为“执行中”,待任务状态为“执行成功”,则表示该数据集成任务执行完成。 执行完成后,可在目标端数据库的数据表中查看集成同步过来的数据。 父主题: 跨系统业务数据集成与转换
连接不通,导致FDI任务执行异常。 解决方案 修改在创建MRS Hive数据源时上传的hdfs-site.xml文件中,在hdfs-site.xml文件中添加dfs.client.use.datanode.hostname配置项,值设为true,修改完成后上传修改后的配置文件,重新创建MRS
“分支判断”处理器用于创建条件分支,以决定后续节点的执行逻辑。用户需要在“分支判断”节点与其后续相邻节点的连线上配置各分支的条件。 约束与限制 一个“分支判断”节点中,如果存在多个相同的“满足当前条件时”类型的表达式,最终将执行最先创建的分支上的步骤。 一个“分支判断”节点中,只