检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
SAP是否支持分页读取视图? SAP支持读取视图,但可能存在数据重复或丢失的问题。因为SAP读取视图会调用/SAPDS/RFC_READ_TABLE2函数,该函数到SAP读取视图时会导致分页错乱。 父主题: 数据集成普通任务
common_task_details TaskStatisticDetails object 每种状态任务的数量信息。 cdc_task_details TaskStatisticDetails object 每种状态任务的数量信息。 表4 TaskStatisticDetails 参数 参数类型
List<MetaData> 数据源的元数据定义对象,仅当“是否解析(is_parse)”选择“是”时需要配置。 对于FTP数据源类型,元数据必须按照文件中的字段顺序填写。 数据源为API、FTP配置。 path 否 String 文件路径,文件型数据源,为必填项。 write_mode
数据集成任务规定了源端到目标端的数据集成规则,包括两端的数据类型、数据字段的映射规则、数据集成的过滤条件等。ROMA Connect支持创建两种数据集成任务: 创建数据集成任务:普通数据集成任务,有定时任务和实时任务两种集成模式,支持所有默认类型的数据源,对于数据库类型数据源,只支持源端一个数据表到目标端一个数据表的集成同步。
字段在源数据中的获取路径。 响应参数 表9 响应参数 参数 参数类型 描述 num_success Integer 数据写入成功数。 num_fail Integer 数据写入失败数。 fail_datas List<Object> 处理失败的数据列表。 父主题: 数据集成开发指导
success_count Integer 成功的个数。 最小值:0 最大值:999999 failure_count Integer 失败的个数。 最小值:0 最大值:999999 failure Array of TaskBeanFacade objects 失败的详情。 数组长度:0
"col_seq":{ "index_0":"源表字段1", "index_1":"源表字段2", "index_2":"源表字段3" } } 父主题: 数据集成普通任务
源端Mysql增量采集每小时执行一次时部分数据丢失 原因分析 任务中配置的时间戳字段为updatetime,源端数据库中createtime记录了数据插入的时间,查看未采集到的数据,updatetime要早于createtime,导致任务运行时数据还没有插入updatetime的时间已
、设备客户端ID、具有订阅权限的Topic、发送控制消息的API的访问地址、访问端口、消息内容。 public static void main(String[] args) { // 示例仅用作测试或示意,API认证的appKey为敏感信息,请勿硬编码使用
"APIG.1002", "error_msg" : "Incorrect token or token resolution failed" } 状态码: 403 Forbidden { "error_code" : "APIG.1005", "error_msg"
Data Capture),即数据变更抓取,通过为源端数据源开启CDC,ROMA Connect可实现数据源的实时数据同步以及数据表的物理删除同步。 本章节主要介绍如何为SQL Server数据库开启CDC功能。 约束与限制 若SQL Server数据库为主从模式,不支持使用SQL
否 String 源端数据源ID,可为空。 最小长度:0 最大长度:64 target_datasource_id 否 String 目标端数据源ID,可为空。 最小长度:0 最大长度:64 datasource_id 否 String 源端或者目标数据源ID,可为空。 最小长度:0
probably contains events generated with statement or mixed based replication forma”错误 问题描述 组合任务运行失败,界面报错为binlog probably contains events generated
配置流量控制2.0策略 ROMA Connect支持通过插件策略的方式,为API提供灵活的扩展能力。流量控制2.0策略可限制单位时间内API的被调用次数,保护后端服务。 插件策略和API本身相互独立,只有为API绑定插件策略后,插件策略才对API生效。为API绑定插件策略时需指定
pe 否 String 源端数据源类型。 source_datasource 否 String 源端数据源名称。 source_ds_id 否 String 源端数据源ID。 target_datasource_type 否 String 目标端数据源类型。 target_datasource
部署并发布数据API。 调用“部署后端API”接口,部署数据后端并发布一个数据API,获取返回的前端数据API编号。 (可选)若需要为数据API添加请求参数,则需要调用“修改API”接口为数据API添加请求参数。 为数据API绑定独立域名。 调用“绑定域名”接口,为数据API绑定一个独立域名,并获取返回的域名编号。
表名 填写要插入数据的数据表名。 插入数据 填写插入操作中目标字段的值。 表3 更新记录 参数 说明 表名 填写要更新数据的数据表名。 更新数据 填写更新操作中目标字段的值。 WHERE条件 填写要更新数据的条件。 表4 删除记录 参数 说明 表名 填写要删除数据的数据表名。 WHERE条件
选择或者填写数据库中要删除数据的表名。 WHERE条件 配置要删除数据的条件值(注意值要用英文单引号包住)。 表6 同步数据 参数 说明 表名 选择或者填写数据库中要同步数据的表名。 清空表 每次同步数据,是否先清空表。 表7 自定义SQL 参数 说明 执行语句 填写操作数据库的原生SQL语句。
acle数据库中,实现两个数据库之间的高效、准确的数据更新与同步。 该方案不仅能够减少人工操作带来的错误和遗漏,Oracle数据库中的数据都能反映出MySQL数据库的最新状态,满足业务系统的数据需求和数据分析的一致性要求。 父主题: 定时同步MySQL中的数据到Oracle
支持的动作 添加数据 查询数据 删除数据 配置参数 表1 添加数据 参数 说明 Collection名称 选择或者填写要添加数据的Collection名称。 添加数据 填写要添加数据的字段名和字段值。 表2 查询数据 参数 说明 Collection名称 选择或者填写要查询数据的Collection名称。