检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
否 String 源端表字段的名称。 source_column_type 否 String 源端表字段的类型。 source_column_length 否 String 源端表字段的长度。 target_column 否 String 目标端字段的名称。 target_column_type
A Connect可实现数据源的实时数据同步以及数据表的物理删除同步。 本章节主要介绍如何为SQL Server数据库开启CDC功能。 约束与限制 若SQL Server数据库为主从模式,不支持使用SQL Server从库。 不支持采集二进制类型的字段,例如:BINARY,VARBINARY,IMAGE。
构造器详情 public KafkaProducer(Map configs) 构造一个Kafka消息生产者 参数:configs表示Kafka的配置信息 方法列表 返回类型 方法和说明 org.apache.kafka.clients.producer.RecordMetadata produce(String
满足当前条件时,表示传入“分支判断”节点的数据满足指定的表达式时,将执行该分支上的步骤。 不满足其他条件时,表示传入“分支判断”节点的数据不满足其他所有分支的条件时,将执行该分支上的步骤。 表达式 当前条件分支的表达式。 如图1所示,1号标记位置的"且或"逻辑表示外层逻辑组的关联关系,单击5号标记位置的“添加组”添加外层逻辑组。
配额说明 配额限制 配额是指用户在ROMA Connect实例中可创建的资源数量限制,具体的资源配额限制如下表所示。 在高并发情况下会出现略超最大配额数限制的情况,不影响资源的正常使用。 表1 实例资源配额限制 组件 资源 最大配额(个) 是否支持修改配额 集成应用 集成应用 100
选择是否启用日志记录,仅启用后才能查看API的调用日志。 日志组 选择日志流所在的日志组。 如果没有可选的日志组,单击“查看日志组”,跳转到云日志服务管理控制台,并创建一个日志组,具体操作请参考创建日志组。 日志流 选择API调用日志要存储的日志流。 如果没有可选的日志流,单击“查看日志流”,跳
参数 配置说明 数据源名称 填写数据源的名称,根据规划自定义。建议您按照一定的命名规则填写数据源名称,方便您快速识别和查找。 描述 填写数据源的描述信息。 扩展ABM集群 选择对应的扩展ABM集群实例来采集该数据源的模型数据。 数据湖分层 选择对应的数据湖分层:业务数据层/操作数据层
选择是否启用日志记录,仅启用后才能查看API的调用日志。 日志组 选择日志流所在的日志组。 如果没有可选的日志组,单击“查看日志组”,跳转到云日志服务管理控制台,并创建一个日志组,具体操作请参考创建日志组。 日志流 选择API调用日志要存储的日志流。 如果没有可选的日志流,单击“查看日志流”,跳
选择数据源所归属的集成应用。 描述 填写数据源的描述信息。 URL 填写服务器的IP地址和端口,格式为:ldap://ip:port。 ip为数据库的访问地址。 port为数据库的访问端口。 安全认证类型 数据库的安全认证类型,目前仅支持“Simple”。 用户名 数据库的登录用户名。
Site协同版实例中的API调用日志,并通过ELK的Kibana可视化界面查看API的调用日志以及实现API调用日志的汇聚统计。 Filebeat部署在APIC的SHUBAO组件所在节点上,监控API调用日志的产生,并将其发送到ELK的Logstash进行处理。 ELK部署在独立服务器中,
头中X-Subject-Token的值)。 表3 请求Body参数 参数 是否必选 参数类型 描述 env_id 是 String 需要授权的环境编号 最小长度:1 最大长度:65 app_ids 是 Array of strings APP的编号列表 api_ids 是 Array
对称加解密 “对称加解密”处理器用于使用指定的对称加密算法对明文进行加密、对密文进行解密操作。 配置参数 参数 说明 操作 当前支持对称加密、对称解密、HMAC签名、HMAC验签。 加密算法 对称加/解密当前支持AES算法。 HMAC签名/验签当前支持HMAC算法。 加密模式 仅
更新redis缓存内容 输入参数 key:待更新缓存的key值 value:待更新缓存的value值 返回信息 返回执行结果 public Long remove(String key) 删除指定key值的缓存消息 输入参数 key:待删除缓存的key值 返回信息 返回执行结果 父主题: 自定义后端开发(函数后端)
06,以数据库的实际配置为准。 数据库名 填写数据表所在的数据库名称。 编码格式 数据库所使用的编码格式。 超时时间(秒) 连接数据库的超时时间,单位为秒。 用户名 访问数据库的用户名,且该用户具备数据库的读写权限。 密码 访问数据库的用户密码。 完成数据源参数配置后,单击“开始检测”,进行数据源的连接测试
否 String 源端表字段的名称。 source_column_type 否 String 源端表字段的类型。 source_column_length 否 String 源端表字段的长度。 target_column 否 String 目标端字段的名称。 target_column_type
配置说明 分组名称 填写API分组的名称,根据规划自定义。建议您按照一定的命名规则填写API分组名称,方便您快速识别和查找。 可见范围 选择API分组的可见范围,此处选择“集成应用”。 集成应用 选择2中创建的集成应用。若没有可用的集成应用,可单击右侧的“新建集成应用”,创建一个集成应用。
例中有多个任务并发运行的情况下,受限于多个任务抢占CPU、内存等资源,任务的性能相比单个任务运行的性能会有不同程度的下降。 普通任务 ROMA Connect支持的数据集成普通任务中不同类型数据源的性能参考如下表所示。 DWS数据源作为目标端时,目标表里的数据量越多,写入速率会越慢。
附录:API的Swagger扩展定义 ROMA Connect在Swagger原有定义的基础上,定义了特有的API定义项,即扩展定义,如认证方式、后端服务定义等。本章节主要介绍API使用的扩展定义。 1:x-apigateway-auth-type 含义:基于Swagger的apiKey认证格式,定义ROMA
附录:API的Swagger扩展定义 ROMA Connect在Swagger原有定义的基础上,定义了特有的API定义项,即扩展定义,如认证方式、后端服务定义等。本章节主要介绍API使用的扩展定义。 1:x-apigateway-auth-type 含义:基于Swagger的apiKey认证格式,定义ROMA
server-id的值应为大于1的整数,请根据实际规划设置,并且在创建数据集成任务时设置的“Server Id”值需要此处设置的值不同。 expire_logs_days为Binlog日志文件保留时间,超过保留时间的Binlog日志会被自动删除,应保留至少2天的日志文件。 “gtid_mode