检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
填写数据源的名称,根据规划自定义。建议您按照一定的命名规则填写数据源名称,方便您快速识别和查找。 集成应用 选择数据源所归属的集成应用。 描述 编辑数据源的描述信息。 连接地址 填写Kafka的连接地址和端口号。 如果Kafka有多个副本(Broker),可单击“添加地址”填写多个连接地址。 是否SSL
以上面JSON/XML格式数据中含数组的样例为例,目标端为API的配置示例如下所示。 分页配置示例,pageNo和pageSize为API的分页参数,需要同时在请求参数中添加。 图1 API分页配置示例 增量迁移配置示例,startTime和endTime为API的时间参数,需要同时在请求参数中添加。 图2 API增量迁移配置示例
Connect进行数据集成前,您需要准备一个API数据源和MQS数据源,作为本配置样例中的源端和目标端数据源。 创建并发布一个函数API。 在当前ROMA Connect实例上创建、调试并发布一个API,作为源端API数据源,具体请参考创建API、调试API和发布API。 为简单起见,该函数API
任务配置采用拖拽节点的方式实现参数配置,简化流程。 编排模式的数据转换模式分为映射模式和脚本模式。JavaScript脚本能够实现从源端读取数据后先进行处理再写入目标端。 前提条件 ROMA Connect已接入源端和目标端数据源,具体请参考接入数据源。 ROMA Connect具备向目标端数据源写入数据的权限。
以上面JSON/XML格式数据中含数组的样例为例,目标端为API的配置示例如下所示。 分页配置示例,pageNo和pageSize为API的分页参数,需要同时在请求参数中添加。 图1 API分页配置示例 增量迁移配置示例,startTime和endTime为API的时间参数,需要同时在请求参数中添加。 图2 API增量迁移配置示例
规范查询字符串需要满足以下要求: 根据以下规则对每个参数名和值进行URI编码: 请勿对RFC 3986定义的任何非预留字符进行URI编码,这些字符包括:A-Z、a-z、0-9、-、_、.和~。 使用%XY对所有非预留字符进行百分比编码,其中X和Y为十六进制字符(0-9和A-F)。例如,空格字符必须编码为
ConsumeConcurrentlyStatus.CONSUME_SUCCESS; } }; //注册回调实现类来处理从RocketMQ拉取回来的消息 rocketMQConsumer.registerMessageList
compareValue:过滤值,支持数字和字符串类型。其中运算符为like时,过滤值支持以%开头和结尾进行模糊匹配,例如'%ab',匹配以ab结尾的字符串,'ab%'匹配以ab开头的字符串,'%ab%',匹配包含ab的字符串。 arrayFilter()和arrayOperation()
String 标签名称。 以字母或者数字开头和结尾,由字母、数字、连接符('-')、下划线('_')、点号('.')组成且63个字符之内。 最小长度:1 最大长度:63 label_value 是 String 标签值。 以字母或者数字开头和结尾,由字母、数字、连接符('-')、下划线('_')、点号('
Invalid application name. 应用名称无效。 检查输入参数应用名称满足1到256位支持英文大小写,数字,中文,下划线和中划线和点。 400 ROMA.4001030 The application description is too long. 应用备注参数长度超出限制。
允许函数API中执行的内存大小。单位:字节。 256 M 1-9536 M livedata_config 是否支持后端服务自定义配置。同时存在sandbox和livedata_config时,优先使用livedata_config。 是 {"name":"sandbox","enable":true
List<Column> 目标端选择的列名列表。 support_part_update 否 Boolean 是否仅更新更改的字段。 如果开启此选项,仅更新值有变化的表字段。如果关闭此选项,则更新所有表字段。 meta_data 否 List<MetaData> 任务目标端数据源类型元数据定义。 path
String 标签名称。 以字母或者数字开头和结尾,由字母、数字、连接符('-')、下划线('_')、点号('.')组成且63个字符之内。 最小长度:1 最大长度:63 label_value String 标签值。 以字母或者数字开头和结尾,由字母、数字、连接符('-')、下划线('_')、点号('
String 标签名称。 以字母或者数字开头和结尾,由字母、数字、连接符('-')、下划线('_')、点号('.')组成且63个字符之内。 最小长度:1 最大长度:63 label_value String 标签值。 以字母或者数字开头和结尾,由字母、数字、连接符('-')、下划线('_')、点号('
段将保存一个随机数,用于标识这一批次的数据。 目标端表中类型为string并且字段长度大于14的字段可以作为批次号字段,且该批次号字段不能和Mapping信息中的目标端字段(target_column)重复。 数据源为DWS、ORACLE配置。 targetSelectedColumnList
TaskBasicRequestBody 参数 是否必选 参数类型 描述 task_name 是 String 任务名称,只能以字母、数字为开头,包含字母、数字和 . _ - 3~100个字符。 最小长度:3 最大长度:100 task_type 是 String 任务类型。 REALTIME (实时)
auth_type)为simple时需要配置。 最小长度:4 最大长度:2147483647 mode 否 String 数据源连接模式,有三种:default (默认模式)、professional (专业模式)、multiAddress (多地址)。 数据源为DWS、MONG