检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
因为从OBS获取多个文件默认按照时间降序排序,先解析最晚上传的文件,所以最早上传的文件最后解析,这样就会导致任务执行结束后,数据库中的值还是最早上传的文件中的值。 父主题: 数据集成普通任务
BOTH:同时支持HTTP和HTTPS 缺省值:HTTPS req_method String API的请求方式 req_uri String 请求地址。可以包含请求参数,用{}标识,比如/getUserInfo/{userId},支持 * / %- _ .等特殊字符,总长度不超过512,且满足URI规范。
BOTH:同时支持HTTP和HTTPS 缺省值:HTTPS req_method String API的请求方式 req_uri String 请求地址。可以包含请求参数,用{}标识,比如/getUserInfo/{userId},支持 * / %- _ .等特殊字符,总长度不超过512,且满足URI规范。
间格式:YYYYMMDDTHHMMSSZ。如果API发布到非RELEASE环境时,需要增加自定义的环境名称。 客户端须注意本地时间与时钟服务器的同步,避免请求消息头X-Sdk-Date的值出现较大误差。 ROMA Connect除了校验X-Sdk-Date的时间格式外,还会校验该
"3" timeout: 30000 表7 参数说明 参数 是否必选 类型 说明 address 是 Array 后端服务地址,格式为:{域名或IP}:{PORT}。 scheme 是 String 后端请求协议,支持“http”和“https”。 method 是
obj; } 数据库字段涉及多层json解析。 如果源端数据对象包含的字段涉及多层json对象嵌套,则需要对每一个解析出来的字段使用“[]”引用。 例如如下脚本表示root字段包含id、name、double等多层对象嵌套,则每一个解析的字段需要单独引用。 function excute(sourceObject)
"3" timeout: 30000 表7 参数说明 参数 是否必选 类型 说明 address 是 Array 后端服务地址,格式为:{域名或IP}:{PORT}。 scheme 是 String 后端请求协议,支持“http”和“https”。 method 是
选择实例所关联的安全组。安全组须在准备资源中提前创建。 公网访问 是否开启公网访问ROMA Connect,请根据您的业务需要选择。 弹性IP地址 仅当“公网访问”开启时需要配置。 选择实例所关联的弹性公网IP,弹性公网IP须在准备资源中提前申请。 引擎版本号 选择实例所使用的Kafka服务端版本号,当前支持1
据。 别名:对元数据的自定义名称。 类型:元数据的数据类型,需要与源端数据中对应字段的数据类型一致。 解析路径:元数据的完整路径,具体请参见元数据解析路径配置说明。 元数据解析路径配置说明: JSON格式数据中不含数组 如以下写入目标端的JSON格式数据,元素a的完整路径定义为a,元素b的完整路径为a
Java工程配置文件。 .project 如果使用maven构建,SDK包中“java-sdk-core-x.x.x.jar”的maven仓库地址为https://mirrors.huaweicloud.com/repository/maven/huaweicloudsdk/,配置m
腾讯问卷 腾讯问卷连接器用于实现在工作流中通过配置操作腾讯问卷相关功能。 腾讯问卷是腾讯推出的在线问卷调查平台,提供从问卷设计、数据采集到统计分析的⼀站式专业调查研究服务。 创建腾讯问卷连接 登录新版ROMA Connect控制台。 在左侧导航栏选择“连接器”,在连接器页面单击“新建连接”。
identification.algorithm= 示例代码中的参数说明,可参考获取MQS连接信息获取参数值。 bootstrap.servers:MQS连接地址和端口。 username和password:开启SASL_SSL认证时所使用的用户名和密码。 ssl.truststore.locati
问卷星 问卷星连接器用于实现在工作流中通过配置操作问卷星相关功能。 问卷星是一个专业的在线问卷调查、考试、测评和投票平台,专注于为用户提供功能强大、人性化的在线设计问卷、采集数据、自定义报表、调查结果分析等系列服务。 创建问卷星连接 登录新版ROMA Connect控制台。 在左
规格变更说明 方案概述 ROMA Site协同版实例规格变更目前仅支持实例从3VM的基础版扩容为4VM的专业版,即增加一台同规格虚拟机。各集成组件强制依赖实例,不可单独变更。 ROMA Site协同版实例规格变更包含站点规格变更和实例规格变更两部分。其中实例规格变更时,又可分为新站点容器扩容和已有容器升级两种场景。
Github Github连接器用于连接GitHub平台。 GitHub是一个面向开源及私有软件项目的托管平台,主要用于版本控制和协同开发。它提供了基于Git版本控制系统的代码托管服务,除了基本的代码仓库管理外,还提供了诸如wiki、issue tracker、代码审查等功能。 创建Github连接
BOTH:同时支持HTTP和HTTPS 缺省值:HTTPS req_method String API的请求方式 req_uri String 请求地址。可以包含请求参数,用{}标识,比如/getUserInfo/{userId},支持 * / %- _ .等特殊字符,总长度不超过512,且满足URI规范。
roma_app_enable,auto_topic_switch,feature.physerver.kafka.user.manager,route,kafka.new.pod.port,feature.physerver.kafka.topic.modify,message_trace_enable
实时:指数据集成任务不断检测源端数据的变更,并实时将新增的数据集成到目标端。 不同数据源所支持的数据集成模式有所不同,具体请参考表1。 是否解析 选择是否透传数据。透传,即透明传输(pass-through),指的是将传输的内容由源端传输到目标端,不对数据内容做任何改变。 是:不会透传数据。
相关概念 组合应用 组合应用可进行应用的复合集成,通过开放的API和事件通道进行应用的多次组装,形成新的组合应用,实现业务的快速复制创新,形成千人千面的集成体验。 连接器 iPaaS连接器是一种云服务,能够用于连接应用程序、数据和设备,以实现各种集成方案。连接器提供了预构建的连接
磁盘挂载到指定目录:/opt/roma/data和/opt/roma/logs 变更前请确认新增节点机器端口是否开放正常。 用户准备好虚拟机资源后,需要检查虚拟机是否开放了各组件需要的端口,其中,对外服务端口为7000、40001-40010、80、443、9092、9094、1883、